首先分5中情况: 1,spark master进程挂掉了 2,spark master在执行中挂掉了 3,spark worker提交任务前全部挂掉了 4,spark worker在执行application过程中挂掉了…
标签:worker
spark系列——Executor启动过程分析
前言 本篇文章将以问答的方式对Executor的启动进行分析。 1. executor在什么时候开始启动? 新app的加入和集群资源的变动将调用到Master的schedule方法,这个时候会进行startExecuto…