Spark Worker原理和源码剖析解密

一、Spark Worker原理剖析 二、Worker启动Driver源码解密 三、Worker启动Executor源码解密 四、Worker与Master的交互解密

一、Worker原理内幕和流程机制 二、Worker启动Driver内幕 1、Cluster中的Driver失败的时候，如果supervise为true，则启动该Driver的Worker会负责重新启动该Driver 2、DriverRunner启动进程是通过ProcessBuilder中的process.get.waitFor来完成；