哈哈!从今天开始认真学习Spark了 SparkContext原理剖析 初始化的工作机制如图: 1).TaskSchedule: 关于TaskScheduler 第一步:创建TaskSchedulerImpl()、Spa…
标签:sparkdeployschedulerbackend
spark:SparkContext原理
1.创建SparkContext会 createTaskScheduler(),DAGScheduler,SparkUI. createTaskScheduler在里面会创建3个对象,TaskSchedulerImpl,…