spark job,stage,task划分 发表于 2017-03-01 | 分类于 spark action 的触发会生成一个job Job会提交给DAGScheduler,分解成Stage，DAGScheduler 根据shuffle将job划分为不同的stage 同一个stage中包含多个task，这些tasks有相同的 shuffle dependencies