Spark Shuffle(ExternalSorter) 2019年6月8日 Spark 0条评论 233次阅读 0人点赞 1、Shuffle流程 spark的shuffle过程如下图所示,和mapreduce中的类似,但在spark2.0及之后的版本中只存在SortShuffleManager而将原来的HashShuffleManager废…