[SPARK][CORE] 面试问题之 BypassMergeSortShuffleWriter的细节
欢迎关注公众号“Tim在路上”BypassMergeSortShuffleWriter就如其名,旁支的sort-baesdShuffle,他是采用Hash-style实现的SortbasedShuffle。在map阶段records会按分区写入不同的文件,一个分区一个文件。然后链接这些分区文件形成一个output文件,并生成其index。reducer通过IndexShuffleBlockReso