Spark UI中 Shuffle Exchange 和 BroadcastExchange 中的 dataSize 值为什么不一样
背景Spark3.5最近在看SparkUI上的一些指标看到一个很有意思的东西,相邻的ShuffleExechange和BroadcastExechange中的datasize居然不一样,前者为765KB,后者为64.5MB。差别还不少,中间就增加了一个AQEShuffleRead计划结论ShuffleExechange中的是真实UnsafeRow的大小BroadcastExechange中的是Me