2019-01-25
阅读量:
877
Shuffle过程是啥样?
Shuffle过程是啥样?
答:
从 Map 输出到 Reduce 输入的整个过程可以广义地称为 Shuffle。 Shuffle 横跨 Map 端和 Reduce 端, 在 Map 端包括 Spill 过程, 在 Reduce 端包括 copy 和 sort 过程, 如图所示:







评论(0)


暂无数据
推荐帖子
0条评论
1条评论
0条评论