热线电话:13121318867

登录
2019-01-25 阅读量: 877
Shuffle过程是啥样?

Shuffle过程是啥样?

答:

从 Map 输出到 Reduce 输入的整个过程可以广义地称为 Shuffle。 Shuffle 横跨 Map 端和 Reduce 端, 在 Map 端包括 Spill 过程, 在 Reduce 端包括 copy 和 sort 过程, 如图所示:

0.0000
3
关注作者
收藏
评论(0)

发表评论

暂无数据
推荐帖子