美文网首页
2020-12-15

2020-12-15

作者: FrankXu0808 | 来源:发表于2020-12-15 22:01 被阅读0次

1.

image.png
2. image.png
3. image.png
4.不是所有场景都能用combiner
5.父类强制转化为子类
https://www.jianshu.com/p/2f5f4b570aa9
6.ReduceTask的并行度与MapTask的并行度由切片数决定不同的是,其可以手动设置。
7.如果分区数不是1,但是ReduceTask为1,是否执行分区过程。答案是:不执行分区过程。因为在MapTask的源码中,执行分区的前提是先判断ReduceNum个数是否大于1,大于1就不执行。

相关文章

网友评论

      本文标题:2020-12-15

      本文链接:https://www.haomeiwen.com/subject/xhoigktx.html