1. 首页
  2. 文章资讯

Hadoop3：MR程序优化的相关参数介绍

40 阅读 0 评论

一、Map阶段

在这里插入图片描述

二、Reduce阶段

在这里插入图片描述
4和5的参数配置，一般保持一致

三、总结

可以看出，优化的主要过程，就是Shuffle阶段
能不用Reduce，尽可能不用！

本站资源均来自互联网，仅供研究学习，禁止违法使用和商用，产生法律纠纷本站概不负责！如果侵犯了您的权益请与我们联系！

转载请注明出处： 免费源码网-免费的源码资源网站 » Hadoop3：MR程序优化的相关参数介绍

点赞(0) 打赏

评论列表 共有 0 条评论

暂无评论

微信公众账号

微信扫一扫加关注

 发表
评论 返回
顶部