Yarn shuffle OOM错误分析及解决
前两周和同事一起分析了一下yarn shuffle oom的问题，最后他写了一个blog，我这里就不重复写了，把他的转载过来，他的blog写得都很有深度，推荐大家去看看。
最近集群中一些任务经常在reduce端跑出Shuffle OOM的错误，具体错误如下：
2015-03-09 16:19:13,646 WARN [main] org.apache.hadoop.mapred.YarnChild: Exception running child :
声明：该文观点仅代表作者本人，入门客AI创业平台信息发布平台仅提供信息存储空间服务，如有疑问请联系rumenke@qq.com。
- 上一篇：没有了
- 下一篇： hadoop2.0的mapreduce作业classpath研究
copyright © 2008-2019 入门客AI创业平台 版权所有 备案号：湘ICP备2023012770号