`
tangjunliang
  • 浏览: 106751 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

安装CDH5 hadoop2.2.0遇到的配置问题

阅读更多
hadoop版本: cloudera hadoop2.2 CDH5

    今天在安装hadoop后,启动start-yarn.sh后,nodemanager起不起来,后来查看DN节点的日志,报了以下一个错误:
 FATAL org.apache.hadoop.yarn.server.nodemanager.NodeManager: Error starting NodeManager  
java.lang.IllegalArgumentException: The ServiceName: mapreduce.shuffle set in yarn.nodemanager.aux-services is invalid.The valid service name should only  
 contain a-zA-Z0-9_ and can not start with numbers 


解决办法:
修改yarn-site.xml文件:
<property>  
        <name>yarn.nodemanager.aux-services</name>  
        <value>mapreduce_shuffle</value>  
</property>  


是由于yarn.nodemanager.aux-services配置错误导致。

这个我有个纳闷点,在使用cloudera CDH4 hadoop2.0版本时,这个配置的值设置的是mapreduce.shuffle,而且查了这个值的默认就是这个,为什么在CDH5版本中变成了下划线不得而知。
分享到:
评论
1 楼 zenoh 2013-11-13  
是啊,我也纳闷,apache hadoop2.2.0的已经修复了这个bug,但是cdh5 hadoop2.2.0却还没有,不是说cdh5的bug修复优先于apache的版本吗

相关推荐

Global site tag (gtag.js) - Google Analytics