在Ubuntu 上运行Hadoop_Hadoop,ERP及大数据讨论区_Weblogic技术|Tuxedo技术|中间件技术|Oracle论坛|JAVA论坛|Linux/Unix技术|hadoop论坛_联动北方技术论坛  
网站首页 | 关于我们 | 服务中心 | 经验交流 | 公司荣誉 | 成功案例 | 合作伙伴 | 联系我们 |
联动北方-国内领先的云技术服务提供商
»  游客             当前位置:  论坛首页 »  自由讨论区 »  Hadoop,ERP及大数据讨论区 »
总帖数
1
每页帖数
101/1页1
返回列表
0
发起投票  发起投票 发新帖子
查看: 2879 | 回复: 0   主题: 在Ubuntu 上运行Hadoop        上一篇   下一篇 
JAY拓海
注册用户
等级:新兵
经验:66
发帖:1
精华:0
注册:2015-5-24
状态:离线
发送短消息息给JAY拓海 加好友    发送短消息息给JAY拓海 发消息
发表于: IP:您无权察看 2015-12-7 15:37:46 | [全部帖] [楼主帖] 楼主

运行一个MapReduce任务,跟运行单节点时方法一样

 java.io.IOException: Incompatible namespaceIDs

 

 如果你看到错误java.io.IOException: Incompatible namespaceIDs in the logs of a datanode (<HADOOP_INSTALL>/logs/hadoop-hadoop-datanode-  

 <HOSTNAME>.log), 很可能是因为你遇到了 HADOOP-1212 这个bug(反正我是遇到了).

 

... ERROR org.apache.hadoop.dfs.DataNode: java.io.
IOException: Incompatible namespaceIDs in /usr/local/hadoop-datastore/hadoop-  
hadoop/dfs/data: namenode namespaceID = 308967713; datanode namespaceID = 113030094
        at org.apache.hadoop.dfs.DataStorage.doTransition(DataStorage.java:281)
        at org.apache.hadoop.dfs.DataStorage.recoverTransitionRead(DataStorage.java:121)
        at org.apache.hadoop.dfs.DataNode.startDataNode(DataNode.java:230)
        at org.apache.hadoop.dfs.DataNode.<init>(DataNode.java:199)
        at org.apache.hadoop.dfs.DataNode.makeInstance(DataNode.java:1202)
        at org.apache.hadoop.dfs.DataNode.run(DataNode.java:1146)
        at org.apache.hadoop.dfs.DataNode.createDataNode(DataNode.java:1167)
        at org.apache.hadoop.dfs.DataNode.main(DataNode.java:1326)

解决方案

1. 停止集群
2. 删除conf/hadoop-site.xml中dfs.data.dir指定目录中的data目录,比如/your/path/to/hadoop/tmp/dir/hadoop-hadoop/dfs/data
3. 重新格式化集群文件系统






                                                                                                                 --转自



赞(0)    操作        顶端 
总帖数
1
每页帖数
101/1页1
返回列表
发新帖子
请输入验证码: 点击刷新验证码
您需要登录后才可以回帖 登录 | 注册
技术讨论