hadoop常见错误及解决方法 _Hadoop,ERP及大数据讨论区_Weblogic技术|Tuxedo技术|中间件技术|Oracle论坛|JAVA论坛|Linux/Unix技术|hadoop论坛_联动北方技术论坛  
网站首页 | 关于我们 | 服务中心 | 经验交流 | 公司荣誉 | 成功案例 | 合作伙伴 | 联系我们 |
联动北方-国内领先的云技术服务提供商
»  游客             当前位置:  论坛首页 »  自由讨论区 »  Hadoop,ERP及大数据讨论区 »
总帖数
2
每页帖数
101/1页1
返回列表
0
发起投票  发起投票 发新帖子
查看: 3217 | 回复: 1   主题: hadoop常见错误及解决方法         上一篇   下一篇 
大红薯
注册用户
等级:少校
经验:1440
发帖:159
精华:0
注册:2011-7-21
状态:离线
发送短消息息给大红薯 加好友    发送短消息息给大红薯 发消息
发表于: IP:您无权察看 2015-5-6 10:08:26 | [全部帖] [楼主帖] 楼主

1、解决"no datanode to stop"问题
jps 中看不到namenode
删除/tmp 文件中 红色框 中的文件
北京联动北方科技有限公司

节点

$rm -rf /usr/hadoop/tmp/*
$rm -rf /tmp/hadoop*


主管理

$rm -rf /usr/hadoop/tmp/*
$rm -rf /tmp/hadoop*
$hadoop namenode -format
$start-all.sh


2、节点jps没有datanode 和tasktracker 进程

查看节点日志 cat hadoop-hadoop-datanode-Slave2.Hadoop.log日志

ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: java.lang.IllegalArgumentException: Does not contain a valid host:port authority: file:///
at org.apache.hadoop.net.NetUtils.createSocketAddr(NetUtils.java:164)
Master core-site.xml
<property>
<name>fs.default.name</name>
<value>hdfs://192.168.19.100:9000</ value>
</property>


找个3天才发现,配置节点的时候遗漏的内容。


解决方式:因为需要在每个节点上配置core-site.xml文件 、 mapred-site.xml文件 、hdfs-site.xml文件、mapred-site.xml文件和conf/Master文件
,所以建议在Master机上 scp -r /usr/hadoop root@节点IP:/usr/  这样只需要修改下conf/slaves文件即可。

3、:50070/nn_browsedfscontent.jsp 无法打开
因为用的虚拟机进行测试,本机电脑无法浏览,但是在虚拟机里面可以打开。

--转自 北京联动北方科技有限公司




赞(0)    操作        顶端 
feiaa
注册用户
等级:列兵
经验:87
发帖:0
精华:0
注册:2015-5-6
状态:离线
发送短消息息给feiaa 加好友    发送短消息息给feiaa 发消息
发表于: IP:您无权察看 2015-5-7 9:47:21 | [全部帖] [楼主帖] 2  楼

高da上.



赞(0)    操作        顶端 
总帖数
2
每页帖数
101/1页1
返回列表
发新帖子
请输入验证码: 点击刷新验证码
您需要登录后才可以回帖 登录 | 注册
技术讨论