温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

怎么解决hadoop安装搭建过程中遇到的问题

发布时间:2021-08-17 11:57:34 阅读:122 作者:chen 栏目:云计算
开发者测试专用服务器限时活动,0元免费领,库存有限,领完即止! 点击查看>>

本篇内容主要讲解“怎么解决hadoop安装搭建过程中遇到的问题”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“怎么解决hadoop安装搭建过程中遇到的问题”吧!

  1. 启动hadoop时,slave节点jps之后缺少datanode:

原因:查看普通用户的datanode log,发现datanode clusterID与namenode clusterID(在/home/zoe/hadoopdata/dfs/name/current/VERSION可以查看namenode clusterID)不一致,可能是由于多次配置hadoop环境后格式化造成的

解决:清空master的"~/hadoopdata",重新格式化;

否则进入hadoop配置文件的core-site.xml,如下编辑:

<configuration>

<property>
<name>dfs.replication</name>
<value>1</value>
</property> 

<property>
  <name>dfs.datanode.data.dir</name>
 <value>/home/zoe/hadoop/hadoopdata/dfs/name/</value>
</property>  
      
<property>
  <name>dfs.datanode.data.dir</name>
  <value>/home/zoe/hadoop/hadoopdata/dfs/data/</value>

改为:<value>namenode clusterID</value>
</property>

</configuration>

    2. 计算pi值时出"no roote to host":

解决:关闭防火墙:service iptables stop

到此,相信大家对“怎么解决hadoop安装搭建过程中遇到的问题”有了更深的了解,不妨来实际操作一番吧!这里是亿速云网站,更多相关内容可以进入相关频道进行查询,关注我们,继续学习!

亿速云「云服务器」,即开即用、新一代英特尔至强铂金CPU、三副本存储NVMe SSD云盘,价格低至29元/月。点击查看>>

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

原文链接:https://my.oschina.net/u/2977387/blog/871219

AI

开发者交流群×