温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

调试hadoop示例时会遇到什么问题

发布时间:2021-12-09 14:49:55 来源:亿速云 阅读:100 作者:小新 栏目:云计算

这篇文章主要介绍调试hadoop示例时会遇到什么问题,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!

  1. 在eclipse中安装过hadoop的插件过后,连不上dfs

    将etc/hadoop/core-site.xml中配置的localhost修改为ip地址

  2. 连上dfs之后,不能上传文件,不能删除文件

    [root@localhost hadoop-2.6.3]# vi etc/hadoop/mapred-site.xml.template 
    [root@localhost hadoop-2.6.3]# cp  etc/hadoop/mapred-site.xml.template etc/hadoop/mapred-site.xml

       添加如下的配置

     <property>
      <name>dfs.permissions</name>
      <value>false</value>
     </property>
  3.  在windows 7 下远程运行的时候,需要与版本对应的winutils.exe

    hadoop2.6 对应的下载地址: http://down.51cto.com/data/1983230

    在代码中添加如下的变量设置

     System.setProperty("hadoop.home.dir", "D:\\open_source\\zip\\hadoop\\hadoop-2.6.3");
     System.setProperty("HADOOP_HOME", "D:\\open_source\\zip\\hadoop\\hadoop-2.6.3");

        或者是在eclisep -> run -> Run Configurations -> Environment 选项卡添加PATH,HADDOOP_HOME

        HADOOP_HOME   D:\open_source\zip\hadoop\hadoop-2.6.3

        PATH        %PATH%;D:\open_source\zip\hadoop\hadoop-2.6.3\bin

以上是“调试hadoop示例时会遇到什么问题”这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注亿速云行业资讯频道!

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI