这篇文章将为大家详细讲解有关Ubuntu下Hadoop如何安装与部署,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。
一. 环境的准备:
OS:Linux(Ubuntu14)
JDK:jdk-7u80-linux-x64.tar.gz(版本为JDK1.7 64-Bit)
Hadoop:hadoop-2.6.4.tar.gz(伪分布式)
二. 查看系统下的 ip ,hosts 及 hostname 并修改
1.查看IP:
2. 查看hosts 和 hostname:
三: JDK的安装及环境配置
1. 将两个压缩包就放在Ubuntu下Desktop下,如下:
2. 在 / 根目录下创建 mysoftware文件夹
3. 并将解压包解压到该文件目录下
4. 赋予权限 并改变权限:
5. 配置环境变量
6. 使环境生效,并让系统默认使用自己安装的JDK(这里JDK其实是安装并 默认使用已安装的,熟练再来一次)
四:安装与部署Hadoop:
1. 进入目录结构,注意需要修改的配置文件:
2. 为了方便,完成mapred-site.xml文件的复制:
3. 修改 hadoop-env.sh 文件:
4. 修改 core-site.xml 文件:
5. 修改 hdfs-site.xml 文件:
6. 修改 mapred-site.xml 文件:
7. 修改 yarn-site.xml 文件:
8. 修改 slaves 文件:
9. 在格式化前,先确认使用默认安装的JDK:
10. 然后接下来进行格式化,格式化hdfs文件系统:
11. 启动hadoop服务1:
12..检查 hadoop启动是否成功:
浏览器端查看:
关于“Ubuntu下Hadoop如何安装与部署”这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,使各位可以学到更多知识,如果觉得文章不错,请把它分享出去让更多的人看到。
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。