温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

如何配置hadoop基础编译环境

发布时间:2022-01-14 17:45:15 来源:亿速云 阅读:161 作者:小新 栏目:大数据

这篇文章主要介绍如何配置hadoop基础编译环境,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!

Part1 JDK:
1.下载软件包
如何配置hadoop基础编译环境
2.在CRT(或虚拟机里的操作)
命令:cd /opt  移动到opt
        mkdir sourcecode/  创建文件夹sourcecode
        mkdir sourceware   创建文件夹sourceware

3.命令rz上传下载的软件包
hadoop-2.8.1.tar

4.解压hadoop-2.8.1.tar
命令tar -xzvf hadoop-2.8.1.tar

5.移动到software文件夹上传其余软件包
命令:cd /opt/software
         rz(上传除了步骤3的软件包以外的软件包Tip:全选后按ctrl鼠标左键单击要取消选择的软件包) 
如何配置hadoop基础编译环境

6.解压jdk
 命令:tar -xzvf jdk-8u45-linux-x64.gz -C /usr/java
如果没有文件夹 /usr/java 则创建文件夹/usr/java

7.改变jdk1.8.0_45权限
命令:chown -R root:root jdk1.8.0_45
如何配置hadoop基础编译环境

8.定义自己的JDK给Linux
命令:vi 进全局环境变量文件 /etc/profile : vi /etc/profile
如何配置hadoop基础编译环境

9.打印&PATH路径,查看是否已经配置好路径,实现一下source环境变量文件 /etc/profile
如何配置hadoop基础编译环境

Part2 Maven:
1.解压unzip apache-maven-3.3.9-bin.zip
如何配置hadoop基础编译环境


2.解压.m2文件
进入software cd /opt/software/
ll -a查看隐藏文件
tar -xzvf .m2.tar.gz -C /root 解压到root目录下
如何配置hadoop基础编译环境
3.编辑/etc/profile
在最后把路径文件编辑:
如何配置hadoop基础编译环境

4.source /etc/profile执行环境变量文件
mvn --version查看是否已经执行OK
如何配置hadoop基础编译环境

Part3Findbugs部署:
1.解压 unzip findbugs-1.3.9.zip

2.再次进入环境变量文件 /etc/profile

3.编辑:创建变量FINDBUGS_HOME=路径
如何配置hadoop基础编译环境

4.source /etc/profile生效

5.查看版本是否OK findbugs -version
如何配置hadoop基础编译环境


Part4ProtocolBuffer:
按如上相同操作进行ProtocolBuffer的安装:
额外操作(在进入变量文件之前的):
[root@ruozehadoop001 protobuf-2.5.0]# yum install -y gcc gcc-c++ make cmake
[root@ruozehadoop001 protobuf-2.5.0]# ./configure  --prefix=/usr/local/protobuf
[root@ruozehadoop001 protobuf-2.5.0]# make && make install 

结束后在环境变量文件/etc/profile中的编辑为:
export PROTOC_HOME=/usr/local/protobuf
export PATH=$PROTOC_HOME/bin:$FINDBUGS_HOME/bin:$MAVEN_HOME/bin:$JAVA_HOME/bin:$PATH
[root@ruozehadoop001 protobuf-2.5.0]# source /etc/profile

source 生效后 查看是否OK:protoc --version

Part5其他组件: 
yum install -y openssl openssl-devel svn ncurses-devel zlib-devel libtool
yum install -y snappy snappy-devel bzip2 bzip2-devel lzo lzo-devel lzop autoconf automake

以上是“如何配置hadoop基础编译环境”这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注亿速云行业资讯频道!

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI