这篇文章主要为大家展示了“Alluxio如何搭建单机和集群”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“Alluxio如何搭建单机和集群”这篇文章吧。
Alluxio安装部署
1. mkdir /data/alluxio
2. cd /data/alluxio
下载alluxio-1.2.0-hadoop2.6-bin.tar.gz 版本,解压在cd /data/alluxio/ 目录下
3. tar -zvxf alluxio-1.2.0-hadoop2.6-bin.tar.gz
4. cd /data/alluxio/alluxio-1.2.0
初始化为本地模式:
1. ./bin/alluxio bootstrap-conf localhost
2. ./bin/alluxio format
启动/停止:
3. ./bin/alluxio-start.sh local ./bin/alluxio-start.sh all
4. ./alluxio-stop.sh all
创建工作目录:
5. ./bin/alluxio fs mkdir /data/
6. ./bin/alluxio fs mkdir /data/spark/
1、配置文件修改
在alluxio/conf
目录下,将alluxio-env.sh.template
拷贝到alluxio-env.sh
。确保JAVA_HOME指向有效的安装路径。将ALLUXIO_MASTER_ADDRESS设置为运行Alluxio Master的机器的主机名。添加所有worker节点的IP地址到alluxio/conf/workers文件。
alluxio-env.sh添加:
export JAVA_HOME=/home/ys/java/jdk1.7.0_60 export ALLUXIO_MASTER_ADDRESS=host01 # host01作为master节点
在workers文件添加工作节点
host01 host02
2、启动
分开启动,在各自的机器上运行
在master机器上:
./alluxio-start.sh master
./alluxio-start.sh worker
在worker机器上:
./alluxio-start.sh worker
3、检验集群是否搭建成功
在master节点创建文件,能在worker节点看见,说明搭建成功
./alluxio fs ls /
./alluxio fs mkdir /data
以上是“Alluxio如何搭建单机和集群”这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注亿速云行业资讯频道!
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。