温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

Apache Storm集群如何配置

发布时间:2021-12-07 14:30:29 来源:亿速云 阅读:187 作者:小新 栏目:云计算

这篇文章主要介绍Apache Storm集群如何配置,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!

我们使用如下三台机器搭建Storm集群,此文档在我们已经安装了zookeeper集群、JDK的前提下有效

192.168.1.96
192.168.1.45
192.168.1.34

下面操作在不说明的情况下都是在96这台机器上做的操作

安装配置

首先下载解压

wget http://mirrors.noc.im/apache/storm/apache-storm-1.0.0/apache-storm-1.0.0.tar.gz  
tar xzvf  apache-storm-1.0.0.tar.gz  
cd apache-storm-1.0.0

其次编辑conf/storm.yaml文件

Apache Storm集群如何配置

1) storm.zookeeper.servers: storm集群使用的zk集群地址,如果zk使用的不是默认2181的端口,那么我们还要增加 storm.zookeeper.port的配置项 
2) storm.local.dir 用于存储少量数据,需要我们提前创建好目录   
3) nimbus.seeds 让工作节点知道哪个是nimbus以便下载topology的jar和conf  
4) supervisor.slots.ports 对于每个Supervisor工作节点,需要配置该工作节点可以运行的worker数量。
每个worker占用一个单独的端口用于接收消息,该配置选项即用于定义哪些端口是可被worker使用的。
默认情况下,每个节点上可运行4个workers,分别在6700、6701、6702和6703端口 
5)这里的cluster1对应96,cluster2对应45,cluster3对应34机器,刚开始的时候我这里都是直接写的ip,
但是storm ui起来之后发现如下情况,都是localhost而且nimbus里面有两个,如下图

Apache Storm集群如何配置6) 如何将ip和cluster1、cluster2、cluster3对应起来呢,我们需要配置机器的hosts和hostname,拿96这台机器来举例: Apache Storm集群如何配置

Apache Storm集群如何配置

同步storm到其他机器上

scp -r apache-storm-1.0.0/ 192.168.1.45:/data/strawbird/apache-storm-1.0.0
scp -r apache-storm-1.0.0/ 192.168.1.34:/data/strawbird/apache-storm-1.0.0

启动

在主节点也就是96这台机器上启动Nimbus,在从节点也就是45和34这两台机器上启动Supervisor服务
bin/storm nimbus &
bin/storm supervisor &
在主节点上启动storm ui,经测试storm ui在supervisor节点上启动之后访问URL: http://xxx.xxx.xxx:8080不能正确显示
bin/storm ui &
起来之后我们就可以看到如下截图,这就是正常了

Apache Storm集群如何配置

以上是“Apache Storm集群如何配置”这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注亿速云行业资讯频道!

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI