Storm集群部署

简介:

在线下载安装包

wget    http://124.202.164.6/files/1139000006794ECA/apache.fayea.com/storm/apache-storm-0.9.5/apache-storm-0.9.5.tar.gz

解压安装包

tar -zxvf apache-storm-0.9.5.tar.gz -C /export/servers/
cd /export/servers/

创建软连接 快捷方式

ln -s apache-storm-0.9.5 storm

修改配置文件

mv /export/servers/storm/conf/storm.yaml /export/servers/storm/conf/storm.yaml.bak
vi /export/servers/storm/conf/storm.yaml
指定storm使用的zk集群

storm.zookeeper.servers:
     - "zk01"
     - "zk02"
     - "zk03"
指定storm集群中的nimbus节点所在的服务器
nimbus.host: "storm01"
指定nimbus启动JVM最大可用内存大小
nimbus.childopts: "-Xmx1024m"
指定supervisor启动JVM最大可用内存大小
supervisor.childopts: "-Xmx1024m"
指定supervisor节点上,每个worker启动JVM最大可用内存大小
worker.childopts: "-Xmx768m"
指定ui启动JVM最大可用内存大小,ui服务一般与nimbus同在一个节点上。
ui.childopts: "-Xmx768m"
指定supervisor节点上,启动worker时对应的端口号,每个端口对应槽,每个槽位对应一个worker
supervisor.slots.ports:
    - 6700
    - 6701
    - 6702
    - 6703

分发安装包

scp -r /export/servers/apache-storm-0.9.5 需要分发的机器的ip:/export/servers

启动集群

在nimbus.host所属的机器上启动 nimbus服务

cd /export/servers/storm/bin/
nohup ./storm nimbus >/dev/null 2>&1 &

在nimbus.host所属的机器上启动ui服务

cd /export/servers/storm/bin/
nohup ./storm ui >/dev/null 2>&1 &

在其他各个节点启动supervisor

cd /export/servers/storm/bin/
nohup ./storm supervisor >/dev/null 2>&1 &

查看集群
默认端口为 8080 外部使用浏览器访问即可

相关文章
|
3月前
|
消息中间件 存储 数据可视化
kafka高可用集群搭建
kafka高可用集群搭建
43 0
|
5月前
|
消息中间件 Kafka Linux
115 Kafka集群部署
115 Kafka集群部署
38 0
|
5月前
|
网络安全 流计算
108 Storm集群部署
108 Storm集群部署
14 0
|
8月前
|
消息中间件 Kafka Apache
Kafka3.0集群部署(内附zookeeper3.5.7集群部署)
Kafka3.0集群部署(内附zookeeper3.5.7集群部署)
102 0
|
10月前
|
消息中间件 存储 分布式计算
Kafka集群部署
Kafka集群部署
Kafka集群部署
|
11月前
|
存储 Ubuntu 网络协议
storm完全分布式部署
storm完全分布式部署
|
11月前
|
运维 监控 Ubuntu
|
11月前
|
分布式计算 运维 Ubuntu
|
分布式计算 Hadoop 流计算
如何搭建Storm集群?
如何搭建Storm集群?
82 0
|
流计算
storm集群的搭建
最近也是有朋友问我storm的问题,好长时间没玩storm了,今天就来简单的说一下吧,首先我们来看一下官网的图片,storm是完全实时的,就像水龙头打开后一样,会不停的往外面流水.所以他的延迟非常的低,这也是他的特点.然后先搭建storm集群吧,storm集群的搭建也比较简单.

相关实验场景

更多