storm安装配置

本文涉及的产品
服务治理 MSE Sentinel/OpenSergo,Agent数量 不受限
注册配置 MSE Nacos/ZooKeeper,118元/月
云原生网关 MSE Higress,422元/月
简介: 版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/qq1010885678/article/details/44902601 1.
版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/qq1010885678/article/details/44902601
1.修改主机名:
vim /etc/sysconfig/network


NETWORKING=yes


HOSTNAME=MASTER






2.修改IP:


先用ifconfig得到ip信息,将其复制


设置ip地址为静态






vim /etc/sysconfig/network-scripts/ifcfg-eth0


BOOTPROTO="static"


HWADDR="00:0C:29:FC:62:B6"


IPV6INIT="yes"


NM_CONTROLLED="yes"


ONBOOT="yes"


TYPE="Ethernet"


UUID="d0731a46-36df-4ab1-9bac-42bb151acc41"


IPADDR="192.168.1.250"


NETMASK="255.255.255.0"


GATEWAY="192.168.1.1"


DNS1="8.8.8.8"


DNS2="8.8.4.4"






3.修改主机和IP的映射关系
vim /etc/hosts






4.关闭防火墙








5.上传安装jdk,配置环境变量










上传
zeromq-2.1.7.tar.gz
jzmq-master.zip
storm-0.8.2.zip
zookeeper-3.4.5.tar.gz
等文件




1.编译安装ZMQ:


tar -xzf zeromq-2.1.7.tar.gz


cd zeromq-2.1.7


./configure


#编译可能会出错:configure: error: Unable to find a working C++ compiler


#安装一下依赖的rpm包(在vm虚拟机中加载安装的cd盘文件,里面的services文件夹有所有的包):
libstdc++-devel
gcc-c++
libuuid-devel


./configure


make 
make install






2.编译安装JZMQ:
cd jzmq


./autogen.sh


#报错:autogen.sh: error: could not find libtool. libtool is required to run autogen.sh. 
缺少libtool
yum install libtool


或者手动安装


autoconf-2.63-5.1.el6.noarch.rpm 


automake-1.11.1-4.el6.noarch.rpm 


libtool-2.2.6-15.5.el6.x86_64.rpm




./configure


make


make install




3.安装启动zookeeper


4.上传解压storm
进入conf目录
修改storm.yaml 


#zookeeper的节点
storm.zookeeper.servers:
     - "cloud4"
     - "cloud5"
     - "cloud6"
#nimbus主节点
nimbus.host: "cloud4"


启动nimbus

输出日志到null下

在后台运行

./storm nimbus > ../dev/null 2>&1 &
相关实践学习
基于MSE实现微服务的全链路灰度
通过本场景的实验操作,您将了解并实现在线业务的微服务全链路灰度能力。
相关文章
|
5月前
|
消息中间件 监控 数据可视化
Linux安装Kafka图形化界面
Linux安装Kafka图形化界面
238 4
|
监控 大数据 物联网
在CDH7.1.1中安装NiFi
在CDH7.1.1中安装NiFi
153 0
|
分布式计算 运维 Ubuntu
|
资源调度 分布式计算 数据可视化
Flink on zepplien的安装配置
Apache Zeppelin 是一个让交互式数据分析变得可行的基于网页的notebook。Zeppelin提供了数据可视化的框架。Flink结合zepplien使用可以让提交Flink任务变的简单化. 从Zeppelin 0.9开始将正式支持Flink 1.10。Flink是一个批流统一的计算引擎,本文将从第一个wordcount的例子为起点来介绍一下Flink on zeplien(on yarn)的配置和使用. 版本说明: Flink 1.11.0
|
存储 SQL 分布式计算
Sqoop简介及安装部署
Apache Sqoop是专为Apache Hadoop和结构化数据存储如关系数据库之间的数据转换工具的有效工具。你可以使用Sqoop从外部结构化数据存储的数据导入到Hadoop分布式文件系统或相关系统如Hive和HBase。相反,Sqoop可以用来从Hadoop的数据提取和导出到外部结构化数据存储如关系数据库和企业数据仓库。 Sqoop专为大数据批量传输设计,能够分割数据集并创建Hadoop任务来处理每个区块。
234 0
|
流计算
Ambari部署Storm
Ambari部署Storm
126 0
Ambari部署Storm
|
Java 测试技术 Apache
JMeter安装配置和分布式
我也不知道为什么喜欢在博客开头用一个引用,反正看着舒服。 JMeter系列第一篇,安装篇。转载请注明出处http://blog.lzoro.com 碎碎念 前段时间公司的新项目上线了一段时间之后,随着运营规模的变大,老大要求对系统进行一个摸底,那么肯定有人要为这个伟大的工作献身了,是的,那个人就是我。
1464 1
|
分布式计算 关系型数据库 Hadoop
|
分布式计算 Java Hadoop
|
存储 流计算 消息中间件