RocketMQ学习环境搭建(RocketMQ安装与IDEA Debug环境搭建)

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: RocketMQ学习环境搭建(RocketMQ安装与IDEA Debug环境搭建)

本文主要分如下几个部分展开:


  • Linux服务器安装RocketMQ、RocketMQ-Console
  • IDEA中搭建可调试环境


1、Linux安装RocketMQ、RocketMQ-Console


1.1安装RocketMQ


Step1:从如下地址下载RocketMQ安装包

cd /opt/application
wget https://mirrors.tuna.tsinghua.edu.cn/apache/rocketmq/4.7.1/rocketmq-all-4.7.1-bin-release.zip

Step2:解压安装包

unzip rocketmq-all-4.7.1-bin-release.zip
ls -l

解压后的文件如下图所示:

50f3c8ddd60e39c98ed7e6c3e361eb41.png


其中 conf 文件夹存放的是RocketMQ的配置文件,提供了各种部署结构的示例配置。例如2m-2s-async是2主2从异步复制的配置示例;2m-noslave是2主的示例配置。由于本文主要是搭建一个学习环境,故采取的部署架构为1主的部署架构,关于生产环境下如何搭建RocketMQ集群、如何调优参数将在该专栏的后续文章中专门介绍。


Step3:修改Nameserver jvm参数

cd bin
vi runserver.sh
# 定位到如下代码
JAVA_OPT="${JAVA_OPT} -server -Xms4g -Xmx4g -Xmn2g -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=320m"
# 修改 "-Xms -Xmx -Xmn" 参数
JAVA_OPT="${JAVA_OPT} -server -Xms512M -Xmx512M -Xmn256M -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=320m"

温馨提示:这里修改JVM参数主要目的是个人学习电脑内存不够,默认NameServer 会占用4G。

Step4:启动nameserver

nohup ./mqnamesrv &

查看${ user_home }/logs/rocketmqlogs/namesrv.log日志文件,如果输出结果如下图所示即表示启动成功。

39cfdc43ef990d642220f1740771d8d2.png

经过上面的步骤,就成功在Linux环境上安装了RocketMQ Nameserver服务器与Broker服务器。


温馨提示:如果上面在安装过程中发生了错误,大家可以查看${ user_home }/logs/rocketmqlogs中的日志,通过错误日志,能够较为直观的判断错误的原因。其中${ user_home }为用户主目录。

该目录下会有众多的日志文件,如果一开始对这些文件的含义不了解也没关系,大家可以通过 ls -l 命令,逐一查看文件大小不为0的文件,从而寻找错误日志,便于快速解决问题。


RocketMQ提供了众多的运维命令来查看RocketMQ集群的运行状态,在这里我先简单使用clusterList命令来查看集群的状态,用于验证一下集群的状态。


sh ./mqadmin clusterList -n 127.0.0.1:9876

其运行结果如下图所示:

fba53f62f2e97b5304fd212608fd7b2c.png


1.2 安装RocketMQ-Console


使用运维命令不太直观,学习成本较大,为此RocketMQ官方提供了一个运维管理界面RokcetMQ-Console,用于对RocketMQ集群提供常用的运维功能,故本节主要讲解如何在Linux环境安装rocketmq-console。


RocketMQ官方并未提供rocketmq-console的安装包,故需要通过源码进行编译。


Step1:下载源码

wget https://github.com/apache/rocketmq-externals/archive/rocketmq-console-1.0.0.tar.gz
tar -xf rocketmq-console-1.0.0.tar.gz
# 重命名,为了方便后续操作
mv rocketmq-externals-rocketmq-console-1.0.0/rocketmq-console  rocketmq-console

Step2:修改配置文件

cd rocketmq-console
vi src/main/resources/applications.properties

主要是修改指向的nameserver地址,修改结果如下图所示:


4d8c6a85f6c727905b35fc3ef753ffce.png

Step3:使用maven命令编译源代码。

mvn clean  package -DskipTests

编译后在target目录下会生成可运行的jar包,如下图所示:

6d3b99bd578e80025b1b86dd1bca1172.png

Step4:我们可以将该包复制到自己常用的软件安装目录,例如笔者喜欢将其放在/opt/application下。

cp rocketmq-console-ng-1.0.0.jar /opt/application/

Step5:启动rocketmq-conolse

nohup java -jar rocketmq-console-ng-1.0.0.jar &

在浏览器中输入:http://localhost:8080查看是否安装成功,如果出现如下图则表示安装成功。

886f3fc4208a0a7495c5ffb576b73f9b.png


1.3 异常分析与解决思路


如果在安装过程中出现意想不到的错误,别慌,通过查看相关的日志文件,寻找错误日志,根据错误日志进行思考或百度,相信能够轻易将其解决。


例如使用的baseuser 启动的rocketmq,rocketmq-console,那相关的日志路径如下:


rocketmq:/home/baseuser/logs/rocketmqlogs/

rocketmq-console:/home/baseuser/logs/consolelogs


2、IDEA中安装RocketMQ


绝大数的程序员最信赖的开发调试工具基本都是DEBUG,那能在 IDEA 中 debug RocketMQ的源码吗?答案当然是可以的。本节就来演示如何在IDEA中运行RocketMQ的Nameserver、Broker组件,并进行Debug。


Setp1:从github上下载RocketMQ源码,并将其导入到IEDA中,其截图如下:

2f93417e1b292e073d153073d629777b.png

Step2:namesrv/src/main/java/org/apache/rocketmq/namesrv/NamesrvStartup设置环境变量ROCKETMQ_HOME,操作步骤如下图所示:

16d89c612f8173b9fe0ecb6edf3657d9.png

设置环境变量名称:ROCKETMQ_HOME,其值用于指定RocketMQ运行的主目录,笔者设置的路径为:/home/dingwpmz/tmp/rocketmq。


Step3:将distribution/conf/logback_namesrv.xml文件拷贝到【Step2】中设置的主目录下,执行后的效果如下图所示:

da074a4c324f2477a517fc795ab8a67d.png


温馨提示:该文件为nameserver的日志路径,可以手动修改logback_namesrv.xml文件中的日志目录,由于这是logback的基础知识,这里就不再详细介绍logback的配置方法。


Step4:以debug方法运行NamesrvStartup,执行效果如下图所示,表示启动成功。

0fd5cf8b5a6b61ff21ce9390220a4152.png

Step5:将distribution/conf/logback_brokerxml、broker.conf文件拷贝到【Step2】中设置的主目录下,执行后的效果如下图所示:

5c8c1d11c5f34c517a32ee4f17dd170e.png

Step6:修改broker.conf中的配置,主要设置nameserver的地址,broker的名称等相关属性。

vi broker.conf
# 使用如下配置文件
brokerClusterName = DefaultCluster
brokerName = broker-a
brokerId = 0
deleteWhen = 04
fileReservedTime = 48
brokerRole = ASYNC_MASTER
flushDiskType = ASYNC_FLUSH
storePathRootDir=/home/dingwpmz/tmp/rocketmq/store
storePathCommitLog=/home/dingwpmz/tmp/rocketmq/store/commitlog
namesrvAddr=127.0.0.1:9876
brokerIP1=192.168.3.10
brokerIP2=192.168.3.10
autoCreateTopicEnable=true

Step7:broker/src/main/java/org/apache/rocketmq/broker/BrokerStartup设置环境变量ROCKETMQ_HOME,操作步骤如下图所示:

747230d03aaa58f047d5d287e2e4dac1.png


Step8:以Debug模式运行BrokerStartup,其运行结果如下图所示:

0b861a8b1860668d1d6060a198b3e679.png

看到这样的提示就表示大功告成。


接下来简单来做一个验证。


首先先在AbstractSendMessageProcessor类的parseRequestHeader方法中打上一个断点。


然后运行example中org/apache/rocketmq/example/quickstart/Producer,看是否能进入到断点中,运行结果如下图所示,已进入到Debug模式。

a36f3bf87e29f62d155f20b085281914.png


3、小结


本篇作为RocketMQ实战系列的第一篇文章,其目的就是构建一个研究RocketMQ的学习环境,故从两个方面进行展开:


1、在Linux环境安装RocketMQ、RocketMQ-Console。


2、在IDEA中运行RocketMQ,构建一个可以调试RocketMQ的环境。


温馨提示:搭建一个可调试的环境,但绝不是学习RocketMQ源码,就从Debug一步异步跟踪,这样会陷入其中而不可自拔,DEBUG只是一种辅助,应该用在无法理解某一端代码时,使用DEBUG,借助运行时的一些数据,使之更容易理解。

相关实践学习
消息队列RocketMQ版:基础消息收发功能体验
本实验场景介绍消息队列RocketMQ版的基础消息收发功能,涵盖实例创建、Topic、Group资源创建以及消息收发体验等基础功能模块。
消息队列 MNS 入门课程
1、消息队列MNS简介 本节课介绍消息队列的MNS的基础概念 2、消息队列MNS特性 本节课介绍消息队列的MNS的主要特性 3、MNS的最佳实践及场景应用 本节课介绍消息队列的MNS的最佳实践及场景应用案例 4、手把手系列:消息队列MNS实操讲 本节课介绍消息队列的MNS的实际操作演示 5、动手实验:基于MNS,0基础轻松构建 Web Client 本节课带您一起基于MNS,0基础轻松构建 Web Client
相关文章
|
2月前
|
IDE Java 测试技术
IDEA安装并使用通义灵码
本文介绍了“通义灵码”这一智能编码助手的功能特点,并提供了在IDEA中安装和使用的详细步骤,旨在帮助提升编程效率和代码质量。
IDEA安装并使用通义灵码
|
1月前
|
IDE Java 程序员
学生邮箱白嫖/免费安装JetBrains全家桶(IDEA/pycharm等) —— 保姆级教程
本文提供了如何使用学生邮箱免费获取并安装JetBrains全家桶(包括IDEA、PyCharm等)的详细教程,涵盖了学生认证、软件下载、安装及常见问题的解决方法。
421 0
学生邮箱白嫖/免费安装JetBrains全家桶(IDEA/pycharm等) —— 保姆级教程
|
3月前
|
消息中间件 Linux API
centos7 安装rabbitmq自定义版本及配置
centos7 安装rabbitmq自定义版本及配置
|
1月前
|
应用服务中间件 Windows
震惊!idea 2021 社区版手把手安装,超详细过程,新手一看就会 如何安装低版本的IDEA? IDEA安装过程中版本冲突怎么办 idea最新版安装!
本文提供了一个详细的指南,用于安装2021年社区版的IntelliJ IDEA,包括如何处理版本冲突和完成安装过程。
336 2
震惊!idea 2021 社区版手把手安装,超详细过程,新手一看就会 如何安装低版本的IDEA? IDEA安装过程中版本冲突怎么办 idea最新版安装!
|
1月前
|
Java Maven Spring
springboot学习一:idea社区版本创建springboot项目的三种方式(第三种为主)
这篇文章介绍了在IntelliJ IDEA社区版中创建Spring Boot项目的三种方法,特别强调了第三种方法的详细步骤。
306 0
springboot学习一:idea社区版本创建springboot项目的三种方式(第三种为主)
|
1月前
|
Windows
IDEA如何查看已经安装的插件并删除
【10月更文挑战第1天】这段内容主要介绍了如何在IntelliJ IDEA中查看和删除已安装的插件。可以通过软件内的插件市场查看插件列表,包括插件名称、版本号和供应商等信息;也可以通过访问插件目录查看。删除插件则建议在插件市场中进行,包括禁用和卸载步骤,手动删除插件文件夹的方法不推荐,因为可能存在配置残留等问题。
504 11
|
1月前
|
消息中间件 数据安全/隐私保护 Docker
Docker安装rabbitmq
如何使用Docker安装和配置RabbitMQ服务,包括拉取RabbitMQ镜像、创建容器、配置持久化和访问管理界面的步骤。
91 0
Docker安装rabbitmq
|
2月前
|
NoSQL 关系型数据库 Redis
mall在linux环境下的部署(基于Docker容器),Docker安装mysql、redis、nginx、rabbitmq、elasticsearch、logstash、kibana、mongo
mall在linux环境下的部署(基于Docker容器),docker安装mysql、redis、nginx、rabbitmq、elasticsearch、logstash、kibana、mongodb、minio详细教程,拉取镜像、运行容器
mall在linux环境下的部署(基于Docker容器),Docker安装mysql、redis、nginx、rabbitmq、elasticsearch、logstash、kibana、mongo
|
2月前
|
消息中间件 Linux
centos7安装rabbitmq
centos7安装rabbitmq
|
1月前
|
Oracle IDE Java
IDEA安装教程配置java环境(超详细)
IDEA安装教程配置java环境(超详细)