您当前的位置:首页 > 电脑百科 > 程序开发 > 编程百科

RocketMQ安装与IDEA Debug环境搭建

时间:2020-10-12 09:40:54  来源:  作者:

本文主要分如下几个部分展开:

- linux服务器安装RocketMQ、RocketMQ-Console

- IDEA中搭建可调试环境

 1、Linux安装RocketMQ、RocketMQ-Console

 1.1安装RocketMQ

Step1:从如下地址下载RocketMQ安装包

cd /opt/Application
wget https://mirrors.tuna.tsinghua.edu.cn/Apache/rocketmq/4.7.1/rocketmq-all-4.7.1-bin-release.zip

Step2:解压安装包

unzip rocketmq-all-4.7.1-bin-release.zip
ls -l

解压后的文件如下图所示:

RocketMQ安装与IDEA Debug环境搭建

 

其中 conf 文件夹存放的是RocketMQ的配置文件,提供了各种部署结构的示例配置。例如2m-2s-async是2主2从异步复制的配置示例;2m-noslave是2主的示例配置。由于本文主要是搭建一个学习环境,故采取的部署架构为1主的部署架构,关于生产环境下如何搭建RocketMQ集群、如何调优参数将在该专栏的后续文章中专门介绍。

Step3:修改Nameserver jvm参数

cd bin
vi runserver.sh# 定位到如下代码JAVA_OPT="${JAVA_OPT} -server -Xms4g -Xmx4g -Xmn2g -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=320m"
# 修改 "-Xms -Xmx -Xmn" 参数
JAVA_OPT="${JAVA_OPT} -server -Xms512M -Xmx512M -Xmn256M -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=320m"

温馨提示:这里修改JVM参数主要目的是个人学习电脑内存不够,默认NameServer 会占用4G。

Step4:启动nameserver

nohup ./mqnamesrv &

查看${user_home}/logs/rocketmqlogs/namesrv.log日志文件,如果输出结果如下图所示即表示启动成功。

RocketMQ安装与IDEA Debug环境搭建

 

Step5:修改broker的配置文件

vi conf/broker.conf
# 使用如下配置文件brokerClusterName = DefaultClusterbrokerName = broker-abrokerId = 0
deleteWhen = 04
fileReservedTime = 48
brokerRole = ASYNC_MASTERflushDiskType = ASYNC_FLUSHstorePathRootDir=/data/rocketmq/store
storePathCommitLog=/data/rocketmq/store/commitlog
namesrvAddr=127.0.0.1:9876
brokerIP1=192.168.3.10
brokerIP2=192.168.3.10
autoCreateTopicEnable=false

Step6:修改broker jvm参数。

cd bin
vi runbroker.sh #修改如下配置(配置前)JAVA_OPT="${JAVA_OPT} -server -Xms8g -Xmx8g -Xmn4g"
#配置后JAVA_OPT="${JAVA_OPT} -server -Xms1g -Xmx1g -Xmn512m"

Step7:启动broker

cd bin
nohup ./mqbroker -c ../conf/broker.conf &

查看${user_home}/logs/rocketmqlogs/broker.log,如果输出结果如下图所示表示启动成功。

RocketMQ安装与IDEA Debug环境搭建

 

经过上面的步骤,就成功在Linux环境上安装了RocketMQ Nameserver服务器与Broker服务器。

温馨提示:如果上面在安装过程中发生了错误,大家可以查看${user_home}/logs/rocketmqlogs中的日志,通过错误日志,能够较为直观的判断错误的原因。其中${user_home}为用户主目录。

 

该目录下会有众多的日志文件,如果一开始对这些文件的含义不了解也没关系,大家可以通过 ls -l 命令,逐一查看文件大小不为0的文件,从而寻找错误日志,便于快速解决问题。

RocketMQ提供了众多的运维命令来查看RocketMQ集群的运行状态,在这里我先简单使用clusterList命令来查看集群的状态,用于验证一下集群的状态。

sh ./mqadmin clusterList -n 127.0.0.1:9876

其运行结果如下图所示:

RocketMQ安装与IDEA Debug环境搭建

 

 1.2 安装RocketMQ-Console

使用运维命令不太直观,学习成本较大,为此RocketMQ官方提供了一个运维管理界面RokcetMQ-Console,用于对RocketMQ集群提供常用的运维功能,故本节主要讲解如何在Linux环境安装rocketmq-console。

RocketMQ官方并未提供rocketmq-console的安装包,故需要通过源码进行编译。

Step1:下载源码

wget https://github.com/apache/rocketmq-externals/archive/rocketmq-console-1.0.0.tar.gz
tar -xf rocketmq-console-1.0.0.tar.gz
# 重命名,为了方便后续操作
mv rocketmq-externals-rocketmq-console-1.0.0/rocketmq-console  rocketmq-console

Step2:修改配置文件

cd rocketmq-console
vi src/main/resources/applications.properties

主要是修改指向的nameserver地址,修改结果如下图所示:

RocketMQ安装与IDEA Debug环境搭建

 

Step3:使用maven命令编译源代码。

mvn clean  package -DskipTests

编译后在target目录下会生成可运行的jar包,如下图所示:

RocketMQ安装与IDEA Debug环境搭建

 

Step4:我们可以将该包复制到自己常用的软件安装目录,例如笔者喜欢将其放在/opt/application下。

cp rocketmq-console-ng-1.0.0.jar /opt/application/

Step5:启动rocketmq-conolse

nohup java -jar rocketmq-console-ng-1.0.0.jar &

在浏览器中输入:http://localhost:8080查看是否安装成功,如果出现如下图则表示安装成功。

RocketMQ安装与IDEA Debug环境搭建

 

 1.3 异常分析与解决思路

如果在安装过程中出现意想不到的错误,别慌,通过查看相关的日志文件,寻找错误日志,根据错误日志进行思考或百度,相信能够轻易将其解决。

例如使用的baseuser 启动的rocketmq,rocketmq-console,那相关的日志路径如下:

rocketmq:/home/baseuser/logs/rocketmqlogs/

rocketmq-console:/home/baseuser/logs/consolelogs

 2、IDEA中安装RocketMQ

绝大数的程序员最信赖的开发调试工具基本都是DEBUG,那能在 IDEA 中 debug RocketMQ的源码吗?答案当然是可以的。本节就来演示如何在IDEA中运行RocketMQ的Nameserver、Broker组件,并进行Debug。

Setp1:从github上下载RocketMQ源码,并将其导入到IEDA中,其截图如下:

RocketMQ安装与IDEA Debug环境搭建

 

Step2:namesrv/src/main/java/org/apache/rocketmq/namesrv/NamesrvStartup设置环境变量ROCKETMQ_HOME,操作步骤如下图所示:

RocketMQ安装与IDEA Debug环境搭建

 

设置环境变量名称:ROCKETMQ_HOME,其值用于指定RocketMQ运行的主目录,笔者设置的路径为:/home/dingwpmz/tmp/rocketmq。

Step3:将distribution/conf/logback_namesrv.xml文件拷贝到【Step2】中设置的主目录下,执行后的效果如下图所示:

RocketMQ安装与IDEA Debug环境搭建

 

温馨提示:该文件为nameserver的日志路劲,可以手动修改logback_namesrv.xml文件中的日志目录,由于这是logback的基础知识,这里就不再详细介绍logback的配置方法。

Step4:以debug方法运行NamesrvStartup,执行效果如下图所示,表示启动成功。

RocketMQ安装与IDEA Debug环境搭建

 

Step5:将distribution/conf/logback_brokerxml、broker.conf文件拷贝到【Step2】中设置的主目录下,执行后的效果如下图所示:

RocketMQ安装与IDEA Debug环境搭建

 

Step6:修改broker.conf中的配置,主要设置nameserver的地址,broker的名称等相关属性。

vi broker.conf
# 使用如下配置文件brokerClusterName = DefaultClusterbrokerName = broker-abrokerId = 0
deleteWhen = 04
fileReservedTime = 48
brokerRole = ASYNC_MASTERflushDiskType = ASYNC_FLUSHstorePathRootDir=/home/dingwpmz/tmp/rocketmq/store
storePathCommitLog=/home/dingwpmz/tmp/rocketmq/store/commitlog
namesrvAddr=127.0.0.1:9876
brokerIP1=192.168.3.10
brokerIP2=192.168.3.10
autoCreateTopicEnable=true

Step7:broker/src/main/java/org/apache/rocketmq/broker/BrokerStartup设置环境变量ROCKETMQ_HOME,操作步骤如下图所示:

RocketMQ安装与IDEA Debug环境搭建

 

Step8:以Debug模式运行BrokerStartup,其运行结果如下图所示:

RocketMQ安装与IDEA Debug环境搭建

 

看到这样的提示就表示大功告成。

接下来简单来做一个验证。

首先先在AbstractSendMessageProcessor类的parseRequestHeader方法中打上一个断点。

然后运行example中org/apache/rocketmq/example/quickstart/Producer,看是否能进入到断点中,运行结果如下图所示,已进入到Debug模式。

RocketMQ安装与IDEA Debug环境搭建

 

 3、小结

本篇作为RocketMQ实战系列的第一篇文章,其目的就是构建一个研究RocketMQ的学习环境,故从两个方面进行展开:

1、在Linux环境安装RocketMQ、RocketMQ-Console。

2、在IDEA中运行RocketMQ,构建一个可以调试RocketMQ的环境。

温馨提示:搭建一个可调试的环境,但绝不是学习RocketMQ源码,就从Debug一步异步跟踪,这样会陷入其中而不可自拔,DEBUG只是一种辅助,应该用在无法理解某一端代码时,使用DEBUG,借助运行时的一些数据,使之更容易理解。



Tags:RocketMQ   点击:()  评论:()
声明:本站部分内容及图片来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,如有任何标注错误或版权侵犯请与我们联系(Email:2595517585@qq.com),我们将及时更正、删除,谢谢。
▌相关推荐
@TOCApache 上开源官方地址: https://rocketmq.apache.org/GitHub 托管地址: https://github.com/apache/rocketmq阿里官方的介绍文档: http://jm.taobao.org/2017/01/12/rocke...【详细内容】
2021-12-07  Tags: RocketMQ  点击:(13)  评论:(0)  加入收藏
消息中间件的应用场景 异步解耦 削峰填谷 顺序收发 分布式事务一致性腾讯应用案例: 主流 MQ 框架及对比 说明 Kafka:整个行业应用广泛 RocketMQ:阿里,从 apache 孵化 Pulsar:雅...【详细内容】
2021-01-26  Tags: RocketMQ  点击:(208)  评论:(0)  加入收藏
今年双十一大促中,消息中间件 RocketMQ 发生了以下几个方面的变化: 云原生化实践。完成运维层面的云原生化改造,实现 Kubernetes 化。 性能优化。消息过滤优化交易集群性能提升...【详细内容】
2020-12-25  Tags: RocketMQ  点击:(126)  评论:(0)  加入收藏
本文主要分如下几个部分展开:- Linux服务器安装RocketMQ、RocketMQ-Console- IDEA中搭建可调试环境 1、Linux安装RocketMQ、RocketMQ-Console 1.1安装RocketMQStep1:从如下地...【详细内容】
2020-10-12  Tags: RocketMQ  点击:(77)  评论:(0)  加入收藏
前言RocketMQ配置中有一个设置项为transferMsgByHeap,即是否通过堆内存传输数据。在文章“RocketMQ存储--同步刷盘和异步刷盘”中对其进行过梳理。那transferMsgByHeap是开启...【详细内容】
2020-06-27  Tags: RocketMQ  点击:(415)  评论:(0)  加入收藏
这节介绍RocketMQ底层通信的原理在之前的内容中有介绍过RocketMQ底层用了Netty来进行通信,下图为RocketMQ通信的大致过程,主要分为Server端和Client端。 客户端通过invokeSync...【详细内容】
2020-03-31  Tags: RocketMQ  点击:(142)  评论:(0)  加入收藏
▌简易百科推荐
摘 要 (OF作品展示)OF之前介绍了用python实现数据可视化、数据分析及一些小项目,但基本都是后端的知识。想要做一个好看的可视化大屏,我们还要学一些前端的知识(vue),网上有很多比...【详细内容】
2021-12-27  项目与数据管理    Tags:Vue   点击:(1)  评论:(0)  加入收藏
程序是如何被执行的  程序是如何被执行的?许多开发者可能也没法回答这个问题,大多数人更注重的是如何编写程序,却不会太注意编写好的程序是如何被运行,这并不是一个好...【详细内容】
2021-12-23  IT学习日记    Tags:程序   点击:(9)  评论:(0)  加入收藏
阅读收获✔️1. 了解单点登录实现原理✔️2. 掌握快速使用xxl-sso接入单点登录功能一、早期的多系统登录解决方案 单系统登录解决方案的核心是cookie,cookie携带会话id在浏览器...【详细内容】
2021-12-23  程序yuan    Tags:单点登录(   点击:(8)  评论:(0)  加入收藏
下载Eclipse RCP IDE如果你电脑上还没有安装Eclipse,那么请到这里下载对应版本的软件进行安装。具体的安装步骤就不在这赘述了。创建第一个标准Eclipse RCP应用(总共分为六步)1...【详细内容】
2021-12-22  阿福ChrisYuan    Tags:RCP应用   点击:(7)  评论:(0)  加入收藏
今天想简单聊一聊 Token 的 Value Capture,就是币的价值问题。首先说明啊,这个话题包含的内容非常之光,Token 的经济学设计也可以包含诸多问题,所以几乎不可能把这个问题说的清...【详细内容】
2021-12-21  唐少华TSH    Tags:Token   点击:(9)  评论:(0)  加入收藏
实现效果:假如有10条数据,分组展示,默认在当前页面展示4个,点击换一批,从第5个开始继续展示,到最后一组,再重新返回到第一组 data() { return { qList: [], //处理后...【详细内容】
2021-12-17  Mason程    Tags:VUE   点击:(14)  评论:(0)  加入收藏
什么是性能调优?(what) 为什么需要性能调优?(why) 什么时候需要性能调优?(when) 什么地方需要性能调优?(where) 什么时候来进行性能调优?(who) 怎么样进行性能调优?(How) 硬件配...【详细内容】
2021-12-16  软件测试小p    Tags:性能调优   点击:(19)  评论:(0)  加入收藏
Tasker 是一款适用于 Android 设备的高级自动化应用,它可以通过脚本让重复性的操作自动运行,提高效率。 不知道从哪里听说的抖音 app 会导致 OLED 屏幕烧屏。于是就现学现卖,自...【详细内容】
2021-12-15  ITBang    Tags:抖音防烧屏   点击:(23)  评论:(0)  加入收藏
11 月 23 日,Rust Moderation Team(审核团队)在 GitHub 上发布了辞职公告,即刻生效。根据公告,审核团队集体辞职是为了抗议 Rust 核心团队(Core team)在执行社区行为准则和标准上...【详细内容】
2021-12-15  InfoQ    Tags:Rust   点击:(24)  评论:(0)  加入收藏
一个项目的大部分API,测试用例在参数和参数值等信息会有很多相似的地方。我们可以复制API,复制用例来快速生成,然后做细微调整既可以满足我们的测试需求1.复制API:在菜单发布单...【详细内容】
2021-12-14  AutoMeter    Tags:AutoMeter   点击:(20)  评论:(0)  加入收藏
最新更新
栏目热门
栏目头条