RocketMQ入门介绍

一，安装

1，Rocketmq 安装

1，下载rocketmqzip包，地址

2，执行命令进行安装

unzip rocketmq-all-4.6.0-source-release.zip  
cd rocketmq-all-4.6.0/  
mvn -Prelease-all -DskipTests clean install -U  
cd distribution/target/apache-rocketmq

3，启动NameServer

# 启动NameServer  
nohup sh bin/mqnamesrv &  
# 查看日志  
tail -f ~/logs/rocketmqlogs/namesrv.log

//启动日志  
2019-12-19 13:48:44 INFO main - The Name Server boot success. serializeType=JSON  
2019-12-19 13:48:44 INFO NettyEventExecutor - NettyEventExecutor service started  
2019-12-19 13:49:36 INFO NettyServerCodecThread_1 - NETTY SERVER PIPELINE: channelRegistered 192.168.60.201:60218  
2019-12-19 13:49:36 INFO NettyServerCodecThread_1 - NETTY SERVER PIPELINE: channelActive, the channel[192.168.60.201:60218]

4，启动Broker

# 启动Broker  
nohup sh bin/mqbroker -n localhost:9876 &  
# 查看Broker启动日志  
tail -f ~/logs/rocketmqlogs/broker.log

2019-12-19 13:49:34 INFO main - load /home/qianjiangtao/store/config/subscriptionGroup.json OK  
2019-12-19 13:49:34 INFO main - load [/home/qianjiangtao/store/config/consumerFilter.json] OK  
2019-12-19 13:49:34 INFO main - load [/home/qianjiangtao/store/config/delayOffset.json] OK  
2019-12-19 13:49:36 INFO main - Set user specified name server address: 192.168.60.201:9876  
2019-12-19 13:49:36 INFO PullRequestHoldService - PullRequestHoldService service started  
2019-12-19 13:49:37 INFO main - register broker to name server 192.168.60.201:9876 OK  
2019-12-19 13:49:37 INFO main - The broker[localhost.localdomain, 192.168.60.201:10911] boot success. serializeType=JSON and name server is 192.168.60.201:9876

2，Rocketmq监控工具安装

1，下载rocketmq-console, 下载地址

2，修改配置文件application.properties中namesrvAddr

# 到resource目录中  
cd rocketmq-console/src/main/resources  

# 修改application配置  
server.contextPath=/rocketmq  
server.port=9888  
spring.application.name=rocketmq-console  
spring.http.encoding.charset=UTF-8  
spring.http.encoding.enabled=true  
spring.http.encoding.force=true  
logging.config=classpath:logback.xml  
# 指定namesrvAddr地址  
rocketmq.config.namesrvAddr=192.168.60.201:9876  
rocketmq.config.dataPath=/tmp/rocketmq-console/data  
rocketmq.config.enableDashBoardCollect=true

3，解压直接作为spring boot运行

mvn clean package -Dmaven.test.skip=true  
java -jar target/rocketmq-console-ng-1.0.1.jar

4，访问rocketmq-console web界面，地址

3，消息测试

测试rocketmq发送消息和消费消息，rocketmq自带测试工具直接运行就可以简单的测试消息的发送和消费

export NAMESRV_ADDR=localhost:9876  
# 消息发送默认发送1000条消息  
sh bin/tools.sh org.apache.rocketmq.example.quickstart.Producer

//发送日志  
SendResult [sendStatus=SEND_OK, msgId=C0A83CC9284C28D93B305FDDBBBA03E1, offsetMsgId=C0A83CC900002A9F000000000005C0D4,messageQueue=MessageQueue 
[topic=TopicTest, brokerName=localhost.localdomain, queueId=2], queueOffset=498]  
......

# 消息消费  
sh bin/tools.sh org.apache.rocketmq.example.quickstart.Consumer

通过web监控界面也可以查看消息的发送和消费情况

二，角色介绍

RocketMQ架构上主要分为四部分，如下图所示:

1，Producer

消息发布的角色，支持分布式集群方式部署。Producer通过MQ的负载均衡模块选择相应的Broker集群队列进行消息投递，投递的过程支持快速失败并且低延迟。

2，Consumer

消息消费的角色，支持分布式集群方式部署。支持以push推，pull拉两种模式对消息进行消费。同时也支持集群方式和广播方式的消费，它提供实时消息订阅机制，可以满足大多数用户的需求。

3，NameServer

一个非常简单的Topic路由注册中心，支持Broker的动态注册与发现。主要包括两个功能：

• Broker管理，NameServer接受Broker集群的注册信息并且保存下来作为路由信息的基本数据。然后提供心跳检测机制，检查Broker是否还存活；
• 路由信息管理，每个NameServer将保存关于Broker集群的整个路由信息和用于客户端查询的队列信息。然后Producer和Consumer通过NameServer就可以知道整个Broker集群的路由信息，从而进行消息的投递和消费。NameServer通常也是集群的方式部署，各实例间相互不进行信息通讯。Broker是向每一台NameServer注册自己的路由信息，所以每一个NameServer实例上面都保存一份完整的路由信息。当某个NameServer因某种原因下线了，Broker仍然可以向其它NameServer同步其路由信息，Producer,Consumer仍然可以动态感知Broker的路由的信息。

4，BrokerServer

Broker主要负责消息的存储、投递和查询以及服务高可用保证，为了实现这些功能，Broker包含了以下几个重要子模块。

• Remoting Module：整个Broker的实体，负责处理来自clients端的请求。
• Client Manager：负责管理客户端(Producer/Consumer)和维护Consumer的Topic订阅信息
• Store Service：提供方便简单的API接口处理消息存储到物理硬盘和查询功能。
• HA Service：高可用服务，提供Master Broker 和 Slave Broker之间的数据同步功能。
• Index Service：根据特定的Message key投递到Broker的消息进行索引服务，提供消息的快速查询。