【RocketMQ】多方位测试开启消息追踪对集群性能的损耗

痛定思痛。 2023-10-03 08:28 11阅读 0赞

#### 文章目录 ####

*  测试信息
 *  集群开启消息追踪
 *   *  客户端使用消息追踪
     *   *  生产者
         *  消费者
     *  客户端未使用消息追踪
     *   *  生产者
         *  消费者
 *  集群未开启消息追踪
 *   *   *  生产者
         *  消费者
 *  总结

## 测试信息 ##

**集群信息**：

集群1：版本4.7.1，3m-6s，单Broker8G内存，异步复制，异步刷盘，开启了消息追踪

集群2：所有配置一样，不同点是未开启消息追踪功能

*备注：集群1的机器性能好，配置为104c、700g；集群2为8c、32g，所以理论上配置相同的情况下，集群2的性能要比测试的结果略高*

**测试维度**：

1.  服务端开启消息追踪功能，客户端使用和不使用消息追踪的性能差别
2.  服务端开启和不开启消息追踪功能，对客户端的性能影响

**测试参数**：

线程数：128

消息大小：128byte

## 集群开启消息追踪 ##

### 客户端使用消息追踪 ###

#### 生产者 ####

官方4.8.0的benchmark脚本支持开启消息追踪，所以可以直接用来做本次对比测试

./producer.sh -n '172.24.248.2:19902;172.24.248.6:19902;172.24.248.10:19902' -w 128 -t test_topic -m true

![123ce839565c28af7083795f8259a876.png][]  
![297e37199cd51df34e4bf4416c8ae182.png][]

#### 消费者 ####

./consumer.sh -n '172.24.248.2:19902;172.24.248.6:19902;172.24.248.10:19902' -w 100 -t test_topic -g zhurunhua -m true

![2f3d6bc2e93c71f84adce2f6d5ed7a5e.png][]  
![b20cafc132449e495d2b23b357c43e96.png][]

### 客户端未使用消息追踪 ###

#### 生产者 ####

./producer.sh -n '172.24.248.2:19902;172.24.248.6:19902;172.24.248.10:19902' -w 128 -t test_topic -m false

![02ffad969002a5a970072af801cb09a3.png][]  
![91e2385f9ac3b6aceb44f89cea968970.png][]

#### 消费者 ####

./consumer.sh -n '172.24.248.2:19902;172.24.248.6:19902;172.24.248.10:19902' -w 100 -t test_topic -g zhurunhua

![148ac1a5900b8974b5277411f6b8f75a.png][]  
![4ba80722cf5a4fd02e4491b825b4311c.png][]

## 集群未开启消息追踪 ##

#### 生产者 ####

./producer.sh -n 'rocketmq01-xadd.test.xdf.cn:9876' -w 128 -t zhurunhua-test -m false

![a09af8acc5a2c3942d5e1d64469d9f52.png][]

![cb2b7a8e292470ecdabe5da1d2767512.png][]

#### 消费者 ####

./consumer.sh -n 'rocketmq01-xadd.test.xdf.cn:9876' -w 100 -t zhurunhua-test -g zhurunhua

![c68c8c3307fe47b7648f7d6dadaf6365.png][]

![88998b6e74ed2f50dd027d690940b55f.png][]

## 总结 ##

下面的表格统计了几种情况下，集群总的TPS（大概）

<table> 
 <thead> 
  <tr> 
   <th></th> 
   <th align="center">集群未开启消息追踪</th> 
   <th align="center">集群开启消息追踪</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td><strong>客户端使用消息追踪</strong></td> 
   <td align="center">——————————————————</td> 
   <td align="center">生产者：5.7W；消费者：14W</td> 
  </tr> 
  <tr> 
   <td><strong>客户端未使用消息追踪</strong></td> 
   <td align="center">生产者：5.5W；消费者：21W</td> 
   <td align="center">生产者：5.6W；消费者：19W</td> 
  </tr> 
 </tbody> 
</table>

*  从服务端的角度，是否开启消息追踪功能，对性能影响不大，客户端消费者性能会略有下降；
 *  从客户端的角度，对于生产者，是否使用消息追踪功能，对性能影响不大，对于消费者，使用了消息追踪功能后，性能会有明显下降。
 *  如果服务端未开启消息追踪，客户端使用了消息追踪的功能，客户端会报错：No topic route info in name server for the topic：RMQ\_SYS\_TRACE\_TOPIC，实测发现对性能无太大影响，但是客户端会打印大量日志。

[123ce839565c28af7083795f8259a876.png]: https://img-blog.csdnimg.cn/img_convert/123ce839565c28af7083795f8259a876.png
[297e37199cd51df34e4bf4416c8ae182.png]: https://img-blog.csdnimg.cn/img_convert/297e37199cd51df34e4bf4416c8ae182.png
[2f3d6bc2e93c71f84adce2f6d5ed7a5e.png]: https://img-blog.csdnimg.cn/img_convert/2f3d6bc2e93c71f84adce2f6d5ed7a5e.png
[b20cafc132449e495d2b23b357c43e96.png]: https://img-blog.csdnimg.cn/img_convert/b20cafc132449e495d2b23b357c43e96.png
[02ffad969002a5a970072af801cb09a3.png]: https://img-blog.csdnimg.cn/img_convert/02ffad969002a5a970072af801cb09a3.png
[91e2385f9ac3b6aceb44f89cea968970.png]: https://img-blog.csdnimg.cn/img_convert/91e2385f9ac3b6aceb44f89cea968970.png
[148ac1a5900b8974b5277411f6b8f75a.png]: https://img-blog.csdnimg.cn/img_convert/148ac1a5900b8974b5277411f6b8f75a.png
[4ba80722cf5a4fd02e4491b825b4311c.png]: https://img-blog.csdnimg.cn/img_convert/4ba80722cf5a4fd02e4491b825b4311c.png
[a09af8acc5a2c3942d5e1d64469d9f52.png]: https://img-blog.csdnimg.cn/img_convert/a09af8acc5a2c3942d5e1d64469d9f52.png
[cb2b7a8e292470ecdabe5da1d2767512.png]: https://img-blog.csdnimg.cn/img_convert/cb2b7a8e292470ecdabe5da1d2767512.png
[c68c8c3307fe47b7648f7d6dadaf6365.png]: https://img-blog.csdnimg.cn/img_convert/c68c8c3307fe47b7648f7d6dadaf6365.png
[88998b6e74ed2f50dd027d690940b55f.png]: https://img-blog.csdnimg.cn/img_convert/88998b6e74ed2f50dd027d690940b55f.png