一文讲清RabbitMQ、Apache Kafka、ActiveMQ

偏执的太偏执、 2023-10-13 17:12 42阅读 0赞

> 本文分享了关于Kafka、RabbitMQ和ActiveMQ三个流行的异步通信消息队列，以及三者的区别。

微信搜索关注《Java学研大本营》

如果你正在准备Java开发面试，除了Spring Boot和Microservices，你还应该准备关于 Messaging brokers(消息代理)、Kafka、RabbitMQ和ActiveMQ等方面的知识，例如Kafka、RabbitMQ和ActiveMQ之间的区别是什么？是Java面试中常见的问题之一。

![图片][9608ac1b4fa4cefa99d9fbb20c723f7e.jpeg]

消息系统在现代分布式架构中发挥着至关重要的作用，应用程序和服务通过网络相互通信。消息系统允许发送方和接收方解耦，从而实现异步通信。RabbitMQ、Apache Kafka和ActiveMQ是业界使用的三种流行消息系统。

![图片][c8c369469aa439de4d2ec54e309710c4.png]

### 1 RabbitMQ ###

RabbitMQ是一个开源的消息代理，实现了高级消息队列协议（AMQP）标准。它是用Erlang编写的，并具有可插拔的架构，可以轻松扩展。

RabbitMQ支持多种消息传递模式，例如发布/订阅、请求/响应和点对点，并且具有强大的功能集，例如消息确认、路由和排队。

![图片][60d5739ef1c26773b5b889a13170b3c9.png]

### 2 Apache Kafka ###

Apache Kafka是一个开源的分布式事件流处理平台，最初由LinkedIn开发。Kafka使用Scala和Java编写，旨在处理大规模的流数据流。

Kafka使用发布/订阅消息模型，并针对高吞吐量、低延迟和容错性进行了优化。Kafka具有持久的消息模型，这意味着消息存储在磁盘上，并且可以多次重播。

![图片][48f00724af2e07d9ef0c2ad5059f1149.png]

### 3 ActiveMQ ###

Apache ActiveMQ是一个开源的消息代理，实现了Java消息服务（JMS）API。ActiveMQ使用Java编写，并具有可插拔的架构，可轻松扩展。

ActiveMQ支持多种消息传递模式，例如点对点、发布/订阅和请求/响应，并具有强大的功能集，例如消息确认、路由和排队。

![图片][89a299423d72c754dff8d4edf5a0034a.png]

### 4 RabbitMQ、Apache Kafka和ActiveMQ三者的区别 ###

以下是Apache Kafka、RabbitMQ和ActiveMQ之间的关键区别：

#### 4.1 信息传递模式 ####

RabbitMQ和ActiveMQ都支持JMS API，这意味着它们遵循传统的消息模型，其中消息发送到队列或主题，并由一个或多个消费者消耗。

另一方面，Kafka使用发布/订阅消息模型，其中消息发布到主题并由一个或多个订阅者消耗。

RabbitMQ和ActiveMQ使用的传统消息模型非常适合需要严格排序和可靠交付消息的应用程序。

另一方面，Kafka使用的发布/订阅消息模型更适合流数据场景，其中需要实时处理数据。

以下是一个很好的图表，突出了Kafka和RabbitMQ之间的架构差异。

![图片][ff370359a3df062f56dc12b2552541e4.png]

#### 4.2 可扩展性 ####

可扩展性是消息系统的重要要求，特别是在处理大量数据时。RabbitMQ和ActiveMQ都被设计为可扩展的，但它们在实现可扩展性方面采用了不同的方法。

RabbitMQ使用集群方法来实现可扩展性，其中多个RabbitMQ代理连接在一起形成一个集群。消息分布在整个集群中，消费者可以连接到集群中的任何代理以消费消息。RabbitMQ还支持联邦，允许将多个RabbitMQ集群连接在一起。

ActiveMQ使用代理网络方法来实现可扩展性，其中多个ActiveMQ代理连接在一起形成一个网络。消息分布在整个网络中，消费者可以连接到网络中的任何代理以消费消息。ActiveMQ还支持主/从复制，为消息代理提供高可用性。

另一方面，Kafka被设计为开箱即用的高度可扩展。Kafka使用分区方法来实现可扩展性，其中消息被分区到多个Kafka代理上。每个分区都在多个代理上进行了复制以实现容错性。这种方法允许Kafka处理大量数据同时保持低延迟和高吞吐量。¹

![图片][af6c30e7f77da555a58244b356d226fd.png]

#### 4.3 性能 ####

性能是选择消息系统时要考虑的另一个关键因素。RabbitMQ、Kafka和ActiveMQ都具有不同的性能特征。

RabbitMQ被设计为可靠的消息系统，这意味着它优先考虑消息传递而不是性能。RabbitMQ可以处理中等消息速率，适用于需要严格排序和可靠传递消息的应用程序。

另一方面，Kafka被设计为高性能系统，可以处理大量数据并具有低延迟。Kafka通过使用分布式架构和优化顺序I/O来实现这种性能。

ActiveMQ也被设计为高性能系统，可以处理高消息速率。ActiveMQ通过使用异步架构和优化消息批处理来实现这种性能。

下面是一张来自confluent的图表，比较了Apache Kafka、Pulsar和Rabbit MQ的性能。

![图片][4f908092cc2c15d27f0496356d4d9d1d.png]

#### 4.4 数据持久性 ####

数据持久性是消息传递系统的重要特征，它使消息即使在消息系统崩溃时也能够被存储和检索。RabbitMQ、Kafka和ActiveMQ都有不同的数据持久性方法。

RabbitMQ 默认将消息存储在磁盘上，这使消息即使在代理宕机时也能被持久化。RabbitMQ 还支持不同的存储后端，包括内存存储，这提供了更好的性能，但会降低数据可靠性。

Kafka默认将消息存储在磁盘上，并使用基于日志的架构来实现高耐久性和可靠性。Kafka保留消息的时间是可配置的，这使得消息可以在必要时进行重播。

ActiveMQ也默认将消息存储在磁盘上，并支持不同的存储后端，包括JDBC和基于文件的存储。ActiveMQ可以将消息存储在数据库中，这提供了更好的数据可靠性，但会牺牲性能。

这里有一张表，它展示了Kafka的架构：

![图片][da77d6049be486f1ee799d77a36d79f1.png]

#### 4.5 与其他系统的集成 ####

在选择消息系统时，与其他系统的集成是一个重要的考虑因素。RabbitMQ、Kafka和ActiveMQ都具有不同的集成能力。

RabbitMQ 与不同的编程语言集成良好，包括 Java、Python、Ruby 和 .NET。RabbitMQ还有插件，允许它与不同的系统集成，包括数据库、Web服务器和消息代理。

Kafka与不同的数据处理系统集成良好，包括Apache Spark、Apache Storm和Apache Flink。Kafka也有一个连接器框架，允许它与不同的数据库和数据源集成。

ActiveMQ与不同的JMS客户端集成良好，包括Java、.NET和C++。ActiveMQ还有一些插件，允许它与不同的系统集成，包括Apache Camel和Apache CXF。

这里也有一个表格来表达Kafka、Rabbit MQ和ActiveMQ之间的区别：

![图片][c8c369469aa439de4d2ec54e309710c4.png]

### 5 总结 ###

以上就是关于Apache Kafka、RabbitMQ和ActiveMQ之间的区别。虽然RabbitMQ、Apache Kafka和ActiveMQ是三个流行的消息传递系统，但它们有不同的特点和能力。

RabbitMQ和ActiveMQ遵循传统的消息传递模式，而Kafka使用发布/订阅消息传递模式。RabbitMQ和ActiveMQ使用集群和经纪人网络的方法来实现可扩展性，而Kafka使用分区。RabbitMQ将消息交付置于性能之上，而Kafka和ActiveMQ则优先考虑性能。RabbitMQ、Kafka和ActiveMQ都具有不同的数据持久性和集成能力。

在选择消息传递系统时，必须考虑应用程序或系统的具体要求。RabbitMQ和ActiveMQ适用于需要严格排序和可靠交付消息的应用，而Kafka适用于流式数据场景。

RabbitMQ和ActiveMQ适合于中高速消息率的应用程序，而Kafka适合于需要高消息速率的应用。

同样，RabbitMQ和ActiveMQ适合于需要高数据可靠性的应用，而Kafka适合于需要高性能的应用。

这是我认为每个Java开发者都应该准备的一个问题，但如果你想要更多，你也可以准备微服务问题，比如API网关和负载平衡器的区别，SAGA模式，如何在微服务中管理事务，以及SAGA和CQRS模式的区别，它们经常在在面试中出现。

### 推荐书单 ###

#### 《Apache Kafka2.0入门与实践》 ####

本书是一本适用于数据工程师、软件开发人员和数据架构师的快速入门指南，详细阐述了与Apache Kafka 2.0相关的基本解决方案，主要包括配置Kafka、消息验证、消息增强、序列化、模式注册表、Kafka Streams、KSQL、Kafka Connect等内容。本书注重于编程实现过程，并提供了相应的示例、代码，以帮助读者进一步理解相关方案的实现过程。

该书既可作为高等院校计算机及相关专业的教材和教学参考书，也可作为相关开发人员的自学教材和参考手册。

[《Apache Kafka2.0入门与实践》(\[美\]劳尔·埃斯特达拉)【摘要 书评 试读】- 京东图书京东JD.COM图书频道为您提供《Apache Kafka2.0入门与实践》在线选购，本书作者：，出版社：清华大学出版社。买图书，到京东。网购图书，享受最低优惠折扣!![icon-default.png?t=N6B9][icon-default.png_t_N6B9]https://item.jd.com/12711006.html][Apache Kafka2.0_ _ _- _JD.COM_Apache Kafka2.0_icon-default.png_t_N6B9_icon-default.png_t_N6B9_https_item.jd.com_12711006.html]

![图片][357518e73e6abcb2d45dc89af6238fb6.png]

> > ### 精彩回顾 ###
> > 
> > [一文讲清数据集市、数据湖、数据网格、数据编织][Link 1]
> > 
> > [分布式计算哪家强：Spark、Dask、Ray大比拼][Spark_Dask_Ray]
> > 
> > [使用FPGA制作低延时高性能的深度学习处理器][FPGA]
> > 
> > [ChatGPT是如何运行起来的？（下）][ChatGPT]
> > 
> > [ChatGPT是如何运行起来的？（中）][ChatGPT 1]

> > 微信搜索关注《Java学研大本营》
> > 
> > 访问【IT今日热榜】，发现每日技术热点

[9608ac1b4fa4cefa99d9fbb20c723f7e.jpeg]: https://img-blog.csdnimg.cn/img_convert/9608ac1b4fa4cefa99d9fbb20c723f7e.jpeg
[c8c369469aa439de4d2ec54e309710c4.png]: https://img-blog.csdnimg.cn/img_convert/c8c369469aa439de4d2ec54e309710c4.png
[60d5739ef1c26773b5b889a13170b3c9.png]: https://img-blog.csdnimg.cn/img_convert/60d5739ef1c26773b5b889a13170b3c9.png
[48f00724af2e07d9ef0c2ad5059f1149.png]: https://img-blog.csdnimg.cn/img_convert/48f00724af2e07d9ef0c2ad5059f1149.png
[89a299423d72c754dff8d4edf5a0034a.png]: https://img-blog.csdnimg.cn/img_convert/89a299423d72c754dff8d4edf5a0034a.png
[ff370359a3df062f56dc12b2552541e4.png]: https://img-blog.csdnimg.cn/img_convert/ff370359a3df062f56dc12b2552541e4.png
[af6c30e7f77da555a58244b356d226fd.png]: https://img-blog.csdnimg.cn/img_convert/af6c30e7f77da555a58244b356d226fd.png
[4f908092cc2c15d27f0496356d4d9d1d.png]: https://img-blog.csdnimg.cn/img_convert/4f908092cc2c15d27f0496356d4d9d1d.png
[da77d6049be486f1ee799d77a36d79f1.png]: https://img-blog.csdnimg.cn/img_convert/da77d6049be486f1ee799d77a36d79f1.png
[icon-default.png_t_N6B9]: https://csdnimg.cn/release/blog_editor_html/release2.3.5/ckeditor/plugins/CsdnLink/icons/icon-default.png?t=N6B9
[Apache Kafka2.0_ _ _- _JD.COM_Apache Kafka2.0_icon-default.png_t_N6B9_icon-default.png_t_N6B9_https_item.jd.com_12711006.html]: https://item.jd.com/12711006.html
[357518e73e6abcb2d45dc89af6238fb6.png]: https://img-blog.csdnimg.cn/img_convert/357518e73e6abcb2d45dc89af6238fb6.png
[Link 1]: https://mp.weixin.qq.com/s?__biz=MzkzMDM3MjI3Nw==&mid=2247488135&idx=1&sn=0fb919d96cf1ccb42dac0b2b8cf7a8f6&scene=21#wechat_redirect
[Spark_Dask_Ray]: https://mp.weixin.qq.com/s?__biz=MzkzMDM3MjI3Nw==&mid=2247488124&idx=1&sn=3a2681bc87b3e2cf9b9fa771b9a2a216&scene=21#wechat_redirect
[FPGA]: https://mp.weixin.qq.com/s?__biz=MzkzMDM3MjI3Nw==&mid=2247488111&idx=1&sn=26b24b57724ae12a663997bf0b8c87b4&scene=21#wechat_redirect
[ChatGPT]: https://mp.weixin.qq.com/s?__biz=MzkzMDM3MjI3Nw==&mid=2247488096&idx=1&sn=97b184699d6975adbdda44d5d8e92ab0&scene=21#wechat_redirect
[ChatGPT 1]: https://mp.weixin.qq.com/s?__biz=MzkzMDM3MjI3Nw==&mid=2247488058&idx=1&sn=88d722c14f399483ce74dcedaf9ce7e6&scene=21#wechat_redirect