面试官：来来来，说说 Kafka 处理请求的全流程！

小鱼儿 2022-11-29 13:29 143阅读 0赞

![format_png][]

我的新课《C2C 电商系统微服务架构120天实战训练营》在公众号**儒猿技术窝**上线了，感兴趣的同学，可以长按扫描下方二维码了解课程详情：

**课程大纲请参见文末**

![format_png 1][]

![format_png 2][]

本文来源：yes的练级攻略

# 叨叨 #

在进入今天主题之前我想先叨叨几句，就源码这个事儿，不同人有不同的看法。

有些人听到源码这两个词就被吓到了，这么多代码怎么看。奔进去就像无头苍蝇，一路断点跟下来，跳来跳去，算了拜拜了您嘞。而有些人觉得源码有啥用，看了和没看一样，看了也用不上。

其实上面两种想法我都有过，哈哈哈。那为什么我会开始看`Kafka`源码呢？

其实就是我有个同事在自学`go`，然后想用go写个消息队列，在画架构图的时候就来问我，这消息队列好像有点东西啊，消息收发，元数据管理，消息如何持久一堆问题过来，我直呼顶不住。

这市面上`Kafka`、`RocketMQ`都是现成的方案，于是乎我就看起了源码。所以促使我看源码的初始动力，竟然是为了在同事前面装逼！！

我是先看了`RocketMQ`，因为毕竟是`Java`写的，而`Kafka Broker`都是`scala`写的。

梳理了一波`RocketMQ`之后，我又想看看`Kafka`是怎么做的，于是乎我又看起了`Kafka`。

在源码分析之前我先总结性的说了说`Kafka`底层的通信模型。应对面试官询问`Kafka`请求全过程已经够了。

其实源码分析在手机上看效果欠佳，建议电脑端打开观看。

# Reactor模式 #

在扯到`Kafka`之前我们先来说说`Reactor模式`，基本上只要是底层的高性能网络通信就离不开`Reactor模式`。像Netty、Redis都是使用`Reactor模式`。

像我们以前刚学网络编程的时候以下代码可是非常的熟悉，新来一个请求，要么在当前线程直接处理了，要么新起一个线程处理。

![format_png 3][]

在早期这样的编程是没问题的，但是随着互联网的快速发展，单线程处理不过来，也不能充分的利用计算机资源。

而每个请求都新起一个线程去处理，资源的要求就太高了，并且创建线程也是一个重操作。

说到这有人想到了，那搞个线程池不就完事了嘛，还要啥`Reactor`。

![format_png 4][]

池化技术确实能缓解资源的问题，但是池子是有限的，池子里的一个线程不还是得候着某个连接，等待指示嘛。现在的互联网时代早已突破`C10K`了。

因此引入的`IO多路复用`，由**一个线程来监视一堆连接**，同步等待一个或多个IO事件的到来，然后将事件分发给对应的`Handler`处理，这就叫`Reactor模式`。

网络通信模型的发展如下

> 单线程 => 多线程 => 线程池 => Reactor模型

Kafka所采用的`Reactor模型`如下![format_png 5][]

# Kafka Broker 网络通信模型 #

简单来说就是，Broker 中有个`Acceptor(mainReactor)`监听新连接的到来，与新连接建连之后轮询选择一个`Processor(subReactor)`管理这个连接。

而`Processor`会监听其管理的连接，当事件到达之后，读取封装成`Request`，并将`Request`放入共享请求队列中。

然后IO线程池不断的从该队列中取出请求，执行真正的处理。处理完之后将响应发送到对应的`Processor`的响应队列中，然后由`Processor`将`Response`返还给客户端。

每个`listener`只有一个`Acceptor线程`，因为它只是作为新连接建连再分发，没有过多的逻辑，很轻量，一个足矣。

`Processor` 在Kafka中称之为**网络线程**，默认网络线程池有3个线程，对应的参数是`num.network.threads`。并且可以根据实际的业务动态增减。

还有个 IO 线程池，即`KafkaRequestHandlerPool`，执行真正的处理，对应的参数是`num.io.threads`，默认值是 8。IO线程处理完之后会将`Response`放入对应的`Processor`中，由`Processor`将响应返还给客户端。

可以看到网络线程和IO线程之间利用的经典的生产者 - 消费者模式，不论是用于处理Request的共享请求队列，还是IO处理完返回的Response。

这样的好处是什么？**生产者和消费者之间解耦了，可以对生产者或者消费者做独立的变更和扩展**。并且可以平衡两者的处理能力，例如消费不过来了，我多加些IO线程。

如果你看过其他中间件源码，你会发现生产者-消费者模式真的是太常见了，所以面试题经常会有手写一波生产者-消费者。

![format_png 6][]

# 源码级别剖析网络通信模型 #

Kafka 网络通信组件主要由两大部分构成：

**SocketServer** 和 **KafkaRequestHandlerPool**。

## SocketServer ##

![format_png 7][]

可以看出`SocketServer`旗下管理着，`Acceptor 线程`、`Processor 线程`和 `RequestChannel`等对象。

`data-plane`和`control-plane`稍后再做分析，先看看`RequestChannel`是什么。

### RequestChannel ###

![format_png 8][]

关键的属性和方法都已经在下面代码中注释了，可以看出这个对象主要就是**管理`Processor`和作为传输`Request`和`Response`的中转站**。

## Acceptor ##

接下来我们再看看`Acceptor`

![format_png 9][]

可以看到它继承了`AbstractServerThread`，接下来再看看它run些啥

![format_png 10][]

再来看看`accept(key)` 做了啥

![format_png 11][]

很简单，标准`selector`的处理，获取准备就绪事件，调用`serverSocketChannel.accept()`得到`socketChannel`，将`socketChannel`交给通过轮询选择出来的`Processor`，之后由它来处理IO事件。

## Processor ##

接下来我们再看看`Processor`，相对而言比`Acceptor` 复杂一些。

先来看看三个关键的成员

![format_png 12][]

再来看看主要的处理逻辑。

![format_png 13][]

可以看到`Processor`主要是将底层读事件IO数据封装成`Request`存入队列中，然后将IO线程塞入的`Response`，返还给客户端，并处理`Response` 的回调逻辑。

# KafkaRequestHandlerPool #

IO线程池，实际处理请求的线程。

![format_png 14][]

再来看看IO线程都干了些啥

![format_png 15][]

很简单，核心就是不断的从`requestChannel`拿请求，然后调用handle处理请求。

`handle`方法是位于`KafkaApis`类中，可以理解为通过`switch`，根据请求头里面不同的`apikey`调用不同的`handle`来处理请求。

![format_png 16][]

我们再举例看下较为简单的处理`LIST_OFFSETS`的过程，即`handleListOffsetRequest`，来完成一个请求的闭环。

我用红色箭头标示了调用链。表明处理完请求之后是塞给对应的`Processor`的。

![format_png 17][]

最后再来个更详细的总览图，把源码分析到的类基本上都对应的加上去了。

![format_png 18][]

# 请求处理优先级 #

上面提到的`data-plane`和`control-plane`是时候揭开面纱了。这两个对应的就是数据类请求和控制类请求。

为什么需要分两类请求呢？直接在请求里面用key标明请求是要读写数据啊还是更新元数据不就行了吗？

简单点的说比如我们想删除某个topic，我们肯定是想这个topic马上被删除的，而此时producer还一直往这个topic写数据。

那这个情况可能是我们的删除请求排在第N个...等前面的写入请求处理好了才轮到删除的请求。实际上前面那些往这个topic写入的请求都是没用的，**平白的消耗资源**。

再或者说进行`Preferred Leader`选举时候，`producer`将`ack`设置为`all`时候，`老leader`还在等着`follower`写完数据向他报告呢，谁知`follower`已经成为了`新leader`。

而通知它leader已经变更的请求由于被一堆数据类型请求堵着呢，`老leader`就傻傻的在等着，直到超时。

就是为了解决这种情况，社区将请求分为两类。

那如何让控制类的请求优先被处理？优先队列？

社区采取的是两套`Listener`，即数据类型一个`listener`，控制类一个`listener`。

对应的就是我们上面讲的**网络通信模型，在kafka中有两套！** kafka通过两套监听变相的实现了请求优先级，毕竟数据类型请求肯定很多，控制类肯定少，这样看来控制类肯定比大部分数据类型先被处理！

迂回战术啊。

控制类的和数据类区别就在于：就一个`Porcessor线程`，并且请求队列写死的长度为20，社区觉得这样够了。

**END**

# **课程大纲** #

![format_png 19][]

![format_png 20][]

![format_png 21][]

![format_png 22][]

[format_png]: /images/20221124/607012ff471247029e46bb980a52edb1.png
[format_png 1]: /images/20221124/d069e39d35fb4eb282a1fda1bbcaf00b.png
[format_png 2]: /images/20221124/b99049c141cb4bd29e28ca382004df4a.png
[format_png 3]: /images/20221124/912b4a8d1a6f42e191e9fad670f45a95.png
[format_png 4]: /images/20221124/2c1a25ed57f24dba947542d28feb2dde.png
[format_png 5]: /images/20221124/fc2a8e8f20184364b1c1e7d509287cda.png
[format_png 6]: /images/20221124/bd48801a9dcc41bbbd216fabf657718a.png
[format_png 7]: /images/20221124/09829e962d8f4119a8307b1848bc3dd5.png
[format_png 8]: /images/20221124/9fd54a703a0a41d9bf9fc587ecf72459.png
[format_png 9]: /images/20221124/a5af5b94ff324cc2af4a7dbb90b51ff0.png
[format_png 10]: /images/20221124/01da75b90d834243a86f31fb07694f38.png
[format_png 11]: /images/20221124/104122028bdb4ec0ac73305445173575.png
[format_png 12]: /images/20221124/07aa8a9c85f94228a773ff0312a81aca.png
[format_png 13]: /images/20221124/b47ed243282d49529a72de6ebf5cc72d.png
[format_png 14]: /images/20221124/0b655492afe8468eba25cd5ec1090b7b.png
[format_png 15]: /images/20221124/d34465a01b764ac3a7fd7c94da803e45.png
[format_png 16]: /images/20221124/98afc0a2f3c2457bbe9413ff70fc095f.png
[format_png 17]: /images/20221124/9d0aeb6406c34a68a73255f8b4dd1498.png
[format_png 18]: /images/20221124/c61c294f0d0046259affe2c0596310c2.png
[format_png 19]: /images/20221124/73c73b4865284837b716e996abca041b.png
[format_png 20]: /images/20221124/0c8ea204bf3246918f8fe1f8e15d9869.png
[format_png 21]: /images/20221124/6681c35373dd484ba9376bb12b7fd118.png
[format_png 22]: /images/20221124/e5e931518beb4c62a756e661ce743636.png