Kafak相关资料汇总.md

末蓝、 2022-12-21 06:06 193阅读 0赞

###### 1. [大数据入门指南][Link 1] ######

包含了常用大数据框架的入门指南，非常的简单明了，非常适合入门，强烈推介。关于Kafka的入门也是非常的简单易懂。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3UwMTM0Njc0NDI_size_16_color_FFFFFF_t_70_pic_center]

###### 2. Kafka 入门系列 ######

*  [Kafka 系列（一）—— Kafka 简介][Kafka _ Kafka]
 *  [Kafka 系列（二）—— 基于 ZooKeeper 搭建 Kafka 高可用集群][Kafka _ _ ZooKeeper _ Kafka]
 *  [Kafka 系列（三）—— Kafka 生产者详解][Kafka _ Kafka 1]
 *  [Kafka 系列（四）—— Kafka 消费者详解][Kafka _ Kafka 2]
 *  [Kafka 系列（五）—— 深入理解 Kafka 副本机制][Kafka _ _ Kafka]

###### [3.译：使用新的Kafka消费者客户端][3._Kafka] ######

主要介绍新旧API的区别和渊源，`high-level VS low-level`  
消费者的轮询循环被设计为解决这个问题. 所有的网络IO操作在调用poll或者其他的阻塞API,都是在前台完成的.  
消费者并不使用任何的后台线程. 这就意味着消费者的心跳只有在调用poll的时候才会发送给协调者.  
如果应用程序停止polling(不管是处理代码抛出异常或者下游系统崩溃了),就不会再发送心跳了,  
最终就会导致session超时(没有收到心跳,计时器开始增加), 然后消费组就会开始平衡操作.

###### 4.[Kafka 消费者旧版低级 API][Kafka _ API] ######

Kafka 消费者总共有 3 种 API，新版 API、旧版高级 API、旧版低级 API，新版 API 是在 kafka 0.9 版本后增加的，推荐使用新版 API

###### 5.[初始 Kafka Consumer 消费者][Kafka Consumer] ######

对一些易错问题和consumer API进行介绍

###### 6.[真的，Kafka 入门一篇文章就够了][Kafka] ######

###### 7.[Kafka 常用参数配置指南][Kafka 1] ######

###### 8.[Kafka消费者多线程实现][Kafka 2] ######

###### 9.[使用多线程增加kafka消费能力][kafka] ######

###### 10.[Pulsar 概述][Pulsar] ######

Pulsar 是一个用于服务器到服务器的消息系统，具有多租户、高性能等优势

[Link 1]: https://github.com/heibaiying/BigData-Notes
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3UwMTM0Njc0NDI_size_16_color_FFFFFF_t_70_pic_center]: /images/20221120/bb20808868e847ffb8c7ede5f3b9fa0c.png
[Kafka _ Kafka]: https://juejin.im/post/6844903949779075080
[Kafka _ _ ZooKeeper _ Kafka]: https://juejin.im/post/6844903949779091470
[Kafka _ Kafka 1]: https://juejin.im/post/6844903950009761799
[Kafka _ Kafka 2]: https://juejin.im/post/6844903950009778183
[Kafka _ _ Kafka]: https://juejin.im/post/6844903950009794567
[3._Kafka]: https://zqhxuyuan.github.io/2016/02/20/Kafka-Consumer-New/
[Kafka _ API]: https://cloud.tencent.com/developer/article/1336569
[Kafka Consumer]: https://juejin.im/post/6844904017852792840
[Kafka]: https://juejin.im/post/6844903495670169607
[Kafka 1]: https://intl.cloud.tencent.com/zh/document/product/597/31588?lang=zh
[Kafka 2]: https://blog.csdn.net/LINBE_blazers/article/details/104206552
[kafka]: https://segmentfault.com/a/1190000018640106
[Pulsar]: https://pulsar.apache.org/docs/zh-CN/next/concepts-overview/