Kafka单节点多broker的部署方式

谁借莪１个温暖的怀抱￠ 2023-06-14 04:08 18阅读 0赞

# `Kafka`单节点多broker的部署方式（部署之前保证[单节点][Link 1]部署成功） #

参考[官网][Link 2]

1.  复制配置文件

cp server.properties server-1.properties
    
    cp server.properties server-2.properties
    
    cp server.properties server-3.properties

1.  修改配置文件

#vi server-1.properties
    broker.id=1
    listeners=PLAINTEXT://:9093
    log.dirs=/home/hadoop/app/tmp/kafka-logs-1
    
    #vi server-2.properties
    broker.id=2
    listeners=PLAINTEXT://:9094
    log.dirs=/home/hadoop/app/tmp/kafka-logs-2
    
    #vi server-3.properties
    broker.id=3
    listeners=PLAINTEXT://:9095
    log.dirs=/home/hadoop/app/tmp/kafka-logs-3

1.  启动(后台启动)，要先启动zookeeper（`zkServer.sh start`）

kafka-server-start.sh -daemon $KAFKA_HOME/config/server-1.properties &
    kafka-server-start.sh -daemon $KAFKA_HOME/config/server-2.properties &
    kafka-server-start.sh -daemon $KAFKA_HOME/config/server-3.properties &

1.  创建topic信息(三副本)，并测试(生产消费)

kafka-topics.sh --create --zookeeper hadoop000:2181	 --replication-factor 3 --partitions 1 --topic my-replicated-topic
    #显示所有topic
    kafka-topics.sh --list --zookeeper hadoop000:2181
    kafka-topics.sh --describe --zookeeper hadoop000:2181 --topic my-replicated-topic
    #多broker生产消息
    kafka-console-producer.sh --broker-list hadoop000:9093,hadoop000:9094,hadoop000:9095 --topic my-replicated-topic
    #消费消息
    kafka-console-consumer.sh --zookeeper hadoop000:2181  --topic my-replicated-topic

[Link 1]: https://blog.csdn.net/qq_35885488/article/details/103088327
[Link 2]: http://kafka.apache.org/quickstart

发表评论取消回复

表情：

评论列表（有 0 条评论，18人围观）

还没有评论，来说两句吧...

相关阅读

相关 Kafka 有多个broker的例子

\-- Start 1. 启动 ZooKeeper 首先还是启动 ZooKeeper。 1. set KAFKA\_HOME=D:/0\_Shangb

向右看齐/ 2023年10月17日 22:31/ 0 赞/ 47 阅读

相关 Kafka快速入门（Kafka Broker）节点服役和退役、手动调整副本

Kafka Broker 1. Kafka Broker 工作流程 1.1 Zookeeper 存储的 Kafka 信息（1）启动 Zookeeper 客户

浅浅的花香味﹌/ 2023年09月29日 12:55/ 0 赞/ 82 阅读

相关 etcd 单节点部署

https://www.cnblogs.com/xiao987334176/p/9947548.html 　　转载于:https://www.cnblogs.co

左手的ㄟ右手/ 2023年08月17日 17:02/ 0 赞/ 191 阅读

相关 Kafka单节点多broker的部署方式

`Kafka`单节点多broker的部署方式（部署之前保证[单节点][Link 1]部署成功）参考[官网][Link 2] 1. 复制配置文件 cp se

谁借莪１个温暖的怀抱￠/ 2023年06月14日 04:08/ 0 赞/ 19 阅读

相关 2、kafka伪分布多broker部署

\[root@baozi kafka\_2.10-0.8.2.1\]\ ll config 总用量 32 \-rw-r--r--. 1 root root 11

谁践踏了优雅/ 2022年08月01日 06:15/ 0 赞/ 258 阅读

相关 kafka- 单节点 - 单代理配置

在此配置中，您有一个ZooKeeper和代理id实例。以下是配置它的步骤 - 创建Kafka主题 - Kafka提供了一个名为 kafka-topics.sh 的命令行实

àì夳堔傛蜴生んèń/ 2022年05月19日 09:08/ 0 赞/ 253 阅读

相关五.Spark Streaming之kafka单节点多broker部署及使用(二)

一.引言对于Kafka，一个代理只是一个大小为1的集群，所以除了启动更多的代理实例之外，不会有什么变化。但是为了了解它，让我们将集群扩展到三个节点(仍然都在本地机

╰+哭是因爲堅強的太久メ/ 2022年04月16日 07:15/ 0 赞/ 219 阅读

相关四.Spark Streaming之kafka单节点单broker部署及使用(一)

一.介绍 1).概念: kafka是用于构建实时数据管道和流媒体应用。它是水平扩展的，容错的，快速的，并且在成千上万的公司中使用。消息中间件: 生产者和消费者

墨蓝/ 2022年04月16日 04:12/ 0 赞/ 253 阅读

相关 kafka单节点搭建

kafka 服务器：192.168.3.52 1.下载kafa安装包下载地址：http://kafka.apache.org/downloads 版本：kafk

喜欢ヅ旅行/ 2022年03月28日 08:42/ 0 赞/ 342 阅读

相关 Kafka Zookeeper 单节点测试

> 启动单节点Zookeeper Kafka，主要用来做测试使用。 1. Zookeeper [阿里镜像站][Link 1] 这里以 zookeeper-3.4

客官°小女子只卖身不卖艺/ 2021年09月23日 16:30/ 0 赞/ 418 阅读