docker kafka安装使用

逃离我推掉我的手 2023-02-21 04:45 130阅读 0赞

1、kafka需要zookeeper管理,所以需要先安装zookeeper。

下载zookeeper镜像
$ docker pull wurstmeister/zookeeper

2、启动镜像生成容器
## docker run -d —name zookeeper -p 2181:2181 -v /etc/localtime:/etc/localtime wurstmeister/zookeeper
$ docker run -d —restart=always —log-driver json-file —log-opt max-size=100m —log-opt max-file=2 —name zookeeper -p 2181:2181 -v /etc/localtime:/etc/localtime wurstmeister/zookeeper

3、下载kafka镜像
$ docker pull wurstmeister/kafka

4、启动kafka镜像生成容器
## docker run -d —name kafka -p 9092:9092 -e KAFKA_BROKER_ID=0 -e KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181/kafka -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://121.89.173.90:9092 -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 -v /etc/localtime:/etc/localtime wurstmeister/kafka
$ docker run -d —restart=always —log-driver json-file —log-opt max-size=100m —log-opt max-file=2 —name kafka -p 9092:9092 -e KAFKA_BROKER_ID=0 -e KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181/kafka -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://121.89.173.90:9092 -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 -v /etc/localtime:/etc/localtime wurstmeister/kafka
参数说明:
-e KAFKA_BROKER_ID=0 在kafka集群中,每个kafka都有一个BROKER_ID来区分自己

-e KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181/kafka 配置zookeeper管理kafka的路径zookeeper:2181/kafka

-e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://121.89.173.90:9092 把kafka的地址端口注册给zookeeper,如果是远程访问要改成外网IP,类如Java程序访问出现无法连接。

-e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 配置kafka的监听端口

-v /etc/localtime:/etc/localtime 容器时间同步虚拟机的时间

docker stats $(docker ps —format={ {.Names}})

5、验证kafka是否可以使用

5.1、进入容器
$ docker exec -it kafka bash

5.2、进入 /opt/kafka_2.12-2.3.0/bin/ 目录下
$ cd /opt/kafka_2.12-2.3.0/bin/

5.3、运行kafka生产者发送消息
$ ./kafka-console-producer.sh —broker-list localhost:9092 —topic sun

发送消息

{“datas”:[{“channel”:””,”metric”:”temperature”,”producer”:”ijinus”,”sn”:”IJA0101-00002245”,”time”:”1543207156000”,”value”:”80”}],”ver”:”1.0”}

5.4、运行kafka消费者接收消息
$ ./kafka-console-consumer.sh —bootstrap-server localhost:9092 —topic sun —from-beginning

ps:如果程序出现异常或者启动失败,先查看kafka日志 docker logs kafka,排查原因后重启zk和kafka

发表评论

表情:
评论列表 (有 0 条评论,130人围观)

还没有评论,来说两句吧...

相关阅读

    相关 Docker安装Kafka

    Docker安装Kafka ![img][] 简单安装为了集成 SpringBoot,真实使用,增加增加更多配置,比如将log映射出来 1.下载镜像 d

    相关 docker安装kafka

    前言 最近在用kafka做项目,所以本地搭建下kafka,但是又嫌java安装和安装kafka太麻烦,所以想到用docker来部署。 镜像 wurstmeister/ka