Kafka单节点多broker的部署方式

最新推荐文章于 2025-07-30 14:33:54 发布

sisi.li8

最新推荐文章于 2025-07-30 14:33:54 发布

阅读量489

点赞数

CC 4.0 BY-SA版权

分类专栏： kafka 文章标签： Kafka 多Broker

本文链接：https://blog.csdn.net/qq_35885488/article/details/103118209

kafka 专栏收录该内容

9 篇文章

订阅专栏

本文详细介绍了如何在单个节点上部署多个Kafka Broker，包括配置文件的复制与修改、启动流程、创建topic及消息的生产和消费测试。通过设置不同的broker.id和监听端口，以及指定各自的日志目录，实现单机环境下Kafka集群的功能模拟。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

`Kafka`单节点多broker的部署方式（部署之前保证单节点部署成功）

参考官网

复制配置文件

cp server.properties server-1.properties

cp server.properties server-2.properties

cp server.properties server-3.properties

修改配置文件

#vi server-1.properties
broker.id=1
listeners=PLAINTEXT://:9093
log.dirs=/home/hadoop/app/tmp/kafka-logs-1

#vi server-2.properties
broker.id=2
listeners=PLAINTEXT://:9094
log.dirs=/home/hadoop/app/tmp/kafka-logs-2

#vi server-3.properties
broker.id=3
listeners=PLAINTEXT://:9095
log.dirs=/home/hadoop/app/tmp/kafka-logs-3

启动(后台启动)，要先启动zookeeper（zkServer.sh start）

kafka-server-start.sh -daemon $KAFKA_HOME/config/server-1.properties &
kafka-server-start.sh -daemon $KAFKA_HOME/config/server-2.properties &
kafka-server-start.sh -daemon $KAFKA_HOME/config/server-3.properties &

创建topic信息(三副本)，并测试(生产消费)

kafka-topics.sh --create --zookeeper hadoop000:2181	 --replication-factor 3 --partitions 1 --topic my-replicated-topic
#显示所有topic
kafka-topics.sh --list --zookeeper hadoop000:2181
kafka-topics.sh --describe --zookeeper hadoop000:2181 --topic my-replicated-topic
#多broker生产消息
kafka-console-producer.sh --broker-list hadoop000:9093,hadoop000:9094,hadoop000:9095 --topic my-replicated-topic
#消费消息
kafka-console-consumer.sh --zookeeper hadoop000:2181  --topic my-replicated-topic