kafka指定分区消费

小码农叔叔

于 2020-05-22 18:48:51 发布

阅读量1.3w

点赞数 1

CC 4.0 BY-SA版权

分类专栏： kafka入门到项目实战高手文章标签： kafka指定分区消费

本文链接：https://blog.csdn.net/zhangcongyi420/article/details/106288946

kafka入门到项目实战高手专栏收录该内容

16 篇文章 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

本文介绍了在Kafka中如何确保消费者从特定分区接收消息以保证消息有序性。通过创建测试topic并编写producer及两个consumer代码示例，演示了如何根据业务规则将消息发送至不同分区并被相应消费者消费。在调试过程中遇到的问题和解决方案也进行了分享。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

前言

在某些场景中，消费者组中不同的消费者需要从某个topic下的不同分区接收消息，并确保消息的有序性，或者producer端需要根据一定的业务规则对消息进行分类然后发送到不同的分区，然后不同的消费者就可以获取指定分区的消息了

在上一篇中，我们讨论过如何在producer端将消息发送到指定的分区的两种实现方式，结合上面的需求，我们继续在此基础上实现消费端消费指定分区的消息

代码流程说明

1、创建测试topic

提前在开启了kafka服务的虚拟机或服务器上创建一个名为 "zcy3"的topic，为3个分区，可执行下面的命令进行创建

./kafka-topics.sh --zookeeper localhost:2181 --create --topic zcy3 --partitions 3 --replication-factor 1

2、编写producer代码

public class ParProducer {

    private final KafkaProducer<String, String> producer;

    public final static String TOPIC = "zcy3";

    public ParProducer() {
        Properties props = new Properties();
        props.put("bootstrap.servers",

了解本专栏

超级会员免费看