spring 整合kafka实现 BatchAcknowledgingMessageListener 批量接收数据

最新推荐文章于 2025-05-13 09:39:35 发布

jinger_000

最新推荐文章于 2025-05-13 09:39:35 发布

阅读量4.4k

点赞数 4

CC 4.0 BY-SA版权

分类专栏： kafka 文章标签： kafka BatchAcknowledgingMessage JAVA WEB spring 线程阻塞

本文链接：https://blog.csdn.net/jinger_000/article/details/84189627

本文介绍了如何在Spring中利用BatchAcknowledgingMessageListener接口实现Kafka消息的批量接收，以应对高吞吐量、高并发场景。升级Kafka到1.1.0后，调整配置文件，不再自动提交接收，并实现监听类。通过重载onMessage()方法，每次批量接收约500条数据，有效减少线程数，提高处理效率。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

之前参考别的文章实现了spring整合kafka接收单条数据处理，由于高吞吐量，高并发的需要，需要批量取kafka数据，并批量存储。在网上搜索的资料，发现资料比较少，本人在原来单条数据处理的基础上用BatchAcknowledgingMessageListener接口实现了批量接收kafka数据的功能。

前言：环境配置说明，由于spring托管的方式不支持低版本的kafka数据的批量接收，所以在升级kafka为1.1.0时再做批量接收处理。

兼容性参考下图：