Debezium系列之：debezium同步mysql数据库数据到kafka集群

快乐骑行^_^

已于 2024-09-30 11:06:19 修改

阅读量1.1k

点赞数 1

CC 4.0 BY-SA版权

分类专栏： debezium 大数据平台二次开发文章标签： debezium 同步mysql数据库数据 kafka集群

于 2021-07-27 20:48:22 首次发布

本文链接：https://blog.csdn.net/zhengzaifeidelushang/article/details/119152017

debezium 同时被 2 个专栏收录

377 篇文章 ¥99.90 ¥299.90

订阅专栏

大数据平台二次开发

103 篇文章 ¥19.90 ¥99.00

订阅专栏

本文详细介绍了如何使用Debezium将MySQL数据库的数据实时同步到Kafka集群，包括配置JVM参数、启动Kafka Connector、设置MySQL连接器以及监控Topic等步骤，确保数据迁移的顺利进行。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Debezium系列之：debezium同步mysql数据库数据到kafka集群

一、修改connect-distributed.sh配置

#!/bin/bash

#打开JMX监控
export JMX_PORT=9010
#JVM参数配置优化
export KAFKA_HEAP_OPTS="-Djava.security.auth.login.config=/moudle/debezium/kafka_2.13-2.7.0/config/connect-jaas.conf -Xms28G -Xmx28G  -XX:NewSize=4G -XX:MaxNewSize=4G -verbose:g