本文详细介绍了在一个包含3个节点的Hadoop集群上配置Flink 1.12.2高可用性的步骤，包括设置JAVA_HOME、HADOOP_HOME，配置masters、workers文件，调整flink-conf.yaml，并手动创建必要目录。启动cluster和historyserver后，检查进程以确保集群正常运行。
flink-1.12.2 ha 集群配置
网上很多都是旧版的配置，很多配置项名称已经改变。本文是3个节点（同时也是 hadoop 集群节点）组成的 Flink-1.12.2版本的高可用集群配置，亲测可用:
参考:
Flink HistoryServer配置（简单三步完成）
Flink HA配置
每台机器内容如下：
/etc/profile.d/hacl-flinkcl-env.sh (使生效）
export JAVA_HOME=/usr/local/java/jdk1.8.0_271
export HADOOP_HOME=/opt/hacl/hadoop-3.3.0
export HADOOP_CLASSPATH=`$HADOOP_HOME/bin/hadoop classpath`export FLINK_DATA_ROOT=/hacl/flink-ha/flinkcl
export FLINK_HOME=/opt/hacl/flink-1.12.2
export PATH=$PATH:$FLINK_HOME/bin
$FLINK_HOME/conf/masters
<flink01.pepstack.com:8081
flink02.pepstack.com:8081
flink03.pepstack.com:8081
最低0.47元/天 解锁文章
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
