Flink sink批量写入hbase代码

最新推荐文章于 2024-06-19 21:29:08 发布

黄瓜炖啤酒鸭

最新推荐文章于 2024-06-19 21:29:08 发布

阅读量3.9k

点赞数

CC 4.0 BY-SA版权

分类专栏： Flink 优化文章标签： Flink 批量写入hbase代码

本文链接：https://blog.csdn.net/qq_31866793/article/details/103381892

本文详细介绍了如何使用Flink实现流处理数据的实时批量写入HBase的操作，包括流的准备和写入过程的关键步骤。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

准备流，实时批量写入hbase：

package application_spark.hbase;

import org.apache.flink.configuration.Configuration;
import org.apache.flink.streaming.api.functions.sink.RichSinkFunction;
import org.apache.hadoop.hbase.HBaseConfiguration;
import org.apache.hadoop.hbase.TableName;
import org.apache.hadoop.hbase.client.*;

import java.io.IOException;
import java.util.List;

public class HbaseSink extends RichSinkFunction<List<Put>> {
    private org.apache.hadoop.conf.Configuration configuration;
    private Connection connection = null;
    private BufferedMutator userMutator;
    private BufferedMutator scencesMutator;

    @Override
    public void open(Configuration parameters)