Flink 消费 Kafka 中的数据

最新推荐文章于 2025-06-30 14:57:43 发布

原创

最新推荐文章于 2025-06-30 14:57:43 发布 · 965 阅读

3 ·

CC 4.0 BY-SA版权

文章标签：

#kafka #flink #java #分布式 #大数据

本文详细介绍了如何在 Flink 中消费 Kafka 数据，包括导入必要的依赖和实际的消费步骤，帮助读者理解如何在大数据处理中结合使用这两种工具。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Flink 消费 Kafka 中的数据

在官网的 Connectors 中有 Kafka

1、导入依赖

<dependency>
            <groupId>org.apache.flink</groupId>
            <artifactId>flink-connector-kafka_2.11</artifactId>
            <version>1.11.2</version>
        </dependency>

2、消费 Kafka 中的数据

package com.shujia.flink.kafka

import java.util.Properties

import org.apache.flink.api.common.serialization.SimpleStringSchema
import org.apache.flink.streaming.api.scala._
import org.apache.flink.streaming.connectors.kafka.FlinkKafkaConsumer

object Demo1KafkaSource {
  def main(args: Array[String]): Unit = {
    val env: StreamExecutionEnvironment = StreamExecutionEnvironment.getExecutionEnvironment