Flink从Kafka读取数据
1、环境搭建,hadoop集群、zookeeper、kafka
2、IDEA程序编写+配置依赖
在IDEA中添加kafka配置依赖:
Apache Flink 附带了一个通用的 Kafka 连接器,它试图跟踪最新版本的 Kafka 客户端。它使用的客户端版本可能会在 Flink 版本之间发生变化。现代 Kafka 客户端向后兼容代理版本 0.10.0 或更高版本。关于Kafka兼容性的详细信息,请参考Kafka官方文档。
<dependency>
<groupId>org.apache.flink</groupId>
<artifactId>flink-connector-kafka_2.11</artifactId>
<version>1.12.3</version>
</dependency>
IDEA程序编写:
import org.apache.flink.api

本文详细介绍了如何使用Apache Flink从Kafka读取数据的步骤,包括环境搭建、IDEA程序编写、配置依赖以及Kafka生产者创建。通过示例代码展示了如何设置Kafka消费者配置,并在Flink程序中读取Kafka的`test`主题数据。此外,还列举了常用的Kafka命令,帮助理解Kafka的管理和操作。
9196

被折叠的 条评论
为什么被折叠?



