Flink从Kafka读取数据

本文详细介绍了如何使用Apache Flink从Kafka读取数据的步骤,包括环境搭建、IDEA程序编写、配置依赖以及Kafka生产者创建。通过示例代码展示了如何设置Kafka消费者配置,并在Flink程序中读取Kafka的`test`主题数据。此外,还列举了常用的Kafka命令,帮助理解Kafka的管理和操作。

Flink从Kafka读取数据

1、环境搭建,hadoop集群、zookeeper、kafka
2、IDEA程序编写+配置依赖

在IDEA中添加kafka配置依赖:

Apache Flink 附带了一个通用的 Kafka 连接器,它试图跟踪最新版本的 Kafka 客户端。它使用的客户端版本可能会在 Flink 版本之间发生变化。现代 Kafka 客户端向后兼容代理版本 0.10.0 或更高版本。关于Kafka兼容性的详细信息,请参考Kafka官方文档

<dependency>
	<groupId>org.apache.flink</groupId>
	<artifactId>flink-connector-kafka_2.11</artifactId>
	<version>1.12.3</version>
</dependency>

IDEA程序编写:

import org.apache.flink.api
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值