Flink里面支持Kafka 0.8、0.9、0.10、0.11. 这里我们需要安装下Kafka,请对应添加对应的Flink Kafka connector依赖的版本,这里我们使用的是0.11 版本: 代码语言:javascript 代码运行次数:0 运行 AI代码解释 <dependency><groupId>org.apache.flink</groupId><artifactId>flink-connector-kafka-0.11_${scala.binary.versi...
就对connector处理一下,排除了kafka-clients,重新引用了一个kafka-clents-1.0.0 的进来。如下: <dependency><groupId>org.apache.flink</groupId><artifactId>flink-connector-kafka_${scala.binary.version}</artifactId><version>${flink.version}</version><exclusions><exclusion><groupId>org.apache.kafka</g...
pom.xml 中添加 Flink connector rabbitmq 的依赖如下: <dependency> <groupId>org.apache.flink</groupId> <artifactId>flink-connector-rabbitmq_${scala.binary.version}</artifactId> <version>${flink.version}</version> </dependency> 1. 2. 3. 4. 5. 生产者 这里我们依旧自己写一个工具类一直的往...
步骤1 确定 flink / scala / flink-connect-kafka 的版本 比如flink 选择的是1.12.7这个版本,我们前去 maven 仓库查看 flink-connect-kafka 的版本。首先访问链接1https://mvnrepository.com/artifact/org.apache.flink/flink-connector-kafka找到对应的1.12.7这个版本,也就是根据 flink 的版本去寻找 flink-connect...
// ---//flinkShadowJar "org.apache.flink:flink-connector-kafka-0.11_${scalaBinaryVersion}:${flinkVersion}"compile"log4j:log4j:${log4jVersion}"compile"org.slf4j:slf4j-log4j12:${slf4jVersion}"// Add test dependencies here.// testCompile "junit:junit:4.12" } // make compileOnly dependencies...
<artifactId>flink-connector-kafka-0.10_${scala.binary.version}</artifactId> <version>${flink.version}</version> </dependency> 二、创建worldcounts代码 参考:Flink+kafka实现Wordcount实时计算 - 小胜的IT空间 - 博客园 package wordcounts; import java.util.Properties; ...
<version>1.13.6</version> <relativePath>..</relativePath> </parent> <artifactId>flink-connector-kafka_${scala.binary.version}</artifactId> <name>Flink : Connectors : Kafka</name> <packaging>jar</packaging> <properties> <kafka.version>2.4.1</kafka.version> </properties> <dependencies> <!-...
apache.flink</groupId> <artifactId>flink-clients_${scala.binary.version}</artifactId> <version>${flink.version}</version> </dependency> <!-- Flink基础依赖 end --> <!-- Flink Elasticsearch 连接器依赖 start --> <dependency> <groupId>org.apache.flink</groupId> <artifactId>flink-connector...
<dependency> <groupId>org.apache.flink</groupId> <artifactId>flink-jdbc_${scala.binary.version}</artifactId> <version>1.10.1</version> </dependency> 示例 本示例使用Kafka connector,通过Flink将Kafka数据实时导入到ClickHouse public class FlinkSinkClickHouse { public static void main(String[] args...
kafka-connector代码操作-scala 712 播放萤火微光 再等一分钟,路的尽头一定能看到有光 收藏 下载 分享 手机看 登录后可发评论 评论沙发是我的～选集(70) 自动播放 [1] Flink基本原理及应用场景分析 1.8万播放 29:33 [2] Flink vs Storm v... 5248播放 12:42 [3] Flink案例开发需求分析 5387...