这些命令创建了一个名为test_db的数据库和一个名为test_collection的集合。 3. 配置 Flink CDC 我们需要配置 Flink CDC,以便它能够连接到 MongoDB。以下是用于配置 Flink CDC 的 Maven 依赖: <dependency><groupId>org.apache.flink</groupId><artifactId>flink-connector-mongodb-cdc</artifactId><version>1.3...
以下示例展示了如何通过Flink CDC连接MongoDB,并将数据流式处理: importorg.apache.flink.streaming.api.environment.StreamExecutionEnvironment;importcom.ververica.cdc.connectors.mongodb.MongoDBSource;importorg.apache.flink.streaming.api.datastream.DataStream;publicclassMongoDBFlinkCDC{publicstaticvoidmain(String[]ar...
flink-connector-mongodb-cdc。为了设置MongoDB CDC连接器，你需要在构建自动化工具（例如Maven或SBT）中...
MongoDB CDC 连接器允许从 MongoDB 读取快照数据和增量数据。 依赖项 为了设置 MongoDB CDC 连接器,下表提供了使用构建自动化工具(例如 Maven 或 SBT)和带有 SQL JAR 包的 SQL 客户端的两个项目的依赖关系信息。 Maven <dependency><groupId>com.ververica</groupId><artifactId>flink-connector-mongodb-cdc</...
https://repo1.maven.org/maven2/com/ververica/flink-sql-connector-mongodb-cdc/2.4.2/flink-sql-connector-mongodb-cdc-2.4.2.jar 在flink/conf/flink-conf.yaml 文件中设置 checkpoint 间隔: execution.checkpointing.interval: 10 s 生产中不推荐使用此间隔,太快会产生大量文件导致 Cost 上升,一般推荐的 ...
您应该使用已发布的版本，例如flink-sql-connector-mongodb-cdc-2.3.0.jar，该版本可以在Maven中央...
https://repo1.maven.org/maven2/com/ververica/flink-sql-connector-mongodb-cdc/2.4.2/flink-sql-connector-mongodb-cdc-2.4.2.jar 在flink/conf/flink-conf.yaml 文件中设置 checkpoint 间隔: execution.checkpointing.interval: 10 s 生产中不推荐使用此间隔,太快会产生大量文件导致 Cost 上升,一般推荐的 ...
flink-sql-connector-mongodb-cdc-*.jar: https://repo1.maven.org/maven2/com/ververica/flink-sql-connec... 在flink/conf/flink-conf.yaml 文件中设置 checkpoint 间隔: execution.checkpointing.interval: 10 s 生产中不推荐使用此间隔,太快会产生大量文件导致 Cost 上升,一般推荐的 Checkpoint 间隔是 1 -...
flink-connector-tidb-cdc [ci][tidb] Fix dns cache works incorrect in latest jdk 8. (#1809) 2年前 flink-sql-connector-db2-cdc [build] Bump version to 2.4-SNAPSHOT 2年前 flink-sql-connector-mongodb-cdc [build] Bump version to 2.4-SNAPSHOT ...
Building the Apache Flink MongoDB Connector from Source Prerequisites: Unix-like environment (we use Linux, Mac OS X) Git Maven (we recommend version 3.8.6) Java 11 git clone https://github.com/apache/flink-connector-mongodb.git cd flink-connector-mongodb mvn clean package -DskipTests ...