一、下载flink https://www.apache.org/dyn/closer.lua/flink/flink-1.18.1/flink-1.18.1-bin-scala_2.12.tgz 解压: tar -zxvf flink-1.18.1-bin-scala_2.12.tgz 二、下载mysql cdc https://repo1.maven.org/maven2/org/apache/flink/flink-connector-jdbc/3.0.0-1.16/flink-connector-jdbc-3.0.0-1.16...
flink-cdc-pipeline-connector-mysql-3.1.0.jar flink-cdc-pipeline-connector-doris-3.1.0.jar 如果没有则下载,下载地址为: # 下载mysql连接器wget repo1.maven.org/maven2/ # 下载doris连接器wget repo1.maven.org/maven2/ 另外,还需要确保Flink的flink-1.19.0/lib下包含MySQL驱动, 如果没有则需要下载 # ...
请按照您使用的Flink版本来下载相应版本的MySQL CDC Connector。例如,如果您使用的是Flink 1.13.2版本,可以在该页面中找到Flink 1.13.2版本的MySQL CDC Connector下载链接。您也可以使用Maven或Gradle等构建工具来添加MySQL CDC Connector的依赖项,以便在您的项目中使用它。在您的Maven或Gradle配置文件中,可以添加以下依...
'connector' = 'mysql-cdc', #引入的CDC jar包驱动,没有引入会报错提示需要引入 'hostname' = '192.168.50.163',#源数据库连接host地址,可以根据自己的具体设置,此处为笔者本机的 'port' = '3306', #源数据库端口 'username' = 'root',#源数据库账号 'password' = '***',#源数据库密码 'database-...
这里flink-sql-connector-mysql-cdc,在这里只能下到最新版1.4: image-20220913170030754 可以自行https://github.com/ververica/flink-cdc-connectors下载新版mvn clean install -DskipTests 自己编译。 img 这是我编译的最新版2.2,传上去发现太新了,如果重新换个版本,我得去gitee下载源码,不然github速度太慢了,然后用ID...
flink-sql-connector-mysql-cdc-2.1.1.jar flink-connector-jdbc-1.15.3.jar mysql-connector-java-5.1.47.jar 准备数据 准备MySQL 数据库数据 在MySQL 数据库中准备测试数据,作为导入 OceanBase 数据库的源数据。 进入MySQL 数据库。 [xxx@xxx /...]$mysql-hxxx.xxx.xxx.xxx-P3306-uroot-p***<Omitecho...
如果 发行版本 mysql cdc 出现bug,无法解决,那就的拉取源码 改代码,在重新编译了. 拉取源码https://github.com/ververica/flink-cdc-connectors 去掉不需要的 模块 <modules><module>flink-cdc-base</module><module>flink-connector-debezium</module><module>flink-connector-test-util</module><module>flink-co...
flink-sql-connector-mysql-cdc-1.4.0.jar 如果你的Flink是其它版本,可以来这里下载。 我是flink1.13,这里flink-sql-connector-mysql-cdc,需要1.4.0以上版本。 [图片上传失败...(image-f7e248-1664517247727)] 如果你是更高版本的flink,可以自行https://github.com/ververica/flink-cdc-connectors下载新版mvn clean...
1.0/flink-cdc-pipeline-connector-mysql-3.1.0.jar
MySQL CDC 2.0 用时13分钟; MySQL CDC 1.4 用时89分钟; 读取性能提升6.8倍。 三、什么是 Flink Doris Connector Flink Doris Connector 是 Doris 社区为了方便用户使用 Flink 读写 Doris 数据表的一个扩展,目前 Doris 支持 Flink 1.11.x ,1.12.x,1.13.x;Scala 版本:2.12.x。