WeiYe-Jing/datax-web: DataX集成可视化页面,选择数据源即可一键生成数据同步任务,支持RDBMS、Hive、HBase、ClickHouse、MongoDB等数据源,批量创建RDBMS数据同步任务,集成开源调度系统,支持分布式、增量同步数据、实时查看运行日志、监控执行器资源、KILL运行进程、数据源信息加密等。 (github.com) DataX Web是在DataX之...
datax-web地址:https://github.com/WeiYe-Jing/datax-web datax-web-ui地址:https://github.com/WeiYe-Jing/datax-web-ui 安装部署 Web部署 创建数据库 执行bin/db下面的datax_web.sql文件(注意老版本更新语句有指定库名) 修改项目配置 修改datax_admin下resources/application.yml文件。修改数据源配置,目前...
Do you want to decompressthispackage: [datax-executor_2.1.2_1.tar.gz]? (Y/N) 按照提示输入数据库地址,端口号,用户名,密码以及数据库名称,大部分情况下即可快速完成初始化。 如果服务上并没有安装mysql命令,则可以取用目录下/bin/db/datax-web.sql脚本去手动执行,完成后修改相关配置文件 1 2 3 4 5...
modules/datax-admin/bin/console.out 或者 modules/datax-executor/bin/console.out 四、DataX-WEB 运行 1.前端界面 部署完成后,在浏览器中输入http://ip:port/index.html 就可以访问对应的主界面(ip为datax-admin部署所在服务器ip,port为为datax-admin 指定的运行端口9527) 输入用户名 admin 密码 123456 就...
datax下载地址:https://datax-opensource.oss-cn-hangzhou.aliyuncs.com/202303/datax.tar.gz,这个版本大于1.48G。 datax-web现在地址:https://github.com/WeiYe-Jing/datax-web/tags,下载最新版即可。 2)修改datax-web部分 1、将datax-web工程解压到处自己的的编译器。
DataX是一个开源的数据同步工具，用于实现数据的抽取、转换和加载（ETL）。它本身并不支持直接实现表关联...
5、datax-web 简单使用 1)、 登录,启动服务后,打开 http://{应用服务器IP}:{端口号默认为9527/index.html 用户名:admin 密码:123456 2). 操作流程如下: 6、datax-web 注意事项 该应用要求mysql版本 >= 5.7及以上; 该应用一键部署时会默认生成一条执行器记录,如需新的执行器可自行配置; ...
数据仓库 DataX3.0+DataX-Web部署分布式可视化ETL系统 一、DataX 简介 DataX 是阿里云 DataWorks 数据集成的开源版本,主要就是用于实现数据间的离线同步。DataX 致力于实现包括关系型数据库(MySQL、Oracle 等)、HDFS、Hive、ODPS、HBase、FTP 等各种异构数据源(即不同的数据库) 间稳定高效的数据同步功能。
3、datax-web运行 打开idea,打开项目,安装maven依赖 mysql数据库导入,新建datax_web数据库,然后找到bin/db/datax_web.sql。导入数据库,这里我用的工具是 navicat 需要修改2两个yml。我的修改如下 第一个路径在,datax-admin/src/main/resoures/application.yml。其中数据库地址和用户名密码用自己的 #第一个路...
Datax3.0+DataX-Web打造分布式可视化ETL系统 一、DataX 简介 DataX 是阿里云 DataWorks 数据集成的开源版本,主要就是用于实现数据间的离线同步。DataX 致力于实现包括关系型数据库(MySQL、Oracle 等)、HDFS、Hive、ODPS、HBase、FTP 等各种异构数据源(即不同的数据库) 间稳定高效的数据同步功能。