CentoOS 7下配置并部署 DataX 3.0与DataX-web

kk的DBA随笔

已于 2024-08-23 18:27:11 修改

阅读量773

点赞数 15

文章标签：数据库

于 2024-08-23 18:25:52 首次发布

本文链接：https://blog.youkuaiyun.com/dnuiking/article/details/141471101

版权

数据同步框架 DataX

DataX本身作为离线数据同步框架,采用 Framework+ plugin架构构建。将数据源读取和写入抽象成为Reader/ Writer插件,纳入到整个同步框架中。

Reader: Reader为数据采集模块,负责采集数据源的数据,将数据发送给 Framework。

Writer: Writer为数据写入模块,负责不断向 Framework取数据,并将数据写入到目的端。Framework: Framework用于连接 reader和 writer,作为两者的数据伎输通道,并处理缓冲,流控,并发数据转换等核心技术问题

安装与配置：

1.安装JDK

wget --no-check-certificate --no-cookies --header "Cookie: oraclelicense=accept-securebackup-cookie" http://download.oracle.com/otn-pub/java/jdk/8u131-b11/d54c1d3a095b4ff2b6607d096fa80163/jdk-8u131-linux-x64.rpm