【大数据】阿里云数据集成平台使用教程

阿里云数据集成平台提供离线数据同步,支持多种数据源如RDS、NoSQL、大数据等。它提供向导和脚本两种开发模式,经典网络和专有网络的选择,并强调在专有网络中无需额外ECS即可实现部分数据库的同步。数据集成平台适用于结构化、半结构化数据同步,暂不支持完全非结构化数据。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

数据集成(Data Integration)是阿里集团对外提供的可跨异构数据存储系统的、可靠、安全、低成本、可弹性扩展的数据同步平台,为20+种数据源提供不同网络环境下的离线(全量/增量)数据进出通道,是阿里集团对外提供的稳定高效、弹性伸缩的数据同步平台。致力于提供复杂网络环境下、丰富的异构数据源之间数据高速稳定的数据移动及同步能力。

关于阿里云数据集成平台更多内容:阿里云数据集成平台使用教程

离线(批量)数据同步简介

离线(批量)的数据通道主要通过定义数据来源和去向的数据源和数据集,提供一套抽象化的数据抽取插件(称之为 Reader)、数据写入插件(称之为 Writer),并基于此框架设计一套简化版的中间数据传输格式,从而达到任意结构化、半结构化数据源之间数据传输的目的。

支持数据源类型

数据集成提供丰富的数据源支持,如下所示:

  • 文本存储(FTP / SFTP / OSS / 多媒体文件等)。
  • 数据库(RDS / DRDS / MySQL / PostgreSQL 等)。
  • NoSQL(Memcache / Redis / MongoDB / HBase 等)。
  • 大数据(MaxCompute / AnalyticDB / HDFS 等)。
  • MPP 数据库(HybridDB for MySQL 等)。

更多详情请参见 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值