数据集成包括离线同步和实时同步,本文为您介绍离线和实时同步支持的数据源类型。

离线同步支持的数据源类型

  • 关系型数据库:MySQL、SQL Server、PostgreSQL、Oracle、DM、DRDS、PolarDB、HybridDB for MySQL、AnalyticDB for PostgreSQL、AnalyticDB for MySQL 2.0和AnalyticDB for MySQL 3.0等。
  • 大数据存储:MaxCompute(ODPS)、DataHub和Data Lake AnalyticDB(DLA)等。
  • 半结构化存储:OSS、HDFS和FTP等。
  • NoSQL:MongoDB、Memcache(OCS)、Redis和Table Store(OTS)等。
  • 消息队列:LogHub和Kafka等。
  • 图计算引擎:GraphCompute。
数据源的更新迭代速度较快,最新支持情况请参见支持的数据源与读写插件
说明 每个数据源的配置信息差距较大,请根据自身需求,在数据源配置和作业配置模块查询相应的参数配置信息。

实时同步支持的数据源类型

  • 输入:MySQL、Oracle、Kafka、Datahub、Loghub和PolarDB等。
  • 输出:MaxCompute、Hologres、Kafka和Datahub等。
  • 数据转换:数据过滤和字符串替换等。

数据源的更新迭代速度较快,最新支持情况请参见实时同步支持的数据源