Data Integration支援離線整合、即時整合、整庫遷移整合方式。本文為您介紹離線整合、即時整合、整庫遷移支援的資料來源類型。
不同整合類型適用情境
整合類型 | 適用情境 |
離線整合 | 適用於資料上雲、雲上資料移轉到本地業務系統等情境。例如，將本機資料庫MySQL的資料移轉至阿里雲資料庫RDS中。 |
整庫遷移 | 適用於將本機資料中心或在ECS上自建的資料庫，同步資料至離線數倉（Hive）、MaxCompute等情境。例如，將ECS上自建的MySQL資料庫的資料移轉至MaxCompute中。 |
即時整合 | 適用於將來源端資料來源中整庫或全部表的資料變化即時整合至目標端資料來源中，實現來源端資料來源與目標端資料源即時地保持資料同步。 |
離線整合支援的資料來源
資料來源 | 讀取 | 寫入 |
巨量資料儲存型資料來源 | ||
MaxCompute | 支援 | 支援 |
Hive | 支援 | 支援 |
Hologres | 支援 | 支援 |
Impala | 支援 | 支援 |
TDH Inceptor | 支援 | 支援 |
Kudu | 支援 | 支援 |
StarRocks | 支援 | 支援 |
Hudi | 支援 | 支援 |
Doris | 支援 | 支援 |
GreenPlum | 支援 | 支援 |
TDengine | 支援 | 不支援 |
ArgoDB | 支援 | 支援 |
Paimon | 不支援 | 不支援 |
SelectDB | 支援 | 支援 |
Databricks | 支援 | 支援 |
Amazon Redshift | 支援 | 支援 |
DolphinDB | 支援 | 不支援 |
Snowflake | 支援 | 支援 |
檔案資料來源 | ||
HDFS | 支援 | 支援 |
FTP | 支援 | 支援 |
OSS | 支援 | 支援 |
Amazon S3 | 支援 | 支援 |
訊息佇列資料來源 | ||
Log Service | 支援 | 不支援 |
Kafka | 支援 | 支援 |
DataHub | 支援 | 支援 |
關係型資料來源 | ||
PolarDB | 支援 | 支援 |
PolarDB-X（原DRDS） | 支援 | 支援 |
MySQL | 支援 | 支援 |
SAP HANA | 支援 | 支援 |
Microsoft SQL Server | 支援 | 支援 |
PostgreSQL | 支援 | 支援 |
AnalyticDB for MySQL 2.0 | 支援 | 不支援 |
AnalyticDB for MySQL 3.0 | 支援 | 支援 |
AnalyticDB for PostgreSQL | 支援 | 支援 |
OceanBase | 支援 | 支援 |
Oracle | 支援 | 支援 |
Vertica | 支援 | 支援 |
IBM DB2 | 支援 | 支援 |
Teradata | 支援 | 支援 |
ClickHouse | 支援 | 支援 |
DM（達夢） | 支援 | 支援 |
GBase 8a | 支援 | 支援 |
KingbaseES | 支援 | 支援 |
TiDB | 支援 | 支援 |
GoldenDB | 支援 | 支援 |
OpenGauss | 支援 | 支援 |
GaussDB（DWS） | 支援 | 支援 |
Amazon RDS for PostgreSQL | 支援 | 支援 |
Amazon RDS for MySQL | 支援 | 支援 |
Amazon RDS for SQL Server | 支援 | 支援 |
Amazon RDS for Oracle | 支援 | 支援 |
Amazon RDS for DB2 | 支援 | 支援 |
TDSQL for MySQL | 支援 | 支援 |
PolarDB-X2.0 | 支援 | 支援 |
GBase 8c | 支援 | 支援 |
NoSQL資料來源 | ||
HBase0.9.4 | 不支援 | 不支援 |
HBase1.1x | 支援 | 支援 |
HBase2.0 | 支援 | 支援 |
Elasticsearch | 支援 | 支援 |
MongoDB | 支援 | 支援 |
Tablestore | 支援 | 支援 |
Aliyun HBase | 不支援 | 不支援 |
Redis | 支援 | 不支援 |
Lindorm（計算引擎） | 支援 | 支援 |
Easysearch | 支援 | 支援 |
OpenSearch | 不支援 | 支援 |
半結構化儲存資料來源 | ||
API | 支援 | 支援 |
SAP Table | 支援 | 不支援 |
Salesforce | 支援 | 不支援 |
整庫遷移支援的資料來源
資料來源類型 | 資料來源 | 相關文檔 |
來源端資料來源 | MySQL、Oracle、Microsoft SQL Server、OceanBase、IBM DB2、MaxCompute、FTP、TDengine、Hive、PostgreSQL、達夢（DM）、Amazon Redshift、Amazon RDS for PostgreSQL、Amazon RDS for MySQL、Amazon RDS for SQL Server、Amazon RDS for Oracle、Amazon RDS for DB2、TDSQL for MySQL、DolphinDB、PolarDB-X2.0、GBase 8c 。 | |
目標端資料來源 | ArgoDB、Hive、TDH Inceptor、MaxCompute、AnalyticDB for PostgreSQL、StarRocks、SelectDB、Doris、GaussDB（DWS）、Lindorm（計算引擎）、Databricks。 |
即時整合支援的資料來源
Realtime Compute引擎 | 資料來源 | 相關文檔 | |
Apache Flink（開源Flink） | Flink on yarn |
| |
Flink on K8s |
| ||
阿里雲Realtime ComputeFlink（vvp） |
| ||