Data Integration は、オフライン統合、リアルタイム統合、およびデータベース全体の移行をサポートしています。このトピックでは、オフライン統合、リアルタイム統合、およびデータベース全体の移行でサポートされているデータソースタイプについて説明します。
異なる統合タイプのシナリオ
統合タイプ | シナリオ |
オフライン統合 | データをクラウドに移行したり、クラウドデータをオンプレミスシステムに移動したりするシナリオに適しています。たとえば、オンプレミス MySQL データベースから Alibaba Cloud ApsaraDB RDS インスタンスにデータを移行できます。 |
データベース全体の移行 | データセンターまたは Elastic Compute Service (ECS) インスタンス上の自己管理データベースから、Hive などのオフラインデータウェアハウスやビッグデータコンピューティングサービスにデータを同期するのに適しています。たとえば、ECS インスタンス上の自己管理 MySQL データベースから MaxCompute にデータを移行できます。 |
リアルタイム統合 | データベース全体またはソース内のすべてのテーブルからのデータ変更をリアルタイムで送信先に統合するのに適しています。これにより、ソースと送信先のデータソースが同期されます。 |
オフライン統合でサポートされているデータソース
データソース | 読み取り | 書き込み |
ビッグデータストレージデータソース | ||
MaxCompute | サポートされています | サポートされています |
Hive | サポートされています | サポートされています |
Hologres | サポートされています | サポートされています |
Impala | サポートされています | サポートされています |
TDH Inceptor | サポートされています | サポートされています |
Kudu | サポートされています | サポートされています |
StarRocks | サポートされています | サポートされています |
Hudi | サポートされています | サポートされています |
Doris | サポートされています | サポートされています |
GreenPlum | サポートされています | サポートされています |
TDengine | サポートされています | サポートされていません |
ArgoDB | サポートされています | サポートされています |
Paimon | サポートされていません | サポートされていません |
SelectDB | サポートされています | サポートされています |
Databricks | サポートされています | サポートされています |
Amazon Redshift | サポートされています | サポートされています |
DolphinDB | サポートされています | サポートされています |
Snowflake | サポートされています | サポートされています |
Data Lake Formation | サポートされています | サポートされています |
ファイルデータソース | ||
HDFS | サポートされています | サポートされています |
FTP | サポートされています | サポートされています |
OSS | サポートされています | サポートされています |
Amazon S3 | サポートされています | サポートされています |
メッセージキューデータソース | ||
Log Service | サポートされています | サポートされていません |
Kafka | サポートされています | サポートされています |
DataHub | サポートされています | サポートされています |
リレーショナルデータソース | ||
PolarDB | サポートされています | サポートされています |
PolarDB-X (旧 DRDS) | サポートされています | サポートされています |
MySQL | サポートされています | サポートされています |
SAP HANA | サポートされています | サポートされています |
Microsoft SQL Server | サポートされています | サポートされています |
PostgreSQL | サポートされています | サポート |
AnalyticDB for MySQL 2.0 | サポートされています | サポートされていません |
AnalyticDB for MySQL 3.0 | サポートされています | サポートされています |
AnalyticDB for PostgreSQL | サポートされています | サポートされています |
OceanBase | サポートされています | サポートされています |
Oracle | サポートされています | サポートされています |
Vertica | サポートされています | サポートされています |
IBM DB2 | サポートされています | サポートされています |
Teradata | サポートされています | サポートされています |
ClickHouse | サポートされています | サポートされています |
DM | サポートされています | サポートされています |
GBase 8a | サポートされています | サポートされています |
KingbaseES | サポートされています | サポートされています |
TiDB | サポートされています | サポートされています |
GoldenDB | サポートされています | サポートされています |
OpenGauss | サポートされています | サポートされています |
GaussDB (DWS) | サポートされています | サポートされています |
Amazon RDS for PostgreSQL | サポートされています | サポートされています |
Amazon RDS for MySQL | サポートされています | サポートされています |
Amazon RDS for SQL Server | サポートされています | サポートされています |
Amazon RDS for Oracle | サポートされています | サポートされています |
Amazon RDS for DB2 | サポートされています | サポートされています |
TDSQL for MySQL | サポートされています | サポートされています |
PolarDB-X2.0 | サポートされています | サポートされています |
GBase 8c | サポートされています | サポートされています |
NoSQL データソース | ||
HBase0.9.4 | サポートされていません | サポートされていません |
HBase1.1x | サポートされています | サポートされています |
HBase2.0 | サポートされています | サポートされています |
Elasticsearch | サポートされています | サポートされています |
MongoDB | サポートされています | サポートされています |
Tablestore | サポートされています | サポートされています |
Aliyun HBase | サポートされていません | サポートされていません |
Redis | サポートされています | サポートされていません |
Lindorm (compute engine) | サポートされています | サポートされています |
Easysearch | サポートされています | サポートされています |
OpenSearch | サポートされています | サポートされています |
半構造化ストレージデータソース | ||
API | サポートされています | サポートされています |
SAP Table | サポートされています | サポートされていません |
Salesforce | サポートされています | サポートされていません |
Lark Bitable | サポートされています | サポートされています |
データベース全体の移行でサポートされているデータソース
データソースタイプ | データソース | 参照 |
ソースデータソース | MySQL、Oracle、Microsoft SQL Server、OceanBase、IBM DB2、MaxCompute、FTP、TDengine、Hive、PostgreSQL、DM、Amazon Redshift、Amazon RDS for PostgreSQL、Amazon RDS for MySQL、Amazon RDS for SQL Server、Amazon RDS for Oracle、Amazon RDS for DB2、TDSQL for MySQL、DolphinDB、PolarDB-X2.0、GBase 8c 。 | |
送信先データソース | ArgoDB、Hive、TDH Inceptor、MaxCompute、AnalyticDB for PostgreSQL、StarRocks、SelectDB、Doris、GaussDB (DWS)、Lindorm (コンピュートエンジン)、Databricks、Data Lake Formation。 |
リアルタイム統合でサポートされているデータソース
リアルタイムコンピュートエンジン | データソース | 参照 | |
Apache Flink (オープンソース Flink) | Flink on YARN |
| |
Flink on K8s |
| ||
Alibaba Cloud Realtime Compute for Flink (VVP) |
| ||