Data Integration は、オフライン統合、リアルタイム統合、およびフルデータベース移行をサポートしています。このトピックでは、オフライン統合、リアルタイム統合、およびフルデータベース移行でサポートされるデータソースについて説明します。
各種統合タイプのシナリオ
統合タイプ | シナリオ |
オフライン統合 | データをクラウドに移行したり、クラウドデータをオンプレミスの業務システムに移行したりするシナリオで使用します。たとえば、ローカルの MySQL データベースから Alibaba Cloud ApsaraDB RDS インスタンスにデータを移行する場合などです。 |
フルデータベース移行 | データセンター内のデータベースや ECS インスタンス上の自己管理データベースから、Hive などのオフラインデータウェアハウスやビッグデータコンピューティングサービスにデータを同期するために使用します。たとえば、ECS インスタンス上の自己管理 MySQL データベースから MaxCompute にデータを移行する場合などです。 |
リアルタイム統合 | ソースデータソースのデータベース全体またはすべてのテーブルから送信先データソースへのデータ変更をリアルタイムで統合するために使用します。これにより、ソースデータソースと送信先データソースの同期が維持されます。 |
オフライン統合でサポートされるデータソース
データソース | 読み取り | 書き込み |
ビッグデータストレージソース | ||
MaxCompute | サポート | サポート |
Hive | サポート | サポート |
Hologres | サポート | サポート |
Impala | サポート | サポート |
TDH Inceptor | サポート | サポート |
Kudu | サポート | サポート |
StarRocks | サポート | 対応 |
Hudi | サポート | サポート |
Doris | サポート | 対応 |
GreenPlum | サポート | サポート |
TDengine | サポート | 非サポート |
ArgoDB | サポート | サポート |
SelectDB | サポート | サポート |
Databricks | サポート | サポート |
Amazon Redshift | サポート | サポート |
DolphinDB | サポート | サポート |
Snowflake | サポート | サポート |
Data Lake Formation | サポート | サポート |
ファイルデータソース | ||
HDFS | サポート | サポート |
FTP | サポート | サポート |
OSS | サポート | サポート |
Amazon S3 | サポート | サポート |
メッセージキュー | ||
Log Service | サポート | 非サポート |
Kafka | サポート | サポート |
DataHub | サポート | サポート |
リレーショナルデータソース | ||
PolarDB | サポート | サポート |
PolarDB-X (旧 DRDS) | サポート | サポート |
MySQL | サポート | サポート |
SAP HANA | サポート | サポート |
Microsoft SQL Server | サポート | サポート |
PostgreSQL | サポート | サポート |
AnalyticDB for MySQL 2.0 | サポート | 非サポート |
AnalyticDB for MySQL 3.0 | サポート | サポート |
AnalyticDB for PostgreSQL | サポート | サポート |
OceanBase | サポート | サポート |
Oracle | サポート | サポート |
Vertica | サポート | サポート |
IBM DB2 | サポート | サポート |
Teradata | サポート | サポート |
ClickHouse | サポート | サポート |
DM (Dameng) | サポート | サポート |
GBase 8a | サポート | サポート |
KingbaseES | サポート | サポート |
TiDB | サポート | サポート |
GoldenDB | サポート | サポート |
OpenGauss | サポート | サポート |
GaussDB (DWS) | サポート | サポート |
Amazon RDS for PostgreSQL | サポート | サポート |
Amazon RDS for MySQL | サポート | サポート |
Amazon RDS for SQL Server | サポート | サポート |
Amazon RDS for Oracle | サポート | サポート |
Amazon RDS for DB2 | サポート | サポート |
TDSQL for MySQL | サポート | サポート |
PolarDB-X2.0 | サポート | サポート |
GBase 8c | サポート | サポート |
TDSQL for PostgreSQL | サポート | サポート |
OushuDB | サポート | サポート |
NoSQL データソース | ||
HBase0.9.4 | 非サポート | 非サポート |
HBase1.1x | サポート | サポート |
HBase2.0 | サポート | サポート |
Elasticsearch | サポート | サポート |
MongoDB | サポート | サポート |
Tablestore | サポート | サポート |
Aliyun HBase | 非サポート | 非サポート |
Redis | 非サポート | サポート |
Easysearch | サポート | サポート |
OpenSearch | サポート | サポート |
InfluxDB | サポート | サポート |
Lindorm | サポート | サポート |
半構造化ストレージ | ||
API | サポート | サポート |
SAP Table | サポート | 非サポート |
Salesforce | サポート | 非サポート |
Lark Bitable | サポート | サポート |
フルデータベース移行でサポートされるデータソース
データソースタイプ | データソース | リファレンス |
ソースデータソース | MySQL、Oracle、Microsoft SQL Server、OceanBase、IBM DB2、MaxCompute、FTP、TDengine、Hive、PostgreSQL、DM (Dameng)、Amazon Redshift、Amazon RDS for PostgreSQL、Amazon RDS for MySQL、Amazon RDS for SQL Server、Amazon RDS for Oracle、Amazon RDS for DB2、TDSQL for MySQL、DolphinDB、PolarDB-X2.0、GBase 8c 。 | |
送信先データソース | ArgoDB、TDH Inceptor、OushuDB、Hive、MaxCompute、AnalyticDB for PostgreSQL、StarRocks、SelectDB、Doris、GaussDB (DWS)、Lindorm、Databricks、Data Lake Formation。 |
リアルタイム統合でサポートされるデータソース
リアルタイム計算エンジン | データソース | 参考 | |
Apache Flink (オープンソース Flink) | Flink on YARN |
| |
Flink on Kubernetes |
| ||
Alibaba Cloud Realtime Compute for Flink (VVP) |
| ||