DataWorks は、スケジューリング用共有リソースグループと DataService Studio 用共有リソースグループを含む、共有リソースグループを提供します。DataWorks をアクティブ化すると、システムは共有リソースグループを提供します。これらのリソースグループを使用して、データ開発、タスクの実行、タスクのテストなどの操作を実行できます。共有リソースグループは複数のテナントによって使用されます。ピーク時間帯には、異なるテナント内のタスクが共有リソースグループのリソースを競合する場合があります。このトピックでは、共有リソースグループの概要について説明します。
プロダクトの反復のため、共有リソースグループを使用しないことをお勧めします。 DataWorks をアクティブ化すると、システムは自動的に従量課金サーバーレスリソースグループを作成します。サーバーレスリソースグループを使用して、データ同期、タスクのスケジューリングと実行、API の呼び出しと管理などの操作を実行できます。詳細については、「サーバーレスリソースグループの作成と使用」をご参照ください。
2024 年 6 月 10 日より前に DataWorks をアクティブ化したことがない場合は、DataWorks をアクティブ化した後にサーバーレスリソースグループのみを購入して使用できます。旧バージョンのリソースグループを購入または使用することはできません。
シナリオ
実行するノードの数が少なく、データ出力の適時性の要件が低い場合にのみ、共有リソースグループを使用することをお勧めします。
制限
共有リソースグループのリソースは、複数のテナントによって使用されます。ピーク時間帯には、テナントがリソースを競合し、リソースが不足する可能性があります。
スケジューリング用共有リソースグループでは、最大 40 ノードを並列で実行できます。 00:00 から 09:00 までのピーク時間帯には、ノードがスケジューリング用共有リソースグループのリソースを競合する場合があります。この場合、スケジューリング用共有リソースグループで並列に実行できるノードの最大数は 40 未満になる可能性があります。
DataService Studio 用共有リソースグループは、頻繁で同時実行性の高い API 呼び出しの要件を満たすことができません。
十分な専用リソースを使用してタスクを実行する場合は、サーバーレスリソースグループを購入することをお勧めします。詳細については、「サーバーレスリソースグループの作成と使用」をご参照ください。
課金と関連操作
課金ルール
DataWorks をアクティブ化すると、DataWorks によって提供される共有リソースグループを使用できます。共有リソースグループを個別に購入する必要はありません。
共有リソースグループの Elastic Compute Service (ECS) インスタンスや使用されるデータ同期スレッドなどの項目に基づいて課金されます。共有リソースグループは、従量課金方式をサポートしています。共有リソースグループの課金の詳細については、以下のトピックをご参照ください。
控除と支払い遅延
控除と支払い遅延の決済方法は、DataWorks の共有リソースグループの種類によって異なります。詳細については、「控除と支払い遅延」をご参照ください。
共有リソースグループの使用
サービス効率を確保するために、ビジネス要件に基づいて、データ統合またはデータ開発用のノードを実行する適切なタイプの共有リソースグループを選択できます。
共有リソースグループはパブリックリソースプールです。共有リソースグループのリソースが不足している場合、共有リソースグループのリソースを使用するタスクはスケジュールどおりに実行されない場合があります。タスクを期待どおりに実行するには、サーバーレスリソースグループを使用します。詳細については、「サーバーレスリソースグループの作成と使用」をご参照ください。
共有リソースグループ内のマシンのアドレス情報を取得し、リソースグループとデータソースの間にネットワーク接続を確立するときに、アドレス情報をデータソースの IP アドレスホワイトリストに追加する方法については、「IP アドレスホワイトリストの構成」および「共有 Data Integration リソースグループのホワイトリスト」をご参照ください。
共有リソースグループの基盤となるネットワーク構成を変更したり、共有リソースグループの IP アドレスホワイトリストを構成したりすることはできません。リソースグループを virtual private cloud (VPC) に関連付けたり、リソースグループの IP アドレスホワイトリストを構成したりする場合は、サーバーレスリソースグループを使用します。
共有リソースグループが使用されていない場合、Data Integration 用共有リソースグループでは、最大 5 つのノードを並列で実行できます。 Data Integration 用共有リソースグループでノードを実行すると、他のノードがリソースグループのリソースを競合する場合があります。そのため、Data Integration 用共有リソースグループで並列に実行されるノードの最大数は 5 未満になる可能性があります。 Data Integration 用共有リソースグループで実際に並列に実行されるノードの最大数は、リソースグループのリソース使用量によって異なります。
共有リソースグループのメモリサイズを変更することはできません。代わりに、共有リソースグループで並列に実行できるノードの数を変更できます。
共有リソースグループのメモリサイズは、次の式を使用して計算されます。メモリサイズ =
リソースグループで並列に実行されるノード数 × 512 MB。
ネットワーク接続ソリューション
DataWorks リソースグループは、Alibaba Cloud ECS インスタンスのグループです。データ統合またはデータ開発用のノードを実行するには、リソースグループとデータソースが相互に接続されていることを確認する必要があります。また、IP アドレスホワイトリストなどの特別なセキュリティ設定が、リソースグループとデータソース間の接続に影響を与えないことを確認する必要があります。
ネットワーク接続
共有リソースグループと Alibaba Cloud に属するデータソースの間にネットワーク接続を確立できます。データソースと共有リソースグループ間のネットワーク接続は、データソースのネットワーク環境によって異なります。
スケジューリング用共有リソースグループ
スケジューリング用共有リソースグループがパブリック IP アドレスにアクセスできるようにするには、DataWorks コンソールの [管理センター] の [ワークスペース] ページで、パブリック IP アドレスまたはドメイン名とポート番号をサンドボックスホワイトリストに追加する必要があります。上記の操作を実行した後、スケジューリング用共有リソースグループがパブリック IP アドレスにアクセスできない場合は、サーバーレスリソースグループを使用することをお勧めします。
スケジューリング用共有リソースグループを使用して、IP アドレスホワイトリストが構成されていないデータソースのみにアクセスできます。 IP アドレスホワイトリストが構成されているデータソース、または virtual private cloud (VPC) にデプロイされているデータソースにアクセスするには、サーバーレスリソースグループを使用することをお勧めします。
説明インターネットまたは VPC にデプロイされているデータソースにアクセスするには、サーバーレスリソースグループを使用することをお勧めします。
DataService Studio 用共有リソースグループ
次の表に、DataService Studio 用共有リソースグループと、異なるネットワーク環境にデプロイされているデータソース間のネットワーク接続を示します。
ネットワーク環境
アクセス可能
インターネット
はい
クラシックネットワーク
はい
VPC
いいえ
ホワイトリスト設定
スケジューリング用共有リソースグループは、ノードのセキュリティサンドボックス機能を提供します。この機能を使用して、不明な IP アドレスからのリソースグループへのアクセスを制限できます。スケジューリング用リソースグループにアクセスするには、使用する IP アドレスをセキュリティサンドボックスの IP アドレスホワイトリストに追加する必要があります。詳細については、「ワークスペースの作成と管理」トピックの セキュリティ設定 セクションをご参照ください。