MaxCompute:Data Transmission Service の排他的リソースグループの購入と使用

背景情報

注意事項

Data Transmission Service の排他的リソースグループを購入して使用する前に、ネットワークとリージョンが次の要件を満たしていることを確認してください：

• ネットワークの制限：VPC ネットワーク経由のアクセスのみがサポートされています。パブリックインターネット経由のアクセスはサポートされていません。

• リージョンの制限：同一リージョン内でのデータ転送のみがサポートされています。リージョン間のデータ転送はサポートされていません。データ転送タスクが実行される同じリージョンでリソースグループを購入する必要があります。

• その他の制限については、「Data Transmission Service の制限事項」をご参照ください。

Data Transmission Service の排他的リソースグループの購入

1. MaxCompute コンソールにログインし、左上のコーナーでリージョンを選択します。

2. 左側のナビゲーションウィンドウで、構成の管理 > クォータ管理を選択します。

3. クォータ管理 ページで、新しいクォータ をクリックします。

   購入ページで、仕様タイプとして トンネル を選択します。

   必要に応じて トンネル同時実行数 パラメーターを設定します。

4. 購入完了後、コンソールに戻ると、クォータ管理 ページに、クォータタイプ が 伝送サービス にセットされたクォータグループが表示されます。このクォータグループはスペックアップ、スペックダウン、または更新が可能です。詳細については、「スペックアップとスペックダウン」をご参照ください。

Data Transmission Service の排他的リソースグループの使用

データ転送または Data Integration のジョブを実行する際に、ビジネスニーズに基づいて Data Transmission Service の排他的リソースグループを指定し、データ処理効率を向上させることができます。

1. MaxCompute クライアント (odpscmd) または他の接続ツールを使用して MaxCompute プロジェクトにアクセスし、Data Transmission Service の排他的リソースグループを有効にします。

    setproject odps.tunnel.enable.quota.route.v2=true;

   説明

   MaxCompute ソフトウェア開発キット (SDK) のバージョンが 0.45 以降であることを確認してください。

2. Alibaba Cloud アカウントを含む、必要なすべてのアカウントとロールにクォータ機能を使用する権限を付与します。

   1. MaxCompute コンソールにログインし、左上のコーナーでリージョンを選択します。

   2. 左側のナビゲーションウィンドウで、構成の管理 > テナント管理 を選択します。

   3. 左側のナビゲーションウィンドウで、構成の管理 > テナント管理 を選択します。

   4. ロール管理 タブで、新しいロール をクリックします。新しいロール ダイアログボックスで、任意の ロール名: と ポリシーの内容: を入力し、OK をクリックします。

      ポリシーの内容: を次のように設定します：

      {
          "Statement": [{
                  "Action": [
                      "odps:List",
                      "odps:Usage"],
                  "Effect": "Allow",
                  "Resource": ["acs:odps:*:regions/*/quotas/*"]}],
          "Version": "1"
      }

   5. ジョブレベルでクォータを指定する必要があるアカウントにロールを付与します。

      1. Alibaba Cloud アカウントに権限を付与します。

         -- Alibaba Cloud アカウントをテナントに追加し、アカウントにロールを付与します。
         ADD tenant USER <Aliyun$xxxx>;
         GRANT tenant role <role_name> TO USER <Aliyun$xxxx>;
         
         -- テナント内のロールまたはユーザーの権限を表示します。
         SHOW grants FOR tenant role <role_name>;
         SHOW grants FOR tenant USER <user_name>;
         SHOW principals FOR tenant [role] <role_name>;

      2. Resource Access Management (RAM) ユーザーに権限を付与します。

         テナント管理 ページで、ユーザー管理 タブをクリックします。

         ユーザー管理 タブで、新しいメンバー をクリックします。メンバーの追加 ダイアログボックスで、ロールを設定するアカウントを選択するか、手動で追加します。バッチ設定の役割 エリアで、これらのアカウントに割り当てるロールを選択し、 をクリックし、次に 決定 をクリックします。

3. Data Transmission Service タスクの SDK でクォータグループを手動で指定します。

   -- XXX という名前のリソースグループを Data Transmission Service に使用します。
   final TableTunnel tunnel = new TableTunnel(odps);
   tunnel.getConfig().setQuotaName("xxx");
   TableTunnel.UploadSession up = tunnel.createUploadSession(projectName, tableName);
   
   -- セッションで実際に使用されているリソースグループを取得できます。
   up.getQuotaName();

   左側のナビゲーションウィンドウで、構成の管理 > クォータ管理を選択します。

   左側のナビゲーションウィンドウで、構成の管理 > クォータ管理を選択します。

   QuotaName を表示してコピーできます。例： ot_42854300324****_169821756****_p#ot_42854300324****_169821756****。

リソースグループメトリックの表示

クォータ管理 ページで、目的のクォータを見つけ、操作 列の リソース消費 をクリックします。

現在のサブスクリプションベースの Data Transmission Service の排他的リソースグループの使用状況を表示できます。

リソースグループの構成

1. MaxCompute コンソールにログインし、左上のコーナーでリージョンを選択します。

2. 左側のナビゲーションウィンドウで、構成の管理 > プロジェクト管理を選択します。

3. プロジェクト管理 ページで、対象のプロジェクトを見つけ、操作 列の 管理 をクリックします。

   基本属性 セクションには、現在のプロジェクトの Data Transmission Service の構成が表示されます。パラメーターは以下のとおりです。

   パラメーター	説明
   データ伝送サービスのデフォルトクォータ	特定のリソースグループクォータが指定されていない場合に、プロジェクトが読み取りおよび書き込み操作に使用するデフォルトの Data Transmission Service リソースグループ。 値は通常 Default で、これはパブリック Data Transmission Service リソースグループを示します。このパラメーターはコンソールでは変更できません。
   データ伝送サービスのデフォルトクォータ	すべてのユーザーとロールに、構成された専用リソースグループを使用してプロジェクトのデータ読み取りおよび書き込みタスクを実行する権限を付与します。したがって、手動での権限付与なしに、データ読み取りおよび書き込みタスクの SDK で構成された専用リソースグループクォータを指定できます。 1 つのプロジェクトには 1 つの専用リソースグループしか構成できません。
   データ伝送サービスオーバーレイクォータ	専用の Data Transmission Service リソースグループの拡張機能で、専用リソースグループとデフォルトリソースグループを併用できます。 購入した専用リソースグループを構成した後、プロジェクトの最大同時実行数は、パブリック Data Transmission Service リソースグループと専用リソースグループのリソースの合計に増加します。 この機能は一部のリージョンでのみ利用可能です。利用可能性はコンソールに表示される内容に準じます。

   • 1 つのプロジェクトは 1 つの排他的リソースグループにしか関連付けられませんが、複数のプロジェクトが同じ排他的リソースグループを使用できます。オーバーレイ機能を使用する場合は、クォータグループに Default を指定する必要があります。

   • オープンストレージ API 操作を使用するには、引き続き排他的リソースグループを指定する必要があります。QuotaName のフォーマットは ot_42854300324****_169821756****_p#ot_42854300324****_169821756*** です。

4. 基本属性 セクションで 編集 をクリックして構成を変更します。