MaxCompute:Data Transmission Service の排他的リソースグループの購入と使用

背景情報

ネットワークとリージョンの要件を確認する

Data Transmission Service の排他的リソースグループの購入

1. MaxCompute コンソールにログインします。上部のナビゲーションバーで、リージョンを選択します。左側のナビゲーションウィンドウで、[ワークスペース] > [クォータ管理] を選択します。

2. [クォータ管理] ページで、[クォータの購入] をクリックして購入ページを開きます。必須パラメーターを設定します。主要なパラメーターを次の表に示します。

   パラメーター	説明
   仕様タイプ	[Data Transmission Service] を選択します。
   Data Transmission Service の同時実行数	購入する同時接続数を選択します。

3. [今すぐ購入] をクリックします。利用規約を読んで同意し、支払いを完了します。

   購入が完了したら、コンソールに戻ります。[クォータ管理] ページに、[クォータタイプ] が [Data Transmission Service] のクォータグループが表示されます。このクォータグループは、スペックアップ、スペックダウン、または 更新 できます。スペックアップとスペックダウンのポリシーの詳細については、「スペックアップとスペックダウン」をご参照ください。

Data Transmission Service の排他的リソースグループの使用

データ転送または Data Integration ジョブを実行するときに、Data Transmission Service の排他的リソースグループを指定して、データ処理効率を向上させることができます。

1. ローカルクライアント (odpscmd) または別の接続ツールを使用して MaxCompute プロジェクトにアクセスし、Data Transmission Service の排他的リソースグループを有効にします。

    setproject odps.tunnel.enable.quota.route.v2=true;

   説明

   MaxCompute SDK が V0.45 以降に更新されていることを確認してください。

2. 必要な権限を付与します。

   デフォルトでは、すべての Alibaba Cloud アカウント、RAM ユーザー、およびロールには、ジョブのクォータグループを指定する権限がありません。アカウントがジョブのクォータグループを指定できるようになるのは、そのアカウントに必要な権限が付与された後のみです。

   1. ロールを作成します。

      1. MaxCompute コンソールにログインします。上部のナビゲーションバーで、リージョンを選択します。

      2. 左側のナビゲーションウィンドウで、[テナント] > [ロール] を選択します。

      3. [ロール] ページで、[ロールの追加] をクリックします。

      4. [ロールの追加] ダイアログボックスで、[ロール名] パラメーターを設定し、次のポリシー ドキュメントを入力します。

         {
             "Statement": [{
                     "Action": [
                         "odps:List",
                         "odps:Usage"],
                     "Effect": "Allow",
                     "Resource": ["acs:odps:*:regions/*/quotas/*"]}],
             "Version": "1"
         }

         次の表に、サンプルコードのパラメーターを示します。

         パラメーター	説明
         Action	許可または拒否される操作。ビジネス要件に基づいて、1 回の権限付与操作で複数の操作を指定できます。複数の操作を指定する場合は、コンマ (,) で区切ります。サポートされている操作の詳細については、「MaxCompute の権限」をご参照ください。 説明 ポリシーパラメーターの詳細については、「ポリシー要素」をご参照ください。
         Resource	権限付与されるリソースの範囲。このパラメーターは、["acs:odps:Tenant/${tenant_id}:regions/${region_id}/quotas/${quota_name}"] 形式で設定します。 ["acs:odps:*:regions/*/quotas/*"] は、現在のテナントのすべてのリージョンにあるすべてのクォータグループを指定します。ビジネス要件に基づいて、特定のリージョンと特定のクォータグループを指定できます。

      5. [OK] をクリックします。

   2. 作成したロールを、ジョブレベルでクォータグループを指定するために使用するアカウントに割り当てます。

      説明

      デフォルトでは、Alibaba Cloud アカウントまたはテナントレベルの Super_Administrator ロールが割り当てられている RAM ユーザーが権限付与操作を実行できます。

      権限付与操作は、権限が付与されるオブジェクトのタイプによって異なります。

      • Alibaba Cloud アカウント

        Alibaba Cloud アカウントに権限を付与するには、次のコマンドを実行します。

        -- Alibaba Cloud アカウントを現在のテナントに追加し、指定したロールを Alibaba Cloud アカウントに割り当てます。
        Add tenant user <Aliyun$xxxx>;
        Grant tenant role <role_name> to user <Aliyun$xxxx>;
        -- テナントレベルのロールまたはユーザーの権限を表示します。
        Show grants for tenant role <role_name>;
        Show grants for tenant user <user_name>;
        Show principals for tenant [role] <role_name>;

      • RAM ユーザー

        1. MaxCompute コンソールの左側のナビゲーションウィンドウで、[テナント] > [ユーザー] を選択します。

        2. [ユーザー] ページで、目的の RAM ユーザーを見つけ、[アクション] 列の [ロールの変更] をクリックします。

        3. [ロールの編集] ダイアログボックスで、[利用可能なロール] セクションで目的のロールを選択し、[追加されたロール] セクションに追加します。

        4. [OK] をクリックします。

3. Data Transmission Service タスクの SDK で、クォータグループを手動で指定します。

   -- Data Transmission Service には、クォータ名が XXX のリソースグループを使用します。
   final TableTunnel tunnel = new TableTunnel(odps);
   tunnel.getConfig().setQuotaName("xxx");
   TableTunnel.UploadSession up = tunnel.createUploadSession(projectName, tableName);
   
   -- セッションが実際に使用しているリソースグループを取得できます。
   up.getQuotaName();

   MaxCompute コンソールにログインできます。[クォータ管理] ページで、QuotaName を表示してコピーします。例: ot_42854300324****_169821756****_p#ot_42854300324****_169821756****。

   

リソースグループのメトリックの表示

その他の操作

MaxCompute コンソールで次のようにリソースグループを設定できます。

1. MaxCompute コンソールにログインします。上部のナビゲーションバーで、リージョンを選択します。左側のナビゲーションウィンドウで、[ワークスペース] > [プロジェクト管理] を選択します。

2. [プロジェクト管理] ページで、クォータグループをアタッチするプロジェクトを見つけ、[アクション] 列の [管理] をクリックします。[パラメーター設定] タブの [基本プロパティ] セクションで、現在のプロジェクトの Data Transmission Service の設定を表示できます。パラメーターを次の表に示します。

   パラメーター	説明
   Data Transmission Service のデフォルトクォータ	これは、データの読み取りと書き込みにリソースグループクォータを指定しない場合に、現在のプロジェクトで使用される Data Transmission Service のデフォルトのリソースグループです。値は通常 Default で、これは Data Transmission Service のパブリックリソースグループを示します。このパラメーターはコンソールでは変更できません。
   Data Transmission Service の承認済みクォータ	このパラメーターは、プロジェクトがすべてのユーザーとロールに対して、設定済みの排他的リソースグループをデータ読み取りおよび書き込みタスクに使用することを承認したことを示します。したがって、「Data Transmission Service の排他的リソースグループの使用」で説明されているように権限を設定していなくても、プロジェクト内のデータ読み取りおよび書き込みタスクの SDK で設定済みの排他的リソースグループクォータを指定できます。プロジェクトには、1 つの排他的リソースグループしか設定できません。
   Data Transmission Service の重ね合わせクォータ	これは、Data Transmission Service の排他的リソースグループの拡張機能です。これにより、排他的リソースグループと Default リソースグループを一緒に使用できます。ここで購入した排他的リソースグループを設定すると、現在のプロジェクトの最大同時実行数は、パブリックリソースグループと排他的リソースグループのリソースの合計に増加します。この機能は一部のリージョンでのみサポートされています。可用性は、コンソールに表示される内容に依存します。 説明 プロジェクトには 1 つの排他的リソースグループしか設定できませんが、複数のプロジェクトに同じ排他的リソースグループを設定できます。 重ね合わせ機能を使用する場合、クォータグループに Default を指定する必要があります。Storage API 操作を使用するには、引き続き排他的リソースグループを指定する必要があります。QuotaName の形式は ot_42854300324****_169821756****_p#ot_42854300324****_169821756*** です。

3. [基本プロパティ] セクションで、[編集] をクリックし、必要に応じて Data Transmission Service の設定を変更します。