MaxCompute:Achat et utilisation de groupes de ressources exclusifs Data Transmission Service

Contexte

Prérequis

Avant d'acheter et d'utiliser un groupe de ressources exclusif Data Transmission Service, vérifiez que votre environnement respecte les exigences réseau et régionales suivantes :

• Exigences réseau : seul l'accès via un réseau VPC est pris en charge. L'accès depuis l'Internet public n'est pas autorisé.

• Exigences régionales : les transferts de données interrégionaux ne sont pas pris en charge. Achetez le groupe de ressources dans la même région que votre tâche de transfert de données.

• Pour connaître les autres limitations, consultez Limitations de Data Transmission Service.

Acheter un groupe de ressources exclusif Data Transmission Service

1. Connectez-vous à la console MaxCompute et sélectionnez une région dans le coin supérieur gauche.

2. Dans le volet de navigation de gauche, choisissez Manage Configurations > Quotas .

3. Sur la page Quotas, cliquez sur New Quota.

   Sur la page d'achat, sélectionnez Data Transmission Service comme type de spécification.

   Configurez la Tunnel Concurrency selon vos besoins .

4. Une fois l'achat terminé, retournez sur la console. Sur la page Quotas, le nouveau groupe de quotas apparaît avec le Quota Type défini sur Data Transmission Service. Vous pouvez mettre à niveau, rétrograder ou renouveler ce groupe de quotas. Pour plus d'informations, consultez Opérations associées.

Utiliser un groupe de ressources exclusif Data Transmission Service

Spécifiez un groupe de ressources exclusif Data Transmission Service pour les tâches de transfert ou d'intégration de données afin d'améliorer l'efficacité du traitement et de répondre à des besoins métier spécifiques.

1. Connectez-vous à votre projet MaxCompute à l'aide du client MaxCompute (odpscmd) ou d'un autre outil de connexion, puis exécutez la commande suivante pour activer le routage des quotas exclusifs :

    setproject odps.tunnel.enable.quota.route.v2=true;

   Remarque

   Vérifiez que votre SDK MaxCompute est en version 0.45 ou ultérieure.

2. Accordez les permissions d'utilisation de la fonctionnalité de quotas à tous les comptes (y compris les comptes Alibaba Cloud) et rôles concernés.

   1. Connectez-vous à la console MaxCompute et sélectionnez une région dans le coin supérieur gauche.

   2. Dans le volet de navigation de gauche, choisissez Manage Configurations > Tenants .

   3. Sur la page Tenants, cliquez sur l'onglet Roles.

   4. Dans l'onglet Roles, cliquez sur Add Role. Dans la boîte de dialogue Add Role, saisissez un Role Name personnalisé, fournissez le Policy Content, puis cliquez sur OK.

      Le Policy Content se présente comme suit :

      {
          "Statement": [{
                  "Action": [
                      "odps:List",
                      "odps:Usage"],
                  "Effect": "Allow",
                  "Resource": ["acs:odps:*:regions/*/quotas/*"]}],
          "Version": "1"
      }

   5. Attribuez le rôle aux comptes devant spécifier des quotas au niveau des tâches.

      1. Accordez des permissions à un compte Alibaba Cloud.

         -- Add an Alibaba Cloud account to the tenant and grant a role to the account.
         ADD tenant USER <Aliyun$xxxx>;
         GRANT tenant role <role_name> TO USER <Aliyun$xxxx>;
         
         -- View the permissions of a role or user in the tenant.
         SHOW grants FOR tenant role <role_name>;
         SHOW grants FOR tenant USER <user_name>;
         SHOW principals FOR tenant [role] <role_name>;

      2. Accordez des permissions à un utilisateur RAM.

         Sur la page Tenants, cliquez sur l'onglet Users.

         Dans l'onglet Users, cliquez sur Add Member. Dans la boîte de dialogue Add Member, sélectionnez ou ajoutez les comptes souhaités. Dans la section Batch Set Roles, sélectionnez les rôles, cliquez sur , puis cliquez sur OK.

3. Spécifiez manuellement le groupe de quotas dans le SDK pour votre tâche Data Transmission Service.

   -- Use the resource group named xxx for the Data Transmission Service.
   final TableTunnel tunnel = new TableTunnel(odps);
   tunnel.getConfig().setQuotaName("xxx");
   TableTunnel.UploadSession up = tunnel.createUploadSession(projectName, tableName);
   
   -- Get the name of the resource group that the session is actually using.
   up.getQuotaName();

   Dans le volet de navigation de gauche, choisissez Manage Configurations > Quotas .

   Dans le volet de navigation de gauche, choisissez Manage Configurations > Quotas .

   Consultez et copiez le QuotaName. Exemple : ot_42854300324****_169821756****_p#ot_42854300324****_169821756****.

Consulter les métriques du groupe de ressources

Sur la page Quotas, cliquez sur Configure Resources dans la colonne Actions du quota cible.

Visualisez l'utilisation de votre groupe de ressources exclusif Data Transmission Service par abonnement.

Configuration du groupe de ressources

1. Connectez-vous à la console MaxCompute et sélectionnez une région dans le coin supérieur gauche.

2. Dans le volet de navigation de gauche, choisissez Manage Configurations > Projects.

3. Sur la page Projects, cliquez sur Manage dans la colonne Actions correspondant au projet concerné.

   La section Basic Properties affiche la configuration Data Transmission Service du projet actuel. Le tableau ci-dessous détaille les paramètres disponibles.

   Paramètre	Description
   Default Tunnel Quota	Quota du groupe de ressources Data Transmission Service utilisé par défaut lorsqu'aucun quota spécifique n'est défini pour la lecture ou l'écriture de données dans le projet. Il s'agit généralement de Default, correspondant au groupe de ressources partagé Data Transmission Service. Ce paramètre n'est pas modifiable via la console.
   Authorized Tunnel Quota	Le projet autorise l'ensemble des utilisateurs et rôles à exploiter le groupe de ressources exclusif configuré pour les opérations de lecture et d'écriture. Ainsi, vous pouvez désigner ce quota exclusif dans un SDK pour les tâches du projet, sans qu'une autorisation manuelle soit nécessaire. Un seul groupe de ressources exclusif peut être associé à un projet donné.
   Overlay Tunnel Quota	Cette fonctionnalité avancée permet de combiner l'utilisation d'un groupe de ressources exclusif avec celle du groupe de ressources par défaut. Lorsqu'un groupe de ressources exclusif acheté est configuré, le nombre maximal de tâches simultanées autorisées pour le projet correspond alors aux ressources combinées du groupe partagé Data Transmission Service et du groupe exclusif. Cette option n'est disponible que dans certaines régions. Sa disponibilité dépend de ce qui est affiché dans la console.

   • Bien qu'un projet ne puisse être lié qu'à un seul groupe de ressources exclusif, plusieurs projets peuvent partager le même groupe. Lors de l'utilisation de la fonctionnalité de superposition (overlay), laissez le champ du groupe de quotas vide.

   • L'utilisation de l'API Storage impose la spécification du groupe de ressources exclusif. Le format du QuotaName est ot_42854300324****_169821756****_p#ot_42854300324****_169821756****.

4. Dans la section Basic Properties, cliquez sur Edit pour ajuster la configuration selon vos besoins.