MaxCompute:Adquira e use grupos de recursos exclusivos do Data Transmission Service

Contexto

Pré-requisitos

Antes de adquirir e usar um grupo de recursos exclusivo do Data Transmission Service, verifique se seu ambiente atende aos seguintes requisitos de rede e região:

• Requisitos de rede: há suporte apenas para acesso via rede VPC. Não há suporte para acesso pela internet pública.

• Requisitos de região: não há suporte para transferências de dados entre regiões. Adquira o grupo de recursos na mesma região da tarefa de transferência de dados.

• Para outras limitações, consulte Limitações do Data Transmission Service.

Adquira um grupo de recursos exclusivo do Data Transmission Service

1. Faça login no MaxCompute console e selecione uma região no canto superior esquerdo.

2. No painel de navegação à esquerda, escolha Manage Configurations > Quotas .

3. Na página Quotas, clique em New Quota.

   Na página de compra, selecione Data Transmission Service como tipo de especificação.

   Configure a Tunnel Concurrency conforme suas necessidades .

4. Após concluir a compra, retorne ao console. Na página Quotas, localize o novo grupo de cotas com o Quota Type definido como Data Transmission Service. Você pode fazer upgrade, downgrade ou renew desse grupo de cotas. Para mais informações, consulte Operações relacionadas.

Use um grupo de recursos exclusivo do Data Transmission Service

Especifique um grupo de recursos exclusivo do Data Transmission Service para tarefas de transferência ou integração, visando melhorar a eficiência do processamento e atender a necessidades específicas de negócios.

1. Conecte-se ao projeto MaxCompute usando o cliente MaxCompute (odpscmd) ou outra ferramenta de conexão e execute o comando a seguir para ativar o roteamento de cota exclusiva:

    setproject odps.tunnel.enable.quota.route.v2=true;

   Nota

   Certifique-se de que seu MaxCompute SDK seja da versão 0,45 ou posterior.

2. Conceda permissões para usar o recurso de cota a todas as contas necessárias (incluindo contas Alibaba Cloud) e funções.

   1. Faça login no MaxCompute console e selecione uma região no canto superior esquerdo.

   2. No painel de navegação à esquerda, escolha Manage Configurations > Tenants .

   3. Na página Tenants, clique na aba Roles.

   4. Na aba Roles, clique em Add Role. Na caixa de diálogo Add Role, insira um Role Name personalizado, forneça o Policy Content e clique em OK.

      O Policy Content é o seguinte:

      {
          "Statement": [{
                  "Action": [
                      "odps:List",
                      "odps:Usage"],
                  "Effect": "Allow",
                  "Resource": ["acs:odps:*:regions/*/quotas/*"]}],
          "Version": "1"
      }

   5. Atribua a função às contas que precisam especificar cotas no nível da tarefa.

      1. Conceda permissões a uma conta Alibaba Cloud.

         -- Add an Alibaba Cloud account to the tenant and grant a role to the account.
         ADD tenant USER <Aliyun$xxxx>;
         GRANT tenant role <role_name> TO USER <Aliyun$xxxx>;
         
         -- View the permissions of a role or user in the tenant.
         SHOW grants FOR tenant role <role_name>;
         SHOW grants FOR tenant USER <user_name>;
         SHOW principals FOR tenant [role] <role_name>;

      2. Conceda permissões a um usuário RAM.

         Na página Tenants, clique na aba Users.

         Na aba Users, clique em Add Member. Na caixa de diálogo Add Member, selecione ou adicione as contas desejadas. Na seção Batch Set Roles, selecione as funções, clique em e, em seguida, clique em OK.

3. Especifique manualmente o grupo de cotas no SDK para sua tarefa do Data Transmission Service.

   -- Use the resource group named xxx for the Data Transmission Service.
   final TableTunnel tunnel = new TableTunnel(odps);
   tunnel.getConfig().setQuotaName("xxx");
   TableTunnel.UploadSession up = tunnel.createUploadSession(projectName, tableName);
   
   -- Get the name of the resource group that the session is actually using.
   up.getQuotaName();

   No painel de navegação à esquerda, escolha Manage Configurations > Quotas .

   No painel de navegação à esquerda, escolha Manage Configurations > Quotas .

   Visualize e copie o QuotaName. Por exemplo: ot_42854300324****_169821756****_p#ot_42854300324****_169821756****.

Visualize métricas do grupo de recursos

Na página Quotas, clique em Configure Resources na coluna Actions da cota desejada.

Você pode visualizar o uso do seu grupo de recursos exclusivo do Data Transmission Service baseado em assinatura.

Configuração do grupo de recursos

1. Faça login no MaxCompute console e selecione uma região no canto superior esquerdo.

2. No painel de navegação à esquerda, escolha Manage Configurations > Projects.

3. Na página Projects, clique em Manage na coluna Actions do projeto alvo.

   Na seção Basic Properties, visualize a configuração do Data Transmission Service para o projeto atual. A tabela abaixo descreve os parâmetros.

   Parâmetro	Descrição
   Default Tunnel Quota	Cota padrão do grupo de recursos do Data Transmission Service usada quando nenhuma cota específica é definida para leitura ou escrita de dados no projeto. Geralmente é Default, representando o grupo de recursos compartilhado. Não é possível alterar essa configuração no console.
   Authorized Tunnel Quota	O projeto autoriza todos os usuários e funções a utilizarem o grupo de recursos exclusivo configurado para tarefas de leitura e escrita. Assim, especifique a cota do grupo exclusivo no SDK para essas operações, mesmo sem autorização manual prévia. Configure apenas um grupo de recursos exclusivo por projeto.
   Overlay Tunnel Quota	Este recurso avançado permite utilizar simultaneamente um grupo de recursos exclusivo e o grupo padrão. Ao configurar um grupo exclusivo adquirido, o número máximo de tarefas simultâneas do projeto aumenta para a soma dos recursos combinados do grupo compartilhado e do exclusivo. Suportado apenas em algumas regiões. A disponibilidade depende do que é exibido no console.

   • Um projeto aceita apenas um grupo de recursos exclusivo, mas vários projetos podem compartilhar o mesmo. Ao usar o recurso de sobreposição (overlay), deixe a configuração do grupo de cotas vazia.

   • Caso utilize a Storage API, especifique obrigatoriamente o grupo de recursos exclusivo. O formato do QuotaName é ot_42854300324****_169821756****_p#ot_42854300324****_169821756****.

4. Na seção Basic Properties, clique em Edit para modifique a configuração conforme necessário.