MaxCompute:Comprar e usar grupos de recursos exclusivos do Data Transmission Service

Contexto

Pré-requisitos

Antes de comprar e usar um grupo de recursos exclusivo do Data Transmission Service, verifique se seu ambiente atende aos seguintes requisitos de rede e região:

• Requisitos de rede: há suporte apenas para acesso via rede VPC. Não há suporte para acesso pela internet pública.

• Requisitos de região: não há suporte para transferências de dados entre regiões. Adquira o grupo de recursos na mesma região da tarefa de transferência de dados.

• Para outras limitações, consulte Data Transmission Service limitations.

Comprar um grupo de recursos exclusivo do Data Transmission Service

1. Faça login no MaxCompute console e selecione uma região no canto superior esquerdo.

2. No painel de navegação à esquerda, escolha Manage Configurations > Quotas .

3. Na página Quotas, clique em New Quota.

   Na página de compra, selecione Data Transmission Service como tipo de especificação.

   Configure a Tunnel Concurrency conforme suas necessidades .

4. Após concluir a compra, retorne ao console. Na página Quotas, localize o novo grupo de cotas com o Quota Type definido como Data Transmission Service. É possível fazer upgrade, downgrade ou renovar esse grupo de cotas. Para mais informações, consulte Related operations.

Usar um grupo de recursos exclusivo do Data Transmission Service

Especifique um grupo de recursos exclusivo do Data Transmission Service para tarefas de transferência ou integração de dados a fim de melhorar a eficiência do processamento e atender a necessidades específicas de negócios.

1. Conecte-se ao projeto MaxCompute usando o MaxCompute client (odpscmd) ou outra ferramenta de conexão e execute o comando a seguir para ativar o roteamento de cota exclusiva:

    setproject odps.tunnel.enable.quota.route.v2=true;

   Nota

   Certifique-se de que seu MaxCompute SDK seja da versão 0,45 ou posterior.

2. Conceda permissões para usar o recurso de cota a todas as contas necessárias (incluindo contas Alibaba Cloud) e funções.

   1. Faça login no MaxCompute console e selecione uma região no canto superior esquerdo.

   2. No painel de navegação à esquerda, escolha Manage Configurations > Tenants .

   3. Na página Tenants, clique na aba Roles.

   4. Na aba Roles, clique em Add Role. Na caixa de diálogo Add Role, insira um Role Name personalizado, forneça o Policy Content e clique em OK.

      O Policy Content é o seguinte:

      {
          "Statement": [{
                  "Action": [
                      "odps:List",
                      "odps:Usage"],
                  "Effect": "Allow",
                  "Resource": ["acs:odps:*:regions/*/quotas/*"]}],
          "Version": "1"
      }

   5. Atribua a função às contas que precisam especificar cotas no nível da tarefa.

      1. Conceda permissões a uma conta Alibaba Cloud.

         -- Add an Alibaba Cloud account to the tenant and grant a role to the account.
         ADD tenant USER <Aliyun$xxxx>;
         GRANT tenant role <role_name> TO USER <Aliyun$xxxx>;
         
         -- View the permissions of a role or user in the tenant.
         SHOW grants FOR tenant role <role_name>;
         SHOW grants FOR tenant USER <user_name>;
         SHOW principals FOR tenant [role] <role_name>;

      2. Conceda permissões a um usuário RAM.

         Na página Tenants, clique na aba Users.

         Na aba Users, clique em Add Member. Na caixa de diálogo Add Member, selecione ou adicione as contas desejadas. Na seção Batch Set Roles, selecione as funções, clique em e, em seguida, clique em OK.

3. Especifique manualmente o grupo de cotas no SDK para sua tarefa do Data Transmission Service.

   -- Use the resource group named xxx for the Data Transmission Service.
   final TableTunnel tunnel = new TableTunnel(odps);
   tunnel.getConfig().setQuotaName("xxx");
   TableTunnel.UploadSession up = tunnel.createUploadSession(projectName, tableName);
   
   -- Get the name of the resource group that the session is actually using.
   up.getQuotaName();

   No painel de navegação à esquerda, escolha Manage Configurations > Quotas .

   No painel de navegação à esquerda, escolha Manage Configurations > Quotas .

   Visualize e copie o QuotaName. Por exemplo: ot_42854300324****_169821756****_p#ot_42854300324****_169821756****.

Visualizar métricas do grupo de recursos

Na página Quotas, clique em Configure Resources na coluna Actions da cota desejada.

É possível visualizar o uso do grupo de recursos exclusivo por assinatura do Data Transmission Service.

Configuração do grupo de recursos

1. Faça login no MaxCompute console e selecione uma região no canto superior esquerdo.

2. No painel de navegação à esquerda, escolha Manage Configurations > Projects.

3. Na página Projects, clique em Manage na coluna Actions do projeto desejado.

   Na seção Basic Properties, visualize a configuração do Data Transmission Service para o projeto atual. A tabela a seguir descreve os parâmetros.

   Parâmetro	Descrição
   Default Tunnel Quota	Cota padrão do grupo de recursos do Data Transmission Service usada quando nenhuma cota específica é definida para leitura ou gravação de dados no projeto. Geralmente é Default, que representa o grupo de recursos compartilhado do Data Transmission Service. Não é possível modificar essa configuração no console.
   Authorized Tunnel Quota	O projeto autoriza todos os usuários e funções a usar o grupo de recursos exclusivo configurado para tarefas de leitura e gravação de dados. Portanto, especifique a cota do grupo de recursos exclusivo configurada em um SDK para tarefas de leitura e gravação no projeto, mesmo sem conceder autorização manual. Configure apenas um grupo de recursos exclusivo por projeto.
   Overlay Tunnel Quota	Este recurso aprimorado para grupos de recursos exclusivos permite usar tanto um grupo de recursos exclusivo quanto o grupo de recursos padrão. Ao configurar um grupo de recursos exclusivo adquirido, o número máximo de tarefas simultâneas permitidas para o projeto atual aumenta para os recursos combinados do grupo de recursos compartilhado do Data Transmission Service e do grupo de recursos exclusivo. Esse recurso tem suporte apenas em algumas regiões. A disponibilidade está sujeita ao que é exibido no console.

   • Um projeto pode ser configurado com apenas um grupo de recursos exclusivo, mas vários projetos podem compartilhar um único grupo. Ao usar o recurso de sobreposição (overlay), deixe a configuração do grupo de cotas vazia.

   • Se você usar a Storage API, especifique o grupo de recursos exclusivo. O formato do QuotaName é ot_42854300324****_169821756****_p#ot_42854300324****_169821756****.

4. Na seção Basic Properties, clique em Edit para modifique a configuração conforme necessário.