MaxCompute:Compra y uso de resource groups exclusivos de transmisión de datos

Contexto

Requisitos previos

Antes de adquirir y utilizar un resource group exclusivo del servicio de transmisión de datos, asegúrese de que su entorno cumpla con los siguientes requisitos de red y región:

• Requisitos de red: Solo se admite el acceso desde una red VPC. No se admite el acceso desde la Internet pública.

• Requisitos de región: No se admiten transferencias de datos entre regiones. Debe adquirir el resource group en la misma región donde se encuentra su tarea de transferencia de datos.

• Para conocer otras limitaciones, consulte Data Transmission Service limitations.

Adquirir un resource group exclusivo de transmisión de datos

1. Inicie sesión en la consola de MaxCompute y seleccione una región en la esquina superior izquierda.

2. En el panel de navegación izquierdo, elija Manage Configurations > Quotas .

3. En la página Quotas, haga clic en New Quota.

   En la página de compra, seleccione Data Transmission Service como tipo de especificación.

   Configure la Tunnel Concurrency según sus necesidades .

4. Una vez completada la compra, regrese a la consola. En la página Quotas, encontrará el nuevo grupo de cuotas con el Quota Type definido como Data Transmission Service. Puede actualizar, reducir o renovar este grupo de cuotas. Para obtener más información, consulte Related operations.

Uso de un resource group exclusivo de transmisión de datos

Puede especificar un resource group exclusivo del servicio de transmisión de datos para tareas de transferencia o integración de datos con el fin de mejorar la eficiencia de procesamiento y satisfacer necesidades empresariales específicas.

1. Conéctese a su proyecto de MaxCompute mediante MaxCompute client (odpscmd) u otra herramienta de conexión, y luego ejecute el siguiente comando para habilitar el enrutamiento de cuotas exclusivas:

    setproject odps.tunnel.enable.quota.route.v2=true;

   Nota

   Asegúrese de que su SDK de MaxCompute sea la versión 0.45 o posterior.

2. Otorgue permisos para usar la función de cuotas a todas las cuentas requeridas (incluidas las cuentas de Alibaba Cloud) y roles.

   1. Inicie sesión en la consola de MaxCompute y seleccione una región en la esquina superior izquierda.

   2. En el panel de navegación izquierdo, elija Manage Configurations > Tenants .

   3. En la página Tenants, haga clic en la pestaña Roles.

   4. En la pestaña Roles, haga clic en Add Role. En el cuadro de diálogo Add Role, introduzca un Role Name personalizado, proporcione el Policy Content y luego haga clic en OK.

      El Policy Content es el siguiente:

      {
          "Statement": [{
                  "Action": [
                      "odps:List",
                      "odps:Usage"],
                  "Effect": "Allow",
                  "Resource": ["acs:odps:*:regions/*/quotas/*"]}],
          "Version": "1"
      }

   5. Asigne el rol a las cuentas que necesitan especificar cuotas a nivel de trabajo.

      1. Otorgue permisos a una cuenta de Alibaba Cloud.

         -- Add an Alibaba Cloud account to the tenant and grant a role to the account.
         ADD tenant USER <Aliyun$xxxx>;
         GRANT tenant role <role_name> TO USER <Aliyun$xxxx>;
         
         -- View the permissions of a role or user in the tenant.
         SHOW grants FOR tenant role <role_name>;
         SHOW grants FOR tenant USER <user_name>;
         SHOW principals FOR tenant [role] <role_name>;

      2. Otorgue permisos a un usuario RAM.

         En la página Tenants, haga clic en la pestaña Users.

         En la pestaña Users, haga clic en Add Member. En el cuadro de diálogo Add Member, seleccione o agregue las cuentas deseadas. En la sección Batch Set Roles, seleccione los roles, haga clic en y luego haga clic en OK.

3. Especifique manualmente el grupo de cuotas en el SDK para su tarea de Data Transmission Service.

   -- Use the resource group named xxx for the Data Transmission Service.
   final TableTunnel tunnel = new TableTunnel(odps);
   tunnel.getConfig().setQuotaName("xxx");
   TableTunnel.UploadSession up = tunnel.createUploadSession(projectName, tableName);
   
   -- Get the name of the resource group that the session is actually using.
   up.getQuotaName();

   En el panel de navegación izquierdo, elija Manage Configurations > Quotas .

   En el panel de navegación izquierdo, elija Manage Configurations > Quotas .

   Puede consultar y copiar el QuotaName. Por ejemplo: ot_42854300324****_169821756****_p#ot_42854300324****_169821756****.

Consulta de métricas del resource group

En la página Quotas, haga clic en Configure Resources en la columna Actions de la cuota objetivo.

Puede consultar el uso de su resource group exclusivo del servicio de transmisión de datos basado en suscripción.

Configuración del resource group

1. Inicie sesión en la consola de MaxCompute y seleccione una región en la esquina superior izquierda.

2. En el panel de navegación izquierdo, elija Manage Configurations > Projects.

3. En la página Projects, haga clic en Manage en la columna Actions del proyecto objetivo.

   En la sección Basic Properties, puede consultar la configuración de Data Transmission Service para el proyecto actual. La siguiente tabla describe los parámetros.

   Parámetro	Descripción
   Default Tunnel Quota	La cuota predeterminada del resource group de Data Transmission Service que se utiliza cuando no se especifica una cuota concreta para leer datos del proyecto o escribir datos en él. Normalmente es Default, que representa el resource group compartido de Data Transmission Service. No puede modificar esta configuración en la consola.
   Authorized Tunnel Quota	El proyecto autoriza a todos los usuarios y roles a utilizar el resource group exclusivo configurado para trabajos de lectura y escritura de datos. Por lo tanto, puede especificar la cuota del resource group exclusivo configurada en un SDK para trabajos de lectura y escritura de datos en el proyecto, incluso sin otorgar autorización manual. Solo puede configurar un resource group exclusivo por proyecto.
   Overlay Tunnel Quota	Esta función mejorada para resource groups exclusivos le permite utilizar tanto un resource group exclusivo como el resource group predeterminado. Después de configurar un resource group exclusivo adquirido, el número máximo de trabajos concurrentes permitidos para el proyecto actual aumenta a los recursos combinados del resource group compartido de Data Transmission Service y el resource group exclusivo. Esta función solo es compatible en algunas regiones. La disponibilidad está sujeta a lo que se muestra en la consola.

   • Un proyecto solo se puede configurar con un resource group exclusivo, pero varios proyectos pueden compartir uno. Cuando utilice la función de superposición, deje vacía la configuración del grupo de cuotas.

   • Si utiliza la Storage API, debe especificar el resource group exclusivo. El formato de QuotaName es ot_42854300324****_169821756****_p#ot_42854300324****_169821756****.

4. En la sección Basic Properties, haga clic en Edit para modificar la configuración según sea necesario.