E-MapReduce:Manage workspaces

Um workspace é a unidade básica no EMR Serverless Spark para gerenciar jobs, membros, funções e permissões. Os administradores podem adicionar membros e atribuir funções, como administrador do workspace, analista de dados, desenvolvedor de dados ou convidado, para o trabalho colaborativo.

Pré-requisitos

• Você precisa ter registrado uma conta Alibaba Cloud e concluído a verificação de nome real.

• Você deve ter uma conta com as permissões necessárias para criar um workspace:

  • Se você usar sua conta Alibaba Cloud, consulte Assign roles to an Alibaba Cloud account para obter detalhes sobre a autorização.

  • Se você usar um usuário RAM ou uma função RAM, certifique-se de que as políticas de acesso AliyunEMRServerlessSparkFullAccess, AliyunOSSFullAccess e AliyunDLFFullAccess estejam anexadas ao usuário RAM ou à função RAM. Em seguida, na página Access Control, adicione o usuário RAM ou a função RAM e conceda a ele a função de administrador. Para mais informações, consulte Grant permissions to a RAM user e Manage users and roles.

• O Data Lake Formation (DLF) está ativado. Para mais informações, consulte Quick Start. Para obter uma lista das regiões que suportam o DLF, consulte Regions and endpoints.

• O Object Storage Service (OSS) está ativado e um bucket foi criado. Para mais informações, consulte Activate OSS e Create a bucket.

Criar um workspace

1. Acesse a página do workspace do EMR Serverless Spark.

   1. Faça login no E-MapReduce console.

   2. No painel de navegação à esquerda, escolha EMR Serverless > Spark.

2. Na página do Spark, clique em Create Workspace.

3. Na caixa de diálogo Create Workspace, configure os seguintes parâmetros.

   Parâmetro	Descrição
   Region	Selecione a região onde seus dados estão armazenados. Não é possível alterar a região após a criação.
   Billing Method	Os métodos de faturamento suportados são Subscription e Pay-as-you-go.
   Workspace Name	O nome deve ter de 1 a 64 caracteres e pode conter apenas caracteres chineses, letras, dígitos, hifens (-) e sublinhados (_). Nota Caso insira um nome já em uso, o sistema solicitará um nome diferente.
   Maximum Quota	Unidades de computação (CUs) máximas disponíveis para execução simultânea de jobs no workspace.
   GPU quota	O número máximo de placas GPU que podem ser usadas simultaneamente para a execução de jobs no workspace. Limitar tipos de instância GPU: ativado por padrão. Quando esta opção está ativada, apenas os tipos de instância GPU dentro do intervalo selecionado podem ser usados. Nota Este recurso é suportado apenas nas regiões China (Beijing), China (Shanghai), China (Hangzhou), China (Shenzhen), China (Ulanqab) e China (Hong Kong). Este parâmetro está disponível apenas para workspaces pay-as-you-go. Os tipos de instância suportados e os preços unitários estão sujeitos ao console. Se você precisar de outros tipos de instância, envie um ticket. Se você quiser usar mais recursos de GPU enquanto o workspace estiver em uso, consulte Edit the pay-as-you-go GPU quota e Manage subscription GPU quotas.
   Workspace Directory	Armazena arquivos de dados, como logs de jobs, eventos de tempo de execução e recursos. Para visualizar logs incrementais quase em tempo real durante a O&M, selecione um bucket com OSS-HDFS ativado.
   DLF for Metadata Storage	Armazena e gerencia metadados. Selecione o catálogo de dados a ser associado ao workspace. Para criar um catálogo de dados: Clique em Create Catalog. Na caixa de diálogo exibida, insira um Catalog Name e clique em OK. Na lista suspensa, selecione o catálogo de dados que você criou. Nota Após criar um workspace, você pode adicionar um catálogo de dados DLF existente. Data catalog.
   Execution Role	Especifica a função assumida pelo Serverless Spark para executar jobs. A função padrão é AliyunEMRSparkJobRunDefaultRole. O Serverless Spark usa essa função para acessar seus recursos em outros services, como OSS e DLF. Se você quiser controlar as permissões da função de execução, poderá usar uma função de execução personalizada. Para mais informações, consulte Execution role.
   Advanced Settings	Tags: As tags são identificadores dos seus recursos de cloud. Você pode usar tags para classificar, pesquisar e agregar recursos que compartilham as mesmas características, o que melhora a eficiência do gerenciamento de recursos. Você pode vincular até 20 tags a cada workspace. Cada tag consiste em uma chave de tag e um valor de tag personalizados. As tags também permitem a alocação de custos e o gerenciamento detalhado de recursos pay-as-you-go. Você pode vincular tags ao criar um workspace, ou adicionar e modificar tags a qualquer momento na página de lista do workspace. Vincular tags aos recursos ajuda a classificá-los e otimizar as operações.

4. Clique em Create Workspace.

Edite a cota de GPU pay-as-you-go

Se você criou um workspace e precisa ajustar o limite de placas GPU pay-as-you-go e os tipos de instância disponíveis de acordo com os requisitos do seu negócio, edite a cota de GPU pay-as-you-go.

1. Na página do Spark, escolha Resource Management > Edit Pay-As-You-Go GPU Quota na coluna Actions do workspace.

2. Na página Edit Pay-As-You-Go GPU Quota, ajuste o limite de placas GPU e os tipos de instância suportados.

3. Confirme a configuração e clique em OK.

Após ajustar a cota de GPU pay-as-you-go, as filas de GPU são inicializadas. Para ajustar as filas de GPU com base nos requisitos do seu negócio, consulte Manage resource queues.

Gerencie cotas de GPU por assinatura

Se você criou um workspace e deseja comprar e gerenciar recursos de GPU por assinatura com base nos requisitos do seu negócio, execute as etapas a seguir.

1. Na página do Spark, escolha Resource Management > Buy Subscription GPU Quota na coluna Actions do workspace.

2. Na página Buy Subscription GPU Quota, configure o tipo de instância GPU, o número de placas GPU e a duração da assinatura.

3. Confirme a configuração e clique em OK. Em seguida, conclua o pagamento conforme solicitado.

Após comprar cotas de GPU por assinatura, as filas de GPU são inicializadas. Para ajustar as filas de GPU com base nos requisitos do seu negócio, consulte Manage resource queues.

Caso cotas de GPU por assinatura sejam compradas para um workspace, escolha Resource Management > Manage Subscription GPU Quota para acessar a página de gerenciamento de cota de GPU por assinatura, onde é possível renovar ou aumentar as cotas conforme necessário.

Exclua um workspace

As etapas de exclusão variam de acordo com o método de faturamento:

• Assinatura: Cancele a assinatura do pedido de cota primeiro. O workspace será excluído após o cancelamento. Unsubscription and refunds.

• Pay-as-you-go:

  1. Na página do Spark, clique em Delete na coluna Actions do workspace.

  2. Na caixa de diálogo, insira o nome do workspace para confirmação e clique em OK.

Ajustar a cota de assinatura

Para workspaces de assinatura, é possível fazer upgrade ou downgrade da cota de CU.

1. Na página do Spark, escolha > Upgrade Subscription Quota ou Downgrade Subscription Quota na coluna Actions do workspace.

2. Na página EMR Serverless Spark Reserved Resources | Change Specification, ajuste o parâmetro CU Quota. A diferença de preço é calculada automaticamente.

3. Confirme a configuração e clique em Buy Now.

Modifique a cota pay-as-you-go

1. Na página do Spark, escolha > Modify Pay-as-you-go Quota na coluna Actions do workspace.

2. Na caixa de diálogo exibida, ajuste a Maximum Pay-as-you-go Quota (CUs) e clique em OK.

Documentos relacionados

• Adicione usuários RAM e atribua funções para desenvolvimento colaborativo usando o Access Control. Manage users and roles.

• Isole e gerencie recursos adicionando filas. Manage resource queues.