E-MapReduce:Create a gateway cluster

Pré-requisitos

Antes de começar, verifique se você tem:

• Um cluster Hadoop ou Kafka existente no EMR com status Running. Para obter instruções de configuração, consulte Criar um cluster.

Limitações

Este procedimento aplica-se exclusivamente a clusters Hadoop e Kafka. Para implantar o ambiente de gateway em clusters DataLake, OLAP, DataFlow e Custom, consulte Modos de implantação de gateway e guia de seleção.

Criar um cluster de gateway

1. Faça login no console do EMR.

2. Na página EMR on ECS, clique em nome do cluster desejado.

3. No canto superior direito da página Basic Information, escolha All Operations > Create Gateway.

4. Na página Create Gateway, configure os parâmetros descritos na tabela a seguir.

   Configurações associadas

   Parâmetro	Descrição
   Region	Localização física do cluster de gateway.
   Resource Group	Grupo de recursos do cluster de gateway. Para criar um novo grupo de recursos, clique em Create Resource Group. Para mais informações, consulte Criar um grupo de recursos.
   Associated Cluster	Cluster de computação a ser associado ao cluster de gateway, filtrado pela região selecionada. O cluster deve ter status Running e ser do tipo Hadoop ou Kafka. Após a seleção, a vpc do cluster de gateway assume automaticamente a vpc do cluster associado. Há suporte tanto para clusters criados na versão nova quanto na antiga do console.

   Configurações básicas

   Parâmetro	Descrição
   Billing Method	Método de faturamento do cluster de gateway. Subscription: pagamento antecipado. Pay-as-you-go: cobrança horária baseada no consumo real. Ideal para testes de curto prazo ou cargas de trabalho dinâmicas.
   Zone	Zona onde está localizado o cluster associado.
   vSwitch	vSwitch correspondente à vpc e zona selecionadas.
   Default Security Group	Grupo de segurança do cluster associado.
   Assign Public Network IP	Define se um Elastic IP Address (EIP) será anexado ao gateway.
   Node Group	Recursos de computação para os nós do gateway. Configure os seguintes subparâmetros: Instance Type: tipos de instância ECS disponíveis na região escolhida. Para mais detalhes, consulte Famílias de instâncias. System Disk: tipo de disco do sistema. Tipos suportados: ultra disk, enterprise SSD (ESSD) e standard SSD. A disponibilidade varia conforme o tipo de instância e a região. Faixa de tamanho: 60 GiB a 500 GiB. Liberado junto com o cluster por padrão. Data Disk: tipo de disco de dados. Tipos suportados: ultra disk, ESSD e standard SSD. A disponibilidade varia conforme o tipo de instância e a região. Faixa de tamanho: 40 GiB a 32.768 GiB. Liberado junto com o cluster por padrão. Instances: quantidade de nós do gateway. Padrão: 1.
   Cluster Name	Nome do cluster de gateway. Deve ter entre 1 e 64 caracteres e pode conter caracteres chineses, letras, dígitos, hifens (-) e underscores (_).
   Identity Credentials	Credenciais usadas para fazer login em todos os nós do cluster de gateway. Password: deve ter de 8 a 30 caracteres e incluir letras maiúsculas, minúsculas, dígitos e caracteres especiais (!@#$%^&*). Key Pair: selecione um par de chaves para acesso SSH. Caso ainda não tenha criado um, clique em Create Key Pair para acessar o console do ECS. Mantenha o arquivo de chave privada (.pem) em local seguro, pois ele é obrigatório em cada login via SSH.

   Configurações avançadas

   Parâmetro	Descrição
   ECS Application Role	Função do Resource Access Management (RAM) que concede permissão às aplicações no cluster para chamar outros serviços da Alibaba Cloud. Padrão: AliyunECSInstanceForEMRRole.
   Bootstrap Actions	Opcional. Scripts personalizados executados antes da inicialização do cluster. Para mais informações, consulte Executar scripts usando bootstrap actions e Executar scripts manualmente.
   Tags	Opcional. Tags para anexar ao cluster. É possível adicionar tags durante a criação ou posteriormente. Para mais detalhes, consulte Gerenciar tags.
   Data Disk Encryption	Opcional. Criptografa o disco de dados. Esta configuração só pode ser ativada no momento da criação do cluster. Para saber mais, acesse Ativar criptografia de disco de dados.

5. Clique em Create and Pay. O Status do cluster mudará de Creating para Running quando o cluster de gateway estiver pronto.

Próximos passos

Quando o status do cluster de gateway mudar para Running, conecte-se a ele via SSH com as credenciais configuradas durante a criação. Em seguida, use as ferramentas de cliente do cluster para enviar jobs ao cluster Hadoop ou Kafka associado.