DataWorks:Nó CDH Presto

Pré-requisitos

• Crie um cluster CDH do Alibaba Cloud e associe-o a um workspace do DataWorks. Para mais informações, consulte Associate a CDH compute engine.

  Importante

  Verifique se o componente Presto está instalado no seu cluster CDH e configure as informações relacionadas ao vincular o cluster.

• (Opcional, para usuários do RAM) Adicione o usuário do RAM para desenvolvimento de tarefas ao workspace correspondente e conceda a função Development ou Workspace Administrator. A função Workspace Administrator possui permissões amplas, portanto, conceda-a com cautela. Para obter mais detalhes sobre como adicionar membros, consulte Add members to a workspace.

  Nota

  Se você usar uma conta do Alibaba Cloud, pule esta etapa.

• Configure uma source de dados do Hive no DataWorks e verifique se ela passou no teste de conectividade. Para mais informações, consulte Manage data sources.

Desenvolvimento do nó

Desenvolva o código da tarefa no editor SQL. Defina variáveis no código usando o formato ${variable_name}. Em seguida, atribua um valor à variável na seção Scheduling Parameters do painel Scheduling Settings, no lado direito da página de edição do nó. Isso permite passar parâmetros dinamicamente para o código quando o nó é executado conforme o agendamento. Para saber mais sobre parâmetros de agendamento, consulte Sources and expressions of scheduling parameters. O código a seguir mostra um exemplo.

SHOW TABLES;

SELECT * FROM userinfo ;
-- You can use this with scheduling parameters.
SELECT '${var}'; 

Depuração do nó

1. Na guia Run Configuration, configure Compute Resource e Resource Group na seção Compute Resource.

   1. Para o recurso de computação, selecione o nome do cluster CDH registrado no DataWorks.

   2. selecione um grupo de recursos de agendamento aprovado no teste de conectividade com a source de dados. Para mais informações, consulte Network Connectivity Solutions.

2. Na barra de ferramentas na parte superior da página de edição do nó, clique em Run.