DataWorks:Instâncias acionadas automaticamente

Modo de pesquisa inteligente

A pesquisa inteligente analisa automaticamente sua consulta para filtrar as instâncias correspondentes.

1. Execute uma pesquisa inteligente.

   Clique em Intelligent Search na caixa de filtro. Na caixa de diálogo exibida, insira sua consulta, como Sort by instance type, e pressione Enter. O sistema exibe automaticamente as instâncias correspondentes.

2. Salve uma nova visualização.

   Para reutilizar os critérios de pesquisa da sua pesquisa inteligente, clique em Unsaved View > Save as New View na barra de pesquisa. Na caixa de diálogo Save View, insira um View Name personalizado e clique em Save. Depois, encontre e use essa nova visualização na barra de pesquisa de visualizações.

   Nota

   Para deixar de usar essa visualização, encontre seu nome na barra de pesquisa de visualizações. Passe o mouse sobre o nome da visualização, clique em ... à direita e selecione Modify ou Delete.

3. Desative a pesquisa inteligente.

   Para fazer uma pesquisa precisa usando condições de filtro, pressione a tecla Esc ou clique em Disable Intelligent Search na barra de ações da instância para sair do modo de pesquisa inteligente.

Modo de condições de filtro

Use condições de filtro para localizar com precisão as instâncias acionadas automaticamente necessárias.

1. Filtragem simples.

   Na barra de ferramentas, selecione vários critérios de filtro, como Search by task name, task ID, or instance ID, Scheduling Resource Group, Alerts Reported Within Last 24 Hours ou In Waiting for Resources State for a Long Period of Time, para filtrar instâncias.

2. Filtragem avançada.

   Clique em Filter na caixa de filtro. Em seguida, combine vários critérios, como Search by task name, task ID, or instance ID, Scheduling Resource Group, Run time e Computing Resource Name, para localizar com precisão as instâncias necessárias.

Modo de classificação

Classifique a lista de instâncias acionadas automaticamente em ordem crescente ou decrescente por campos como Data Timestamp, Priority e Timing Time. Para workflows que foram executados com êxito, classifique as tarefas internas por Start Time, End Time e Duration.

Gerencie uma única instância

Para gerenciar uma instância acionada automaticamente específica, encontre-a na lista e use as ações na coluna Actions. A tabela a seguir descreve as ações disponíveis.

Gerencie várias instâncias

Para gerenciar várias instâncias acionadas automaticamente simultaneamente, selecione as instâncias na lista. Em seguida, use os botões de operação em massa na parte inferior da lista para Terminate, Rerun, Set to Successful, Change Resource Group, Freeze ou Unfreeze.

A caixa de diálogo de confirmação para uma reexecução em massa apresenta a opção Rerun With Latest Configuration, que está desativada por padrão. Se você ativar essa opção, as seguintes propriedades da instância são atualizadas para as configurações mais recentes da tarefa: recurso de computação, grupo de recursos, CUs, prioridade, imagem, tipo de agendamento, política de reexecução, definição de tempo limite, proprietário, tags e configurações de DQC. Ative essa opção após alterar a configuração do nó. Não ative essa opção se você tiver modificado manualmente as propriedades da instância, pois essas propriedades podem ser redefinidas. Independentemente da ativação dessa opção, o código do nó sempre usa a versão mais recente em cada reexecução.

Para exportar a lista de instâncias dos resultados da sua pesquisa, primeiro execute uma pesquisa. Em seguida, clique em Export Query Results acima da lista de instâncias. Na caixa de diálogo Export Query Results, confirme as seguintes informações:

• Operation Object: exibe o número de instâncias que correspondem aos critérios de filtro atuais. Clique em View Filter Conditions para ver os filtros específicos.

• Export Method: selecione Export to Local File.

Recursos da página do DAG

Na página de detalhes do DAG, é possível agregar nós, analisar dependências upstream e downstream e ajustar o estilo de exibição do DAG.

Ações do DAG

Na página de detalhes do DAG, clique com o botão direito em uma instância no workflow para visualizar detalhes como suas relações upstream e downstream e o código. As seguintes ações estão disponíveis:

• Show Ancestor Nodes: visualize as tarefas upstream do nó atual para entender quais nós afetam sua saída de dados. Expanda os nós ancestrais por nível, até seis níveis por vez.

• Show Descendent Nodes: visualize as tarefas downstream do nó atual para entender quais nós são afetados por sua saída de dados. Expanda os nós descendentes por nível, até seis níveis por vez.

• View Runtime Log: Após o início de uma tarefa, visualize seu processo de execução detalhado no log de execução. Para obter descrições dos parâmetros principais no log, consulte Appendix: Runtime log parameters.

• Run Diagnostics: verifica as dependências upstream da tarefa, o horário de agendamento, os recursos de agendamento e o status de execução.

• View Code: visualize o código do nó atual no ambiente de produção. Se não for o esperado, verifique se a versão mais recente do nó foi implantada com êxito.

• Edit Node: abre o nó atual no DataStudio.

• View Lineage: visualize a linhagem de dados da instância atual.

• More: visualize detalhes como as propriedades básicas da instância, logs de operação e código da tarefa.

• Visualize auto triggered node: visualize informações sobre o nó acionado automaticamente ao qual a instância atual pertence.

• Acesse task 360 page: acesse o Data Governance Center para obter uma visão panorâmica dos detalhes da tarefa a partir de várias dimensões, como linhas de base associadas e status de execução da instância, e execute a governança da tarefa. Para obter mais informações, consulte Get a panoramic view of a task.

• Terminate: interrompe uma tarefa cuja execução não é mais necessária. O status da tarefa é definido como falha. É possível interromper apenas instâncias que estão no status Waiting time, Waiting for resources ou Running.

• Rerun: reexecuta uma tarefa que está no status Successful ou Failed. Após a execução bem-sucedida da tarefa, ela poderá acionar suas tarefas downstream não executadas. Use essa opção para lidar com nós com falha ou perdidos.

  Na caixa de diálogo de confirmação, a opção Rerun With Latest Configuration está desativada por padrão. Se você ativar essa opção, as seguintes propriedades da instância são atualizadas para as configurações mais recentes da tarefa: recurso de computação, grupo de recursos, CUs, prioridade, imagem, tipo de agendamento, política de reexecução, definição de tempo limite, proprietário, tags e configurações de DQC. Ative essa opção após alterar a configuração do nó. Não ative essa opção se você tiver modificado manualmente as propriedades da instância, pois essas propriedades podem ser redefinidas. Independentemente da ativação dessa opção, o código do nó sempre usa a versão mais recente em cada reexecução.

• Rerun Descendent Nodes: reexecuta os nós descendentes de uma tarefa que está no status Successful ou Failed. Selecione quais tarefas downstream reexecutar. Após a execução bem-sucedida, elas poderão acionar suas tarefas downstream não executadas. Use essa opção para recuperação de dados.

• Set to Successful: define o status de uma tarefa com falha como bem-sucedida. Útil para evitar que uma tarefa com falha bloqueie suas tarefas downstream. Use essa opção para lidar com nós com falha.

• Resume: retoma uma tarefa com falha a partir do ponto de falha. Se uma tarefa contiver várias instruções SQL, é possível retomá-la a partir da instrução SQL específica que falhou.

  Nota

  Esta operação é compatível apenas com tarefas SQL do MaxCompute.

• Trigger Data Quality Check: se as regras de qualidade de dados estiverem configuradas para a tarefa, acione uma verificação de validação.

• Emergency Operations: as operações de emergência são de uso único e afetam apenas a execução atual do nó.

  • Delete Dependencies: remove as relações de dependência do nó atual. Use essa opção para remover urgentemente uma dependência upstream quando uma tarefa upstream falha, mas não está relacionada aos dados da instância atual, o que permite a execução da tarefa atual.

    Nota

    Confirme se essa ação afetará seus dados verificando o código da tarefa e a linhagem de dados.

  • Change Priority: a prioridade de uma instância é herdada de sua linha de base. Redefina a prioridade aqui conforme necessário. Um número maior indica uma prioridade maior.

  • Force Rerun: força uma reexecução do nó atual. Aplique essa ação em instâncias acionadas automaticamente que estão nos status de êxito, falha ou não executado. Use essa opção para recuperação de dados.

  • Force Heavy Run Downstream: força a reexecução de tarefas downstream para processar dados para as duas datas de negócios anteriores. Essa operação é compatível apenas com instâncias acionadas automaticamente no status Successful ou Failed. Use essa opção para recuperação de dados. Para obter mais informações, consulte Appendix: Force rerun downstream.

    Nota

    Apenas administradores de workspace, administradores de locatário e a conta da Alibaba Cloud podem iniciar uma reexecução forçada de nós downstream.

  • Clone Instance: cria uma nova instância clonada com base em uma instância em execução (a instância host). A nova instância é nomeada no formato dw_clone_NodeName.

    Nota

    • É possível clonar apenas instâncias de nó ODPS SQL, e cada instância admite apenas um clone.

    • Lógica de execução para instâncias host e clonadas:

      • Tanto a instância host quanto a clonada estão no status de execução. Se a instância host for bem-sucedida primeiro, a instância clonada é interrompida. Se a instância clonada for bem-sucedida primeiro, a instância host é interrompida e seu status é definido como bem-sucedido.

      • Se uma tarefa downstream da tarefa atual tiver uma instância clonada, a reexecução dos nós downstream não aciona a execução da instância clonada.

• Freeze: congele uma instância se ela e suas instâncias downstream não precisarem ser executadas.

  Importante

  • O congelamento de uma instância upstream bloqueia a execução de suas instâncias downstream. Prossiga com cautela.

  • Não execute operações no nó projectname_root, pois ele é o nó raiz do workspace. Todas as instâncias acionadas automaticamente dependem deste nó. O congelamento desse nó impede a execução de qualquer instância acionada automaticamente.

  • Não é possível congelar uma instância que está no status Waiting for resources, Waiting time ou Running (por exemplo, se o código do nó estiver em execução ou se uma verificação de qualidade de dados estiver em andamento).

• Unfreeze: descongela uma instância que está no status congelado.

  • Se a instância ainda não tiver sido executada, ela é executada automaticamente após a conclusão de suas tarefas upstream.

  • Se todas as tarefas upstream já tiverem sido concluídas, o status da instância muda para falha. Nesse caso, reexecute-a manualmente.

  Nota

  A operação de descongelamento afeta apenas a instância atual. Se o nó acionado automaticamente ainda estiver congelado, a instância gerada no dia seguinte também ficará congelada.

Detalhes da instância

No DAG da instância, clique com o botão esquerdo em uma instância específica e clique em View Log Data na janela pop-up, ou clique em Show Details para visualizar informações detalhadas como General, Runtime Log, Operation Log e Code.