Configure regras de O&M automatizado com base na sua experiência de resposta a emergências. Quando as condições de gatilho são atendidas, o sistema executa operações automaticamente, como encerrar instâncias em execução ou reexecutar nós com falha, melhorando a estabilidade do service e reduzindo a manutenção noturna.
Contexto
No DataWorks, o recurso de O&M automatizado consiste no encerramento automático de instâncias de nó em execução e na reexecução automática.
-
Encerramento automático de instâncias de nó em execução
Se um nó executado em um grupo de recursos exclusivo para agendamento acionar a custom alert rule about resource groups, o sistema usa a regra de O&M automatizado especificada para encerrar instâncias específicas geradas para esse nó. Por exemplo, se a taxa de utilização de recursos de um grupo de recursos exclusivo para agendamento atingir 80% e persistir por 10 minutos, o sistema encerra automaticamente a execução de instâncias de nó não acionadas automaticamente com prioridades 1 e 3 nesse grupo de recursos exclusivo para agendamento.
-
Reexecução automática
Um nó é reexecutado automaticamente com base na regra de reexecução automática nos seguintes cenários: 1. O status do nó é Failed e a automatic rerun property não está configurada para o nó. 2. O nó falha porque o nó está executando times out.
Limitações
Limites de permissões: Apenas contas Alibaba Cloud, usuários RAM aos quais a política AliyunDataWorksFullAccess está anexada e administradores de workspace podem gerenciar regras de O&M automatizado.
-
Limites de grupos de recursos:
As regras de O&M automatizado sobre automated termination of running node instances têm efeito apenas para nós executados em um exclusive resource group for scheduling têm efeito para nós executados em e para os quais uma regra de alerta sobre a taxa de utilização de recursos de um grupo de recursos exclusivo para agendamento está configurada.
As regras de O&M automatizado sobre creating automated rerun rules têm efeito apenas para nós executados em um serverless resource group têm efeito para nós executados em.
-
Limites de recursos:
É possível associar várias regras de O&M automatizado sobre automated termination of running node instances à mesma regra de alerta.
Apenas uma regra de O&M automatizado para creating automated rerun rules pode ser criada em cada workspace.
Os registros de execução gerados para regras de O&M automatizado podem ser visualizados dentro dos últimos 30 dias.
Acesse a página Automatic
Faça login no console do DataWorks. Na região de destino, clique em no painel de navegação à esquerda. Selecione um workspace na lista suspensa e clique em Go to Operation Center.
Na barra de navegação à esquerda, selecione para acessar a página de O&M Automatizado.
Crie uma regra
Na página , você pode criar regras de O&M automatizado Create Terminate Running Instance e Auto Rerun. Cada regra requer condições de gatilho, condições de filtro para direcionar nós específicos, uma lista de bloqueios opcional para excluir nós e regras de restrição para limitar quando a regra entra em vigor.
Crie uma regra para encerrar instâncias em execução
Em Automatic O&M, configure regras para encerrar automaticamente instâncias que atendam a custom rules. Tipos de instância suportados: instâncias recorrentes, instâncias de backfill de dados, instâncias de teste, instâncias de tarefa única e instâncias de workflow acionadas manualmente. Os principais parâmetros de configuração são:
|
Seção |
Parâmetro |
Descrição |
|
Trigger Condition |
Associated Monitoring Rule |
A regra de alerta que você deseja associar à regra de O&M automatizado. Se a regra de alerta for acionada, a instância do nó será encerrada automaticamente. Nota
|
|
Filter Conditions |
Workspace |
Nome do workspace ao qual a regra de O&M automatizado se aplica. |
|
Instance Type |
Tipo da instância de nó à qual a regra de O&M automatizado se aplica. |
|
|
Scheduling Cycle |
Selecione os ciclos de agendamento aos quais a regra de O&M se aplica. Se você definir Instance Type como Scheduled Instance ou Data Backfill Instance, este parâmetro deve ser configurado. |
|
|
Priority |
Prioridade das instâncias de nó às quais a regra de O&M automatizado se aplica. Um valor maior indica uma prioridade mais alta. |
|
|
Status |
Status das instâncias de nó às quais a regra de O&M automatizado se aplica. |
|
|
Blocklist |
Nós que atendem às condições especificadas na regra de O&M automatizado, mas nos quais você não deseja executar a operação de O&M. Para adicionar um nó à lista de bloqueios, insira o nome ou ID do nó na caixa de pesquisa. |
|
|
Constraints on Rule |
Effective Period |
Intervalo de tempo durante o qual a regra está ativa. A operação de O&M é realizada apenas quando as condições da regra são atendidas e a regra é acionada dentro deste período. Fora deste período, a operação não é executada mesmo que as condições sejam atendidas. |
|
Maximum Effective Times |
Número máximo de vezes que a regra pode ser acionada e executada. Nota
Antes de cada execução de uma regra de O&M automatizado, o sistema verifica se a condição de gatilho foi atendida. Caso contrário, a regra de O&M automatizado não será executada. |
|
|
Minimum Effective Interval |
Intervalo mínimo no qual a regra de O&M automatizado pode ser acionada. |
|
Crie uma regra de reexecução automática
Em Automatic O&M, configure o recurso Auto Rerun para nós que atendem à Trigger Condition especificada. Tipos de instância suportados: instâncias agendadas periodicamente, instâncias de backfill de dados, instâncias de teste de fumaça, instâncias de tarefa única e instâncias de workflow acionadas manualmente.
-
Quando a instância é uma instância recorrente, a reexecução automática verifica apenas instâncias com timestamp de dados de ontem.
Por exemplo, se a data atual for 5 de junho de 2025, apenas instâncias recorrentes com timestamp de dados de 4 de junho de 2025 serão reexecutadas automaticamente após atenderem às condições de gatilho de reexecução automática.
-
Quando a instância é uma instância de backfill de dados, instância de teste, instância de tarefa única ou instância de workflow acionada manualmente, a reexecução automática verifica instâncias criadas hoje, ontem e anteontem.
Por exemplo, se a data atual for 5 de junho de 2025, então instâncias de backfill de dados, instâncias de teste, instâncias de tarefa única e instâncias de workflow acionadas manualmente criadas em 5 de junho, 4 de junho e 3 de junho serão reexecutadas automaticamente após atenderem às condições de gatilho de reexecução automática.
Os principais parâmetros de configuração para regras de reexecução automática são:
|
Seção |
Parâmetro |
Descrição |
|
Trigger Condition |
Running status |
A instância especificada será reexecutada automaticamente quando atender às seguintes condições e falhar na execução:
|
|
Filter Conditions |
Workspace |
Nome do workspace ao qual a regra de O&M automatizado se aplica. |
|
Instance Type |
Tipo da instância de nó à qual a regra de O&M automatizado se aplica. |
|
|
Scheduling Cycle |
Selecione os ciclos de agendamento aos quais a regra de O&M se aplica. Se você definir Instance type como Scheduled Instance ou Data Backfill Instance, este parâmetro pode ser configurado. |
|
|
Priority |
Prioridade das instâncias de nó às quais a regra de O&M automatizado se aplica. Um valor maior indica uma prioridade mais alta. |
|
|
Logs Contain Keywords |
Palavra-chave a ser identificada nos logs de operação da instância do nó. Se os logs de operação da instância do nó contiverem a palavra-chave, a regra de reexecução automática será acionada automaticamente. Os valores válidos são Nota
A regra de reexecução automática pode ser acionada para um nó cujos logs de operação contenham a palavra-chave |
|
|
Blacklist |
Blocklist |
Nós que atendem às condições especificadas na regra de O&M automatizado, mas nos quais você não deseja executar a operação de O&M. Para adicionar um nó à lista de bloqueios, insira o nome ou ID do nó na caixa de pesquisa. |
|
Rerun |
Preparation |
Para nós de computação executados em um grupo de recursos serverless, você pode selecionar Add CUs for Computing Tasks antes que o nó seja reexecutado. Nota
Especifique o número de CUs adicionadas para cada reexecução para evitar que a execução de outros nós seja bloqueada devido à competição por recursos. |
|
CUs to Add |
Além das CUs consumidas pela instância original do nó, adicione as CUs especificadas para a instância de reexecução. As CUs adicionadas são usadas apenas para a reexecução da instância. |
|
|
Rerun Times |
Número máximo de vezes que uma reexecução automática pode ser acionada. Valores válidos: 1 a 10. Unidade: vezes. |
|
|
Rerun Interval |
Intervalo entre reexecuções. Valores válidos: 3 a 30. Unidade: minutos. |
|
|
Constraints on Rule |
Effective Period |
Intervalo de tempo durante o qual a regra está ativa. A operação de O&M é realizada apenas quando as condições da regra são atendidas e a regra é acionada dentro deste período. Fora deste período, a operação não é executada mesmo que as condições sejam atendidas. |
Ative ou desative uma regra
Por padrão, uma regra de O&M automatizado entra em vigor imediatamente após ser criada. Para desativar a regra, clique no ícone 
na coluna Actions da regra.
Mais operações
Gerencie regras
Para visualizar informações sobre uma regra, acesse a página Rule Management e clique em View na linha da regra.
Para modificar uma regra, clique em Edit na parte inferior da caixa de diálogo View Rule.
Para excluir uma regra, clique em Delete na linha da regra e clique em Confirm na caixa de diálogo exibida.
Para pesquisar uma regra, insira seu nome na caixa de pesquisa na página Rule Management.
Visualize os registros de execução de uma regra
Na página Execution Records, é possível visualizar os registros de execução das regras de O&M, incluindo horário de execução, proprietário da regra e número de nós envolvidos. Para visualizar as informações detalhadas, clique em View Details na linha de um registro de execução.
Quando uma regra de O&M automatizado é acionada, a operação é realizada sob a identidade do proprietário da regra. Você pode visualizar a operação nos logs de operação da instância do nó acionador.
-
Os registros de execução de uma regra de O&M automatizado sobre encerramento automático de instâncias de nó em execução incluem as seguintes informações:
Instances Waiting for Resources/Resource Usage: Um gráfico de linhas que exibe o número de instâncias aguardando recursos e o uso de recursos ao longo do tempo. Passe o mouse sobre o gráfico para visualizar essas métricas em um ponto específico no tempo.
Terminated Node Instances: Esta seção exibe todas as instâncias de nó cuja execução foi encerrada.
-
Os registros de execução de uma regra de O&M automatizado sobre reexecução automática de instâncias de nó incluem as seguintes informações:
Automatically rerun instances: Uma lista de instâncias que foram reexecutadas automaticamente, incluindo seu Node Name, Data Timestamp, Instance Type, Task type e Owner.
Monitore grupos de recursos
Após criar uma regra de O&M automatizado, o sistema monitora automaticamente o uso de recursos do grupo de recursos especificado na regra de O&M automatizado. Para obter mais informações sobre o monitoramento de grupos de recursos, consulte Resource O&M.