O painel de Operações e Manutenção (O&M) exibe a avaliação de estabilidade de O&M para tarefas acionadas automaticamente, métricas essenciais de O&M, uma visão geral do uso de recursos de agendamento e detalhes de execução de tarefas únicas e de sincronização de integração de dados. Esse painel oferece uma visão geral de alto nível de todas as tarefas do seu workspace, permite localizar e tratar rapidamente tarefas anômalas e aumenta sua eficiência operacional.
Limitações
O painel de O&M não é compatível com o ambiente de desenvolvimento de um workspace em modo padrão. Para alternar entre os ambientes de Production e Development, clique em no seletor na barra de menu superior do Operation Center.
Auto Triggered Task tab: Abrange apenas tarefas acionadas automaticamente e suas instâncias.
One-time Task tab: Abrange apenas workflows acionados manualmente e as instâncias de nós internos correspondentes.
Data Integration Task tab: Abrange apenas tarefas de sincronização de integração de dados offline e em tempo real.
Escopo do workspace
Os dados disponíveis variam conforme o escopo do workspace selecionado:
|
Escopo |
Visualização disponível |
|
Projeto específico |
Visão geral de O&M do workspace selecionado, incluindo o resumo do workspace e as tarefas de sincronização de integração de dados. |
|
Todos os projetos |
Visão geral de O&M de todos os workspaces da conta atual. Os detalhes das tarefas de sincronização do Data Integration não estão disponíveis nesta visualização. |
Acesse o painel de O&M
Faça login no console do DataWorks. Na barra de navegação superior, selecione a região. No painel de navegação à esquerda, escolha Data Development and O&M > Operation Center. Selecione o workspace na lista suspensa e clique em Go to Operation Center.
Visualize informações de O&M para tarefas acionadas automaticamente
Na aba Auto Triggered Task, o painel apresenta cinco áreas: avaliação de estabilidade de O&M, pontos de atenção, distribuição de status de instâncias recorrentes, status de conclusão de instâncias recorrentes e uso de grupos de recursos de agendamento.
Avaliação de estabilidade de O&M
A estabilidade do workspace recebe uma pontuação baseada no status geral de execução das tarefas.
|
Workspace |
Único workspace |
Todos os meus workspaces |
|
Diagrama de estabilidade |
|
|
|
Descrição da estabilidade |
O status de saúde possui quatro níveis: Excelente, Bom, Regular e Ruim. Uma tag de alto ou baixo risco indica saúde ruim que exige otimização imediata. |
Alterne para a visualização All my workspaces para ver a estabilidade de O&M, a contagem de instâncias recorrentes e o status de conclusão em todos os workspaces dos quais você participa. Clique em View Details na coluna Operation de um workspace específico para analisar seus detalhes de estabilidade. |
Pontos de atenção
A seção Pontos de Atenção agrega itens anômalos com base em linhas de base inteligentes e exceções de tarefas acionadas automaticamente. Alterne entre a visualização do workspace e a visualização My para ver problemas em todo o workspace ou apenas nas tarefas sob sua responsabilidade. Resolva prontamente os itens sinalizados para evitar impactos downstream.
|
Tipo de problema |
Descrição |
Referência |
|
Violação de instância de linha de base |
Quantidade de instâncias de linha de base que excederam o tempo de conclusão comprometido hoje. Uma violação significa que o tempo estimado de conclusão supera o tempo comprometido, disparando um alerta. |
|
|
Aviso de instância de linha de base |
Quantidade de instâncias de linha de base com avisos ativos hoje. Exceder a margem de aviso traz o risco de perder os tempos de conclusão comprometidos. |
|
|
Evento de erro |
Quantidade de eventos de erro hoje. A falha de uma tarefa monitorada por linha de base gera um evento de erro. Tarefas com falha podem bloquear todos os nós downstream. |
|
|
Evento de lentidão |
Quantidade de eventos de lentidão hoje. Esse evento é acionado quando uma tarefa monitorada por linha de base executa por um tempo significativamente maior que sua média histórica. |
— |
|
Tarefa isolada |
Quantidade de tarefas acionadas automaticamente sem dependências upstream. Nós isolados não podem ser agendados automaticamente. |
|
|
Tarefa congelada |
Quantidade de tarefas acionadas automaticamente pausadas. Tarefas congeladas geram instâncias no estado Congelado, que não executam e bloqueiam nós downstream. |
|
|
Tarefa expirada |
Quantidade de tarefas acionadas automaticamente cujo período de validade de agendamento expirou. Tarefas expiradas não conseguem gerar instâncias recorrentes. |
— |
|
Tarefa modificada |
Quantidade de tarefas de agendamento recorrente modificadas hoje. As modificações incluem alterações de código, configurações de agendamento, status do nó e proprietário. Abrange tanto mudanças publicadas do Data Studio quanto alterações diretas feitas no ambiente de produção. Ao visualizar tarefas em My, apenas modificações em nós de sua propriedade são contabilizadas. |
— |
Instâncias recorrentes e tarefas acionadas automaticamente
|
Seção |
Descrição |
|
Recurring instance status distribution |
Exibe a distribuição de status das instâncias recorrentes no workspace atual (ou aquelas sob sua posse) para um timestamp de dados especificado, refletindo o estado no momento da solicitação da página. Clique em um segmento do gráfico de pizza para ver a contagem e a porcentagem desse status. Preste muita atenção às instâncias Failed (podem bloquear nós downstream), Frozen (não executarão e bloquearão nós downstream) e Running slow (tempo de execução superior a 15 minutos acima da média de 10 dias; se existirem menos de 4 instâncias históricas, o limiar é de 30 minutos). Apenas tarefas normais são incluídas — tarefas de simulação e congeladas são excluídas. |
|
Recurring instance completion status |
Gráfico de linhas comparando o status de conclusão de ontem, de hoje e a média histórica de 10 dias (contagens de instâncias bem-sucedidas e não executadas) das 00:00 às 23:00 do dia atual. Filtre por tipo de tarefa usando o seletor. Um desvio significativo entre as três linhas indica uma anomalia que vale a pena investigar. |
|
Recurring instance and auto triggered task trends |
Tendências de mudança na quantidade de tarefas acionadas automaticamente e instâncias recorrentes no ambiente de produção ao longo de um intervalo de timestamp de dados especificado. Os dados abrangem até o último ano. |
|
Auto triggered task distribution |
Distribuição de tarefas acionadas automaticamente por tipo de nó e ciclo de agendamento no momento da solicitação da página. O gráfico de pizza mescla categorias quando o número de tipos excede o limite de exibição. Na visualização All my workspaces, as tarefas são agrupadas por workspace. |
Uso do grupo de recursos de agendamento
Esta seção mostra a taxa de uso de recursos — a porcentagem de recursos consumidos por instâncias em execução no grupo de recursos de agendamento selecionado — e a tendência de instâncias concorrentes em execução durante um período especificado (até 7 dias).
Se o uso do grupo de recursos ultrapassar 80%, escale horizontalmente o grupo de recursos para evitar que a escassez afete a execução das tarefas. As estatísticas de uso estão no nível do grupo de recursos: se o grupo de recursos exclusivo for compartilhado entre vários workspaces, o gráfico refletirá a taxa total de uso de recursos e a tendência numérica de instâncias para esse grupo em todos esses workspaces.
Classificações de tempo de execução e erros de instâncias recorrentes
Yesterday's recurring instance rankings
Classifica as 30 principais instâncias recorrentes do dia anterior por tempo de execução, tempo de espera por recursos e duração da lentidão (a diferença entre o tempo de execução de ontem e a média histórica, em ordem decrescente). Clique em um instance ID para abrir a página de detalhes da instância e executar diagnósticos.
Recurring instance error rankings for the last month
Lista as 30 principais instâncias recorrentes com mais erros no último mês. Utilize esta lista para identificar tarefas com alta taxa de erros, visualizar detalhes da tarefa e rastrear causas raiz.
Visualize informações de O&M para tarefas únicas
Na aba One-time Task, monitore o status de execução de workflows acionados manualmente e instâncias de nós internos.
Visão geral de tarefas únicas
Mostra o número total de workflows acionados manualmente e instâncias de nós internos executados desde uma data especificada, juntamente com a porcentagem de execuções bem-sucedidas.
Status da instância do workflow
|
Seção |
Descrição |
|
Workflow instance status distribution |
Gráfico de pizza mostrando a distribuição de status das instâncias de workflow acionadas manualmente para a data de execução especificada (até 7 dias de dados). Clique em um segmento para ir à página de detalhes das tarefas nesse estado. Na visualização My, apenas as instâncias de workflow de sua propriedade são mostradas. Preste muita atenção às tarefas Failed. |
|
Workflow rankings |
Classifica workflows por tempo de execução e taxa de falha para a data de execução especificada. Apenas os 30 principais workflows são exibidos. Clique em um Task ID para abrir a página de detalhes da Manually Triggered Workflow Instance e verifique Run Diagnostics para instâncias específicas no DAG do workflow. |
Status da instância de tarefa interna
|
Seção |
Descrição |
|
Internal Task Distribution |
Gráfico de pizza em tempo real mostrando a distribuição de instâncias de nós internos por Node Type e Owner. |
|
Internal Task Leaderboard |
Classifica instâncias de nós internos por tempo de execução e taxa de falha para a data de execução especificada. Apenas as 30 principais instâncias são exibidas. Clique em um Task ID para abrir a página de detalhes da Manually Triggered Workflow Instance e visualize Run Diagnostics para o DAG relevante. |
Visualize informações de O&M para tarefas de integração de dados
Na aba Data Integration, revise a visão geral de O&M e o uso de grupos de recursos para tarefas de sincronização de integração de dados de Yesterday ou Today.
Esta aba coleta estatísticas de O&M apenas para grupos de recursos exclusivos do Data Integration, não para grupos de recursos Serverless. Para operações em grupos de recursos exclusivos, consulte Faturamento de grupos de recursos exclusivos para Data Integration . Para grupos de recursos Serverless, consulte Usar um grupo de recursos Serverless .
Uso do grupo de recursos do Data Integration
Exibe detalhes de recursos para todas as tarefas de integração de dados no workspace atual: Running Tasks, Resource Usage e Expired At. Use essas informações para decidir se deve escalar recursos com base no uso atual e no volume de tarefas.
Distribuição de status de tarefas de sincronização do Data Integration
Gráfico de pizza mostrando a distribuição de status das tarefas de sincronização no workspace atual. Clique em um segmento para ir à página de detalhes das tarefas nesse estado. Priorize tarefas Abnormal e Failed — estas geralmente bloqueiam a execução de tarefas downstream.
Status de tarefas de sincronização offline
|
Seção |
Descrição |
|
Data synchronization progress |
Volume total de dados e uso total de tráfego para sincronização offline dentro do timestamp de dados selecionado. |
|
Data synchronization volume statistics |
Curvas de extração e gravação de dados detalhadas por tipo de fonte de dados para o timestamp de dados selecionado. Utilize isso para identificar tarefas do mecanismo DPI com grandes volumes de sincronização e alocar recursos adequadamente. |
|
Latest Top 10 rankings |
As 10 mais recentes Latest Failed Instances e Latest Successful Instances, fornecendo um instantâneo rápido do status atual das tarefas de sincronização. Use as mensagens de erro para rastrear e resolver falhas de instância. |
|
Data synchronization task execution details |
Filtre por Commit Time, Task Status ou Task Name para encontrar instâncias de tarefas específicas e revisar seus detalhes de execução. |
Status de tarefas de sincronização em tempo real
|
Seção |
Descrição |
|
Visão geral da sincronização de dados |
Soma da velocidade de dados e velocidade de registros em todas as tarefas de sincronização em tempo real no workspace atual. |
|
Top 10 task latency |
As 10 tarefas de sincronização em tempo real com maior latência, classificadas para rápida identificação e otimização. |
|
Alert information |
Alertas recentes gerados por tarefas de sincronização em tempo real, permitindo detectar e resolver exceções rapidamente. |
|
Failover information |
Mensagens de |
