CloudLens for SLS oferece painéis prontos para uso para analisar e monitorar a utilização do Simple Log Service.
Pré-requisitos
Ative o recurso de coleta de logs para logs importantes, logs detalhados, logs de execução de jobs, logs de auditoria, logs de faturamento, logs de erro e métricas no projeto de destino. Para mais informações, consulte Ative o recurso de coleta de logs.
Procedimento
Faça login no console do Simple Log Service.
Na seção Log Application, na aba Cloud Service Lens, clique em CloudLens for SLS.
No painel de navegação à esquerda, em Report Center, clique no relatório desejado.
No canto superior esquerdo da página, selecione o projeto de destino.
Visão geral
O painel Overview exibe informações sobre seu projeto do Simple Log Service. Ele inclui gráficos de contagem de solicitações de leitura e gravação, taxas de sucesso dessas solicitações, contagem de solicitações 4xx e 5xx, tráfego de gravação (tamanho bruto), tráfego de gravação (compactado), taxa de compactação do tráfego de gravação e tráfego de leitura.
Monitoramento de tráfego de acesso
O painel Access Traffic Monitoring apresenta a atividade de acesso no Simple Log Service. Ele inclui gráficos com o total de solicitações do dia, número de clientes, total de usuários diários, os 10 principais IPs de source por tráfego de leitura e gravação, contagem de solicitações, tráfego de gravação, tendências de tráfego de gravação e consumo por shard, variações de tráfego de leitura e gravação por minuto e distribuição das fontes de acesso.
Monitoramento de exceções de acesso
O painel Access Exception Monitoring mostra informações sobre acessos anômalos ao Simple Log Service. Estão disponíveis gráficos com o total de solicitações do dia, proporção de falhas, erros de limitação de taxa, distribuição de status de erro, Logstores que excederam os limites de gravação, quantidade de exceções e tendências de latência no processamento de solicitações.
Monitoramento de grupos de consumidores
O painel Consumer Group Monitoring traz dados sobre grupos de consumidores. Os gráficos abrangem a quantidade de grupos, Logstores e shards consumidos, atraso no consumo, percentual de dados por grupo, lista de grupos, os 10 maiores atrasos e a duração desses atrasos.
Status geral do Logtail
O painel Logtail Overall Status fornece informações sobre o Logtail. Nele, você encontra gráficos com o número de agentes ativos, tráfego de dados brutos, distribuição de status de execução e uso de memória, status geral, tendências de CPU e memória, além do tráfego de dados enviados.
Monitoramento de coleta de arquivos do Logtail
O painel Logtail File Collection Monitoring detalha a coleta de arquivos. São apresentados gráficos com a quantidade de arquivos a coletar, máquinas coletoras, distribuição e volume de logs coletados, latência média, taxa de falha de análise e tendências de envio.
Monitoramento de exceções do Logtail
O painel Logtail Exception Monitoring exibe informações sobre exceções do Logtail. Ele contém gráficos com o número de agentes ativos, lista de agentes reiniciados, quantidade de clientes reiniciados e detalhes completos dos erros.
A seção de informações completas de erro inclui categorias como Critical errors (must be handled), Logtail write exceptions (must be handled), Duplicate log file configuration issues (MULTI_CONFIG_MATCH_ALARM), Directory count exceeding limit issues (STAT_LIMIT_ALARM, DIR_EXCEED_LIMIT_ALARM) e Logtail configuration exceptions (CATEGORY_CONFIG_ALARM). Uma tabela em cada categoria mostra o horário da ocorrência mais recente, endereço IP, tipo de alerta, contagem e detalhes.
Monitoramento de operações
O painel Operation Monitoring registra as operações no Simple Log Service. Os gráficos indicam o total de operações em Logstores, taxa de falhas nessas operações e o número de clientes que as executaram.
Monitoramento de jobs
O painel Job Monitoring apresenta o status de execução de jobs de importação de dados (novo), envio de dados (novo) ou Scheduled SQL. Os gráficos cobrem leituras e gravações com sucesso ou falha, tráfego de leitura e gravação na rede pública, taxa de processamento, atraso e exceções durante a execução.
Monitoramento de cotas
O painel Quota Monitoring informa sobre estouro de cotas de recursos. Ele reúne gráficos com visão geral dos alertas de limite de 80%, distribuição de estouros, percentuais de limite para Logstores, grupos de máquinas e configurações do Logtail, além de detalhes sobre cotas básicas, leitura e gravação de dados e estouros de recursos no projeto.
Monitoramento de qualidade SQL
O painel SQL Quality Monitoring oferece uma análise multidimensional das suas consultas SQL. Com visão geral, métricas de service SQL, análise de SQL Patterns e sugestões de otimização, ele ajuda a monitorar e aprimorar consultas, aumentando a eficiência das análises.
O relatório pode conter as cinco seções abaixo:
Visão geral
Métricas de service SQL
Métricas detalhadas de execução
Análise de SQL Patterns
Otimização e sugestões
Visão geral
Esta seção apresenta a Pontuação de Saúde SQL, Relatório de Uso SQL e Desempenho Geral SQL para avaliar rapidamente o estado das suas consultas.
No topo da página, filtre os resultados pelas listas suspensas ParentAccount, Project e Logstore. A Pontuação de Saúde SQL aparece em destaque. O Relatório de Uso SQL detalha a utilização da análise SQL, informando projetos e Logstores participantes, total de solicitações, recursos mais usados, principais UserAgents, taxa de sucesso e tipos de erro frequentes com sugestões de melhoria. Já a seção Desempenho Geral SQL traz métricas como latência média, P50, P95, volume médio de dados e linhas processadas, linhas retornadas e concorrência média estimada.
Pontuação de saúde SQL
Fórmula da pontuação: (1 - Query failure rate) * 100.
Métricas de service SQL
Esta seção descreve as métricas gerais de service do uso de SQL, incluindo solicitações por minuto (PV), latência média, distribuição de User-Agent e distribuição de latência.
Métricas de execução SQL
Esta parte aborda as métricas centrais da execução interna do SQL, como volume de solicitações simultâneas, latência em cada etapa, volume de dados e linhas processadas por minuto.
Análise de SQL Patterns
Nesta seção, as consultas SQL são processadas via modelos e agregadas em SQL Patterns. Isso facilita a identificação de características, padrões mais executados e aqueles que mais consomem recursos.
A página de análise de SQL Patterns exibe uma tabela com métricas para cada padrão, incluindo project, Logstore, request percentage, average latency, average processed data volume e average processed rows. Ordene por essas métricas para destacar os principais SQL Patterns.
Otimização e sugestões
Esta seção fornece recomendações para melhorar a execução SQL com base na análise de consultas que apresentaram erros.
Monitoramento de recursos faturáveis
O painel Billable Resource Monitoring mostra informações sobre recursos faturáveis do Simple Log Service. Abrange armazenamento quente e frio, tráfego de indexação, tráfego de leitura e gravação, tendências de uso após dedução de planos de recursos, além dos detalhes de uso dos principais projetos e Logstores.
