CDN:Mejores prácticas para analizar registros en tiempo real de CDN

Descripción general

La función de registros en tiempo real es el resultado de la colaboración entre Alibaba Cloud CDN y Simple Log Service (SLS), y ofrece un procesamiento de registros con baja latencia. Esta función envía los registros de acceso de usuarios desde los puntos de presencia (POP) de Alibaba Cloud CDN a Simple Log Service con una latencia típica de aproximadamente 3 minutos. Posteriormente, puede usar SLS para almacenar y analizar los datos de acceso de usuarios. Cuando utiliza Alibaba Cloud CDN para acelerar su sitio web, el sistema registra los accesos a recursos como imágenes y videos. Puede analizar estos registros para comprender mejor a sus usuarios, supervisar la calidad del acceso o identificar y resolver problemas con rapidez.

Requisitos previos

• Debe haber activado Alibaba Cloud CDN y agregado un nombre de dominio acelerado. Para obtener más información, consulte Activate Alibaba Cloud CDN.

• Debe haber activado Simple Log Service. Para obtener más información, consulte Get started with Simple Log Service.

• Debe haber configurado la entrega de registros en tiempo real para el nombre de dominio acelerado cuyos datos de acceso desea analizar. Para obtener más información, consulte Configure real-time log delivery.

Diferencias entre registros en tiempo real y registros sin conexión

• Latencia de los registros

  Los registros en tiempo real tienen una latencia de tres minutos o menos. Por el contrario, los registros sin conexión suelen presentar una latencia de datos de hasta 24 horas.

• Análisis de registros

  La función de registros en tiempo real integra las capacidades de almacenamiento y análisis de registros de Simple Log Service. Ofrece cuatro informes de análisis predefinidos: Basic Data, Access Errors, Frequently Requested Resources y User Composition. Asimismo, esta función admite el análisis personalizado de registros y proporciona una solución integral para su almacenamiento y análisis. En comparación, los registros sin conexión solo permiten la exportación a Object Storage Service y no cuentan con capacidades de análisis integradas.

Beneficios

• Baja latencia

  Los datos de registro están disponibles en un máximo de tres minutos, lo que le permite analizar rápidamente los registros de acceso, identificar problemas y responder de manera oportuna.

• Servicio integral

  El análisis de registros sin conexión requiere múltiples pasos: debe descargar los registros, cargarlos en un almacén de datos y, posteriormente, limpiar y modelar la información antes de analizarla. Este proceso consume mucho tiempo y esfuerzo. La función de registros en tiempo real integra las capacidades de almacenamiento y análisis de Simple Log Service para simplificar este flujo de trabajo.

Escenarios de uso

Puede utilizar los registros en tiempo real para solucionar problemas en sus nombres de dominio acelerados y comprender los patrones de acceso de los usuarios. La función de registros en tiempo real de Alibaba Cloud CDN proporciona informes predefinidos y admite análisis personalizados para satisfacer diversos requisitos.

Informes predefinidos de análisis de registros

En la página de registros en tiempo real, busque el Project que desea analizar y haga clic en View Report para abrir la página de plantillas de informes.

De forma predeterminada, la página de plantillas de informes muestra datos de todos los nombres de dominio. También puede consultar datos de un nombre de dominio o URI específicos.

Para obtener más información, consulte los siguientes temas:

• Preset report: CDN Basic Data

• Preset report: CDN Access Errors

• Preset report: CDN Frequently Requested Resources

• Preset report: CDN User Composition

• Subscribe to report template data

Análisis personalizado de registros

Si los informes predefinidos no satisfacen sus necesidades, puede aprovechar las potentes funciones de análisis de Simple Log Service para realizar análisis personalizados.

Por ejemplo, puede clasificar los nombres de dominio según el número de solicitudes que devolvieron un código de estado HTTP 499 o 502.

En la página de registros en tiempo real, busque el Project que desea analizar y haga clic en Log analysis para ir a la página de análisis personalizado.

En la página de análisis personalizado, puede introducir una consulta en el cuadro de búsqueda para ejecutar consultas complejas. Para filtros sencillos, haga clic en los campos de registro del panel Raw Logs.

A la derecha de la barra de búsqueda, especifique un intervalo de tiempo mediante el selector de tiempo; por ejemplo, 15 Minutes (Relative). A continuación, haga clic en Query / Analysis para ejecutar la consulta. El panel Quick Analysis, ubicado a la izquierda, enumera los campos de registro filtrables, entre los que se incluyen client_ip, content_type, domain, hit_info y method.

Para obtener más información, consulte Custom reports.

Crear un Project de entrega de registros en tiempo real

Puede crear un Project de Simple Log Service para almacenar los registros en tiempo real de un nombre de dominio acelerado específico, como aliyun.example.com. Para obtener más información, consulte Configure real-time log delivery.

Una vez creado el Project, el nombre del Project será project-example, el nombre del logstore será project-example y la región de almacenamiento de registros será China (Hangzhou) (cn-hangzhou).

Informe predefinido: CDN Basic Data

Este informe le ayuda a comprender la calidad general del servicio de Alibaba Cloud CDN y la eficiencia de acceso para los usuarios finales, incluyendo métricas como la tasa de aciertos de caché, la latencia de acceso y la velocidad de descarga. Esto le permite responder con rapidez ante problemas de calidad del servicio.

Este informe proporciona los siguientes datos, que puede consultar de forma agregada o filtrar por nombre de dominio o URI:

• Estado: porcentaje de solicitudes que devolvieron un código de estado HTTP normal.

• Tasa de aciertos de caché: tasa promedio de aciertos de caché para recursos, calculada en bytes.

• Velocidad de descarga: velocidad promedio de descarga de recursos.

• Estado de acceso: porcentaje de cada código de estado HTTP, útil para comprobar rápidamente la proporción de códigos de estado anómalos.

• Distribución de latencia de acceso: proporción de solicitudes en cada rango de latencia.

• Ancho de banda de solicitudes: valor de ancho de banda con granularidad de un minuto.

• Vistas de página/Visitantes únicos: número total de vistas de página (PV) y visitantes únicos (UV).

• Tasa de aciertos de solicitudes: tasa de aciertos de caché calculada según el número de solicitudes.

• Latencia de acceso: latencia promedio para la descarga de recursos.

Informe predefinido: CDN Access Errors

Este informe facilita la localización rápida del origen de excepciones de acceso, tales como problemas con URI específicas, fallas en el servidor de origen, POP no disponibles o problemas de red en ciertas regiones o con ISP específicos.

Este informe proporciona los siguientes datos, que puede consultar de forma agregada o filtrar por nombre de dominio o URI:

• 10 principales nombres de dominio con errores: nombres de dominio principales clasificados por porcentaje de errores de acceso.

• 10 principales URI con errores: URI principales clasificadas por porcentaje de errores de acceso.

• Porcentaje de errores de solicitud: porcentaje de solicitudes con códigos de estado HTTP 4xx y 5xx a lo largo del tiempo.

• Distribución de solicitudes con error: recuento y proporción de cada código de estado HTTP.

• Errores por ISP: número de solicitudes con códigos de estado HTTP 4xx y 5xx, agrupadas por ISP.

• Errores por provincia: número de solicitudes con códigos de estado HTTP 4xx y 5xx, agrupadas por provincia.

• Detalles de errores (4xx): recuento y proporción de solicitudes con códigos de estado HTTP 4xx, agrupadas por provincia e ISP.

• Detalles de errores (5xx): recuento y proporción de solicitudes con códigos de estado HTTP 5xx, agrupadas por provincia e ISP.

• Distribución de errores por cliente: recuento y proporción de solicitudes con códigos de estado HTTP 4xx y 5xx, agrupadas por User-Agent del cliente.

Informe predefinido: CDN Frequently Requested Resources

Este informe proporciona información sobre los recursos más populares al identificar los principales nombres de dominio, URI, provincias e ISP. Estos datos le ayudan a evaluar la eficacia de las campañas de marketing y a determinar si el tráfico en horas pico cumple con las expectativas, lo que le permite ajustar su estrategia operativa.

Este informe proporciona los siguientes datos, que puede consultar de forma agregada o filtrar por nombre de dominio o URI:

• Principales nombres de dominio por visitas: nombres de dominio principales clasificados por porcentaje del total de visitas.

• Principales nombres de dominio por tráfico de descarga: nombres de dominio principales clasificados por porcentaje del tráfico total de descarga.

• URI solicitadas frecuentemente: número de visitas, visitantes únicos y descargas totales para cada URI.

• Orígenes de acceso populares: principales nombres de dominio de origen Referer, con recuentos de visitas, visitantes únicos y porcentajes.

• Visitas en China continental: número promedio de visitas, agrupadas por provincia.

• Velocidad de descarga nacional: velocidad promedio de descarga para cada provincia.

• Estadísticas por provincia: total de visitas, tráfico total de descarga y velocidad promedio de descarga para cada provincia.

• Tráfico y velocidad por ISP: tráfico total de descarga y velocidad promedio de descarga para cada ISP.

• Estadísticas por ISP: total de visitas, tráfico total de descarga y velocidad promedio de descarga para cada ISP.

Informe predefinido: CDN User Composition

Este informe le permite conocer la composición de la base de usuarios de su sitio web, incluidos los tipos de cliente, provincias e ISP. También identifica a los usuarios principales según el número de visitas o la cantidad de datos descargados.

Este informe proporciona los siguientes datos, que puede consultar de forma agregada o filtrar por nombre de dominio o URI:

• Vistas de página: número total de vistas de página (PV).

• Visitantes únicos: número total de visitantes únicos (UV).

• Distribución por región de origen: número y proporción de visitas desde cada provincia.

• Visitas por cliente: número y proporción de visitas desde cada tipo de cliente.

• Visitas por ISP: número y proporción de visitas desde cada ISP.

• Principales usuarios por descargas: total de visitas, visitas con error y descargas totales para cada dirección IP de usuario.

• Principales usuarios por visitas válidas: total de visitas, visitas con error y descargas totales para cada dirección IP de usuario, excluyendo solicitudes no válidas (aquellas con códigos de estado 4xx y 5xx).

Suscribirse a datos de plantillas de informes

Mediante la función de suscripción, puede configurar Simple Log Service para que le envíe periódicamente datos de una plantilla de informe.

Procedimiento

1. Por ejemplo, en la página CDN Basic Data, haga clic en Subscribe en la esquina superior derecha y, a continuación, haga clic en Create. En el panel de navegación izquierdo de la consola de CDN, seleccione Log Management. En la página Log Reports, haga clic en el botón Subscribe situado en la esquina superior derecha.

2. En el panel que aparece, configure Subscription Name, Frequency y Global Time, y luego haga clic en Next.

3. En la lista desplegable Notification List, seleccione un método de notificación, especifique la información obligatoria y haga clic en Submit.

   Los métodos de notificación compatibles incluyen correo electrónico, WebHook-DingTalk Bot, WebHook-Feishu Chat Bot, Webhook-WeCom Bot y WeChat.

Informes personalizados

• Ejemplo 1: Consultar los principales nombres de dominio con más códigos de estado HTTP 499 en los últimos 30 días.

  Consulta de análisis de registros: return_code = 499| select domain , count(*) as c group by domain order by c desc limit 10

• Ejemplo 2: Consultar los principales nombres de dominio con más códigos de estado HTTP 502 en los últimos 30 días.

  Consulta de análisis de registros: return_code = 502| select domain , count(*) as c group by domain order by c desc limit 10

• Ejemplo 3: Consultar datos de registro para la URI /cpu correspondientes a los últimos 30 días.

  En el panel Raw Logs, haga clic en el campo URI y, a continuación, haga clic en /cpu para filtrar los registros.

  Tras aplicar el filtro, la barra de búsqueda genera automáticamente la consulta * and uri : "/cpu". El panel Quick Analysis de la izquierda muestra que el campo uri con el valor /cpu representa el 53 % de los resultados.