Simple Log Service:Historique des versions de LoongCollector

Modifications incompatibles

• Le plugin de sortie obsolète flusher_kafka a été supprimé. Les configurations de collecte utilisant encore flusher_kafka cesseront de fonctionner après la mise à niveau vers la version 3.3.10, car le plugin n'est plus enregistré. Migrez vers flusher_kafka_v2 avant d'effectuer la mise à niveau.

Nouvelles fonctionnalités

• Le plugin input_agentsight intègre l'option RawHttpsFallback pour la signalisation de secours HTTPS brute. Cette option est désactivée par défaut. Le trafic HTTPS qui ne peut pas être analysé comme un appel LLM standard, et qui serait autrement ignoré, est signalé sous forme d'événements de requête et de réponse HTTP bruts afin d'améliorer l'observabilité du trafic LLM non standard.

Corrections

• Correction d'un problème où les métadonnées des libellés Kubernetes n'étaient pas actualisées rapidement après une reconstruction sur place d'un Pod.

• Amélioration de la précision des mesures RTT ICMP pour la sonde réseau (netping). Les latences inférieures à la milliseconde sont désormais prises en charge et l'adresse source configurée est liée aux sondes pour améliorer la précision de la détection.

• Correction d'un problème où AgentSight écrasait le nom de l'appel d'outil (tool_call) avec une valeur vide lors de la collecte de données provenant de certains modèles, tels que les réponses en streaming compatibles OpenAI. Le nom signalé était donc vide.

• Correction d'un problème où le champ host_ip était signalé incorrectement dans les configurations de collecte Prometheus.

Améliorations

• Renforcement des contrôles d'intégrité des demandes de configuration et validation de l'identifiant de compte (aliuid).

Nouvelles fonctionnalités

• Ajout du plugin eBPF input_agentsight pour fournir des capacités de collecte d'observabilité LLM.

• Le plugin d'entrée service_syslog intègre l'option AutoConfigRsyslog qui génère et vérifie automatiquement les configurations de transfert rsyslog, et prend en charge le filtrage par facility et severity.

• Le plugin de collecte Prometheus prend désormais en charge la plateforme Windows.

• Assouplissement des restrictions de combinaison entre les plugins d'entrée natifs et les plugins Go. Les plugins d'entrée natifs peuvent désormais être librement combinés avec les processeurs et plugins de sortie Go. Auparavant, ces configurations échouaient lors de l'analyse. Seules quelques combinaisons incompatibles restent restreintes.

• Ajout du paramètre working_interface Vous pouvez spécifier une interface réseau pour résoudre l'IP hôte et utiliser la même interface comme interface de sortie pour les données. Cela résout les problèmes de signalement inexact de l'IP hôte causés par la résolution du nom d'hôte renvoyant une adresse incorrecte ou une adresse de bouclage.

Corrections

• Correction d'un plantage du processus (SIGSEGV) pouvant survenir avec les anciennes versions d'OpenSSL antérieures à 1.1.0 lors de requêtes HTTP concurrentes multithread.

• Correction d'un problème entraînant une augmentation continue de l'utilisation de la mémoire dans les clusters Kubernetes à grande échelle lorsque les nœuds et les ressources changeaient fréquemment lors de la collecte des métadonnées.

• Correction d'une erreur d'analyse de l'heure des journaux survenant lorsque la chaîne temporelle contenait des caractères de fin ne correspondant pas à la chaîne de format, tels qu'un suffixe de fuseau horaire (+08:00).

Améliorations

• Amélioration de la détection des modifications de fichiers et de la logique de sortie en mode whole_file.

Nouvelles fonctionnalités

• Ajout du plugin d'entrée service_etw pour prendre en charge la collecte ETW analytique DNS Windows. Le plugin capture les événements de requête et de réponse DNS en temps réel via une session de consommation ETW indépendante.

Nouvelles fonctionnalités

• Le générateur d'entités Kubernetes prend désormais en charge les ressources personnalisées (CR) et la modélisation des associations entre les workflows Argo et les namespaces, étendant ainsi les capacités de topologie des entités Kubernetes.

Nouvelles fonctionnalités

• Les journaux multilignes (multiline) ajoutent le mode whole_file qui collecte un fichier entier comme une seule entrée de journal. Si le journal est trop long, il est automatiquement divisé par champ. Ce mode s'applique aux scénarios nécessitant que tout le contenu du fichier soit traité comme un seul enregistrement.

Améliorations

• Mise à niveau du moteur de traitement SPL.

• Amélioration de la logique de résolution nom d'hôte vers IP pour ignorer les interfaces réseau figurant sur la liste noire pendant la résolution. Auparavant, sur les hôtes disposant de plusieurs interfaces réseau ou de cartes NIC virtuelles, l'IP hôte pouvait être résolue vers une adresse de carte NIC virtuelle, ce qui entraînait un signalement inexact. La précision de l'identification de l'IP hôte est désormais améliorée.

Nouvelles fonctionnalités

• Ajout d'un pipeline de secours pour la surveillance de l'hôte en cas d'indisponibilité du pipeline principal.

• Déplacement du paramètre force_release_deleted_file_fd_timeout vers le module Golang CRI pour forcer la libération des descripteurs de fichiers des conteneurs supprimés après un délai d'attente.

• Ajout de l'indicateur disable_identity_detect pour ignorer les processus de détection d'identité, tels que l'acquisition des métadonnées ECS. Cela s'avère utile pour les déploiements ne nécessitant pas de reconnaissance d'identité cloud.

Corrections

• Correction de plusieurs conditions de concurrence dans le module ContainerManager C++ survenant lors des mises à jour des informations des conteneurs et des contentions de verrouillage.

Corrections

• Correction d'une fuite de descripteurs de fichiers causée par l'exécution double de l'opération pop_front sur le tableau de lecteurs lors de la gestion des événements, empêchant la libération correcte des descripteurs de fichiers.

• Correction d'une exception SPL v2.11.6 sur les clés vides : les champs de valeur null dans PipelineEventGroupOutput utilisaient une logique conditionnelle incorrecte.

• Correction d'une résolution incorrecte des chemins de liens symboliques en mode Copy Truncate après une mise à niveau depuis un point de contrôle plus ancien. Les anciens points de contrôle stockaient le chemin du lien symbolique, et non le chemin réel, ce qui rompait la correspondance des fichiers.

Corrections

• Correction d'un plantage du processus (signal 6) survenant lors de la détection des périphériques GPU.

• Correction d'une condition de concurrence dans le destructeur de l'exécuteur de surveillance de l'hôte lorsqu'un redémarrage s'exécutait avant la fin de l'arrêt précédent (comportement indéfini). Ajout d'une vérification de l'état d'arrêt et d'un indicateur de sortie forcée pour une gestion sécurisée du cycle de vie des threads.

• Correction d'un pointeur null provoquant un panic dans le plugin Go lors de l'exportation des métriques lorsque ExportMetricRecords recevait un Context ou des MetricsRecords nil. Ajout d'une vérification nil pour ignorer les enregistrements invalides.

Améliorations

• Mise à niveau du moteur SPL vers la version v2.11.6 et de l'image de build vers la version v2.1.14.

Nouvelles fonctionnalités

• L'observabilité réseau eBPF analyse désormais les requêtes et réponses MySQL et exporte des métriques, des journaux et des spans pour une visibilité au niveau du protocole de la couche application.

• Le service Forward émet désormais des métriques d'auto-surveillance pour sa propre santé et son fonctionnement.

• La gestion Onetime Config suit désormais les hachages d'entrée et applique des délais d'exécution afin que les exécutions soient retentées en cas de modification du contenu et que les configurations expirées soient automatiquement effacées.

• Ajout de la prise en charge de la configuration des sous-domaines et rationalisation de la gestion des en-têtes de requête HTTP.

Corrections

• Correction d'un problème où la sonde de domaine de l'édition Enterprise ignorait le cache DNS, déclenchant des recherches supplémentaires et augmentant la latence.

• Correction des nouvelles tentatives immédiates après les réponses HTTP 401. Ajout d'un backoff d'une seconde pour réduire les rafales de requêtes invalides.

• Correction d'un problème où la surveillance de l'hôte ne comptait que les cinq premiers processus au lieu de tous les processus, faussant ainsi les métriques.

• Correction d'un interblocage StaticFileServer en supprimant un mutex inutile lors de la suppression de l'entrée, afin que le pipeline de fichiers statiques ne se bloque plus.

• Réduction de la fréquence des appels à l'API TagResources pour éviter le déclenchement de la limitation de débit.

Améliorations

• Remplacement du moteur regex par regexp2 pour le filtrage stdout Docker basé sur Go afin d'améliorer la compatibilité et les performances de la correspondance regex.

• Définition de ForceRerunWhenUpdate dans PipelineConfig sur false par défaut (auparavant true) pour éviter les redémarrages inutiles du pipeline et les lacunes de collecte lors des mises à jour de configuration.

Corrections

• Correction d'un problème entraînant la perte de journaux lorsque la file d'attente du processus était bloquée.

Améliorations

• Passage du module de correspondance des métadonnées de conteneur C++ de regex_match à regex_search pour prendre en charge les configurations existantes.

• Ajout d'un ID hôte aux données d'auto-surveillance.

• Amélioration de l'actualisation du chemin réel et de la détection de rotation dans StaticFileServer.

3.2.5

Tag de l'image : v3.2.5.0-355f573-aliyun

Date de publication : 2025-12-08

Nouvelles fonctionnalités

• Mise à niveau de Go vers la version 1.23.12 et mise à jour du SDK Docker Go.

Corrections

• Correction d'un problème empêchant l'envoi des données de surveillance de l'hôte depuis le tampon disque.

• Résolution d'un bug dans le calcul de l'utilisation moyenne du CPU pour les processus.

• Correction d'un problème où input_file échouait sur Docker v29 et versions ultérieures.

• Correction d'une condition de concurrence dans le futur Prometheus.

Nouvelles fonctionnalités

• Ajout du processeur ProcessorTimestampFilterNative pour le filtrage natif des horodatages.

• Activation de la surveillance GPU dans le pipeline HostMonitor intégré.

Corrections

• Suppression des entrées invalides du collecteur GPU.

• Amélioration de la gestion des erreurs et de la journalisation pour la file d'attente du vidage (flusher) et de l'expéditeur.

• Suppression du protocole pb non pris en charge pour le scraping Prometheus.

Améliorations

• Meilleure prise en charge des changements d'état des conteneurs et compatibilité avec les anciens formats de points de contrôle.

• Amélioration de la compatibilité pour la collecte des métriques réseau.

• Suppression de l'index des événements de journal pour améliorer l'efficacité.

• Ajout d'une métrique de taux de récupération au moniteur de pipeline.

Nouvelles fonctionnalités

• Activation de la surveillance GPU dans le pipeline HostMonitor intégré.

• Ajout de métriques d'autosurveillance pour la surveillance de l'hôte.

• input_file prend désormais en charge la collecte à partir de plusieurs chemins.

• Le vidage SLS (SLS flusher) permet désormais d'ajouter des en-têtes et des métadonnées supplémentaires.

• Prometheus prend désormais en charge un mode de scraping limité à l'hôte.

Corrections

• Suppression des entrées invalides du collecteur GPU.

• Correction d'un bug empêchant le collecteur de disque de récupérer les données des disques non montés.

• Correction d'un plantage dans le collecteur de processus.

• Correction d'un problème où FileServer n'était pas mis en pause lors du changement de type d'entrée.

• Résolution d'un problème empêchant la création d'un lecteur pour un fichier lien symbolique.

• Correction d'un problème où un événement unique n'était pas renvoyé au pool d'événements.

• Correction d'une erreur dans ConfigWatcherUnittest.

• Correction d'une erreur de calcul pour la métrique config_count.

• Résolution d'un problème de boucle de conflit singleton.

• Correction d'un problème lié aux mises à jour des métadonnées ECS.

Améliorations

• Amélioration des performances de sérialisation et de désérialisation des spans.

• Réduction des copies de chaînes lors de la surveillance de l'hôte.

• Ajout d'un mécanisme de recuit temporel au module d'ajustement de la concurrence.

• Ajout d'une logique de délai d'expiration au code de contrôle de concurrence pour éviter les nouvelles tentatives fréquentes.

• Amélioration de la gestion des erreurs et de la journalisation pour la file d'attente du vidage (flusher) et de l'expéditeur.

• Optimisation de la gestion des files d'attente grâce à l'ajout d'une logique de nouvelle tentative et de métriques.

• Signalement des métriques process_queue au pipeline.

• Ajout d'un tag cible à la file d'attente de l'expéditeur.

• Ajout d'une limitation de débit à MetricSender pour éviter que extraBuffer ne soit saturé.

• Résolution d'un problème de dérive temporelle Go survenant lorsque les tâches étaient lentes.

• Correction d'un problème provoquant la présence d'éléments en double dans regionconfig.

Nouvelles fonctionnalités

• Ajout d'un collecteur de métriques GPU basé sur NVIDIA Data Center GPU Manager (DCGM).

• Intégration du signalement des métriques dans StaticFileServer.

• Ajout d'un pipeline intégré pour signaler les métadonnées des conteneurs.

• input_static_file_onetime prend désormais en charge le signalement de l'état des tâches.

• Ajout d'un compteur retry_total au vidage SLS (SLS flusher).

Corrections

• Correction d'un problème où les lecteurs n'étaient pas nettoyés lors de la suppression d'un fichier, ce qui entraînait une troncature lors de la réutilisation de l'inœud.

• Correction des problèmes de compilation sous Windows.

• Résolution d'un échec de chargement dû à un format incorrect dans le vidage des informations de région.

• Correction d'un problème lié aux piles d'appels lors des plantages sous Windows.

• Correction d'un plantage sous Windows survenant lorsque ExcludeDirs contenait des caractères chinois.

• Correction d'un problème de gestion du répertoire de travail actuel (cwd) pour les chemins de montage bind dans l'entrée de sécurité.

Améliorations

• Activation du signalement de l'état des tâches.

• Ajout des statistiques des plugins aux métriques d'état.

• Enrichissement des métadonnées ECS avec davantage d'informations.

• Ajout des métadonnées ECS aux métriques d'état.

• Migration de la logique de correspondance des métadonnées des conteneurs vers une implémentation C++.

Nouvelles fonctionnalités

• Activation de input_static_file_onetime et ajout de tests de bout en bout (E2E) de base.

• Ajout de configurations internes pour la surveillance de l'hôte.

• Intégration de la bibliothèque simdjson pour l'analyse JSON haute performance.

• LoongCollector prend désormais en charge l'authentification RAM.

Corrections

• Correction de plusieurs problèmes liés à la gestion des plugins eBPF et au traitement des événements.

• Résolution d'un problème de concurrence dans la classe Timer entraînant la perte de points de surveillance.

• Correction de la logique de lecture de fichier dans InitFromFile.

• Correction d'un problème de limitation de débit dans l'exécuteur de vidage (flusher runner).

• Correction d'un problème empêchant le collecteur réseau d'obtenir les informations IPv6.

• Correction d'une fuite de mémoire dans le collecteur de processus.

• Correction d'un problème provoquant la troncature inattendue des fichiers par la fonction ParseConfig.

• Correction d'une fuite de descripteurs de fichier dans les conteneurs lors de la restauration d'un lecteur à partir d'un point de contrôle.

• Ajout d'un cache GetFileSystemInformation pour le collecteur de disque.

• Ajout de tests E2E pour la collecte de fichiers eBPF.

• Correction des problèmes de compilation pour l'édition commerciale sous Windows et mise à jour du manuel de publication.

Améliorations

• Garantie de la cohérence des données entre plusieurs pipelines de surveillance de l'hôte.

• Ajout d'avertissements et d'alertes en cas de perte potentielle de données dans LogFileReader.

• Réduction de la création de groupes pour optimiser l'utilisation de la mémoire.

• Optimisation de l'empreinte mémoire des entités de métadonnées Kubernetes.

• Utilisation de string view pour améliorer les performances d'analyse des chaînes.

• Renommage des indicateurs de métriques dans MetricSender.cpp.

Nouvelles fonctionnalités

• Ajout des informations ECS, y compris pour ACS et ECI, aux métriques de l'agent.

• Ajout d'une métrique indiquant la limite actuelle du throttler.

Corrections

• Correction d'un problème où les lecteurs n'étaient pas nettoyés lors de la suppression d'un fichier, ce qui entraînait des problèmes de troncature lors de la réutilisation de l'inœud.

• Correction d'un problème lié aux piles d'appels lors des plantages sous Windows.

• Correction d'un plantage sous Windows survenant lorsque ExcludeDirs contenait des caractères chinois.

• Correction des problèmes de compilation pour l'édition commerciale sous Windows et mise à jour du manuel de publication.

Améliorations

• Ajout des métadonnées ECS aux métriques d'état.

Corrections

• Correction des problèmes liés à la gestion des plugins eBPF et au traitement des événements.

• Correction de la logique de lecture des métadonnées à partir du fichier hôte.

• Résolution d'un problème de limitation de débit inattendu dans l'exécuteur de vidage (flusher runner).

Améliorations

• Ajout d'alertes et d'avertissements en cas de perte de données dans LogFileReader.

• Ajout des informations ECS, y compris pour ACS et ECI, aux métriques de l'agent.

• Ajout d'un compteur de nouvelles tentatives au vidage SLS (SLS flusher).

Corrections

• Correction d'un problème de troncature de fichier dans la fonction ParseConfig.

• Correction d'un problème de libération des descripteurs de fichier des conteneurs lors de la restauration à partir d'un point de contrôle.

• Correction d'un problème entraînant la désinstallation inattendue du pipeline intégré.

• Correction d'un problème où le feedback provoquait la suppression des événements expirés.

Améliorations

• Optimisation de l'empreinte mémoire des entités de métadonnées Kubernetes.

Nouvelles fonctionnalités

• Ajout du support pour l'obtention d'informations d'exécution depuis le noyau.

• Ajout du préfixe de variable d'environnement LOONG_, tout en maintenant la rétrocompatibilité avec ALIYUN_.

Corrections

• Correction d'un problème où l'autosurveillance était absente pour les entrées du pipeline v2.

• Correction d'un problème de sécurité mémoire lié aux valeurs du cache des processus.

• Amélioration des avertissements concernant les délais d'expiration et les expressions régulières de largeur nulle pour les processeurs Desensitize, Grok et StringReplace.

Améliorations

• Amélioration des performances de la collecte de fichiers eBPF.

• EntityCollector prend désormais en charge les versions antérieures de K8s (1,21 et précédentes).

• Ajout d'un tampon source supplémentaire à PipelineEventGroup.

Nouvelles fonctionnalités

• Ajout de ProcessCollector.

• Ajout de NetCollector.

Corrections

• Correction d'un problème provoquant une collecte de données en double lors de la restauration de la progression à partir d'anciens points de contrôle.

Améliorations

• Amélioration des performances de l'analyse regex multithread.

• Optimisation de la transmission des métadonnées K8s via protobuf.

• Modification de l'implémentation du collecteur CPU.

• NetworkObserver prend désormais en charge plusieurs configurations.

• Les plugins eBPF utilisent désormais uniformément epoll pour obtenir les données.

• Ajout de la vérification de type pour les modifications de configuration.

• Ajout des niveaux d'alerte aux informations d'alerte.