Générer les définitions CRD et les scripts API pour Logtail - Simple Log Service

Le générateur de configuration Logtail crée automatiquement les définitions CRD AliyunPipelineConfig et les scripts de paramètres API pour les tâches de collecte Logtail, ce qui élimine la configuration manuelle.

Procédure

Connectez-vous à la console Simple Log Service.
Dans la section Projects, cliquez sur le projet souhaité.
Dans le volet de navigation de gauche, cliquez sur > CRD Generator.
Sur la page CRD Generator, sélectionnez un scénario de collecte et configurez Logtail dans le panneau de gauche. Le panneau Preview Configurations situé à droite génère alors un script YAML pour la CRD AliyunPipelineConfig et un objet JSON pour les appels API.
- Scénario de collecte : Les scénarios pris en charge incluent Text Logs pour les hôtes, Kubernetes - File et stdout and stderr - New/Old Version.
- Configuration Logtail : Cliquez sur Import Other Configuration pour importer une configuration existante depuis la page Import Logtail Configuration, ou créez-en une nouvelle.
- Aperçu des configurations :
  - YAML : Génère un script prêt à l'emploi pour créer une configuration Logtail avec une CRD AliyunPipelineConfig.
  - JSON : Génère un objet JSON pour l'opération API CreateLogtailPipelineConfig. Les paires key-value correspondent aux parameters and values de l'appel API.
Le panneau de gauche comprend les Global Configurations (Project Name, Logstore Name, Configuration Name, type de sujet de journal et paramètres avancés) ainsi que les Input Configurations. Pour les journaux textuels, sélectionnez un Logtail deployment mode (DaemonSet ou sidecar) et définissez le chemin du fichier.
Pour utiliser Logtail SPL afin d'analyser les journaux dans une nouvelle configuration, ajoutez d'abord un Log Sample. Lorsque vous Preview les résultats du traitement, vérifiez que le Project Name et le Logstore Name corrects sont définis.

Sur la page Processing Configurations, définissez Processing Mode sur SPL, saisissez une instruction d'analyse telle que * | parse-json content dans l'éditeur SPL Statement, puis cliquez sur Preview.
Copiez le script YAML ou JSON généré et créez une configuration Logtail pour votre scénario.

Scénarios

Journaux textuels

La configuration basée sur les CRD n'est pas prise en charge pour les journaux textuels d'hôte. L'exemple suivant utilise le générateur pour créer une configuration Logtail via un appel API.

Générer les paramètres API : Dans le panneau de gauche de la page du générateur de configuration Logtail, complétez la configuration Logtail ou cliquez sur Import Other Configuration.

Sélectionnez Text Logs comme type de collecte. Dans le panneau de gauche, configurez les Global Configurations (Project Name, Logstore Name, Configuration Name), les Input Configurations (type : text logs, File Path : /data/wwwlogs/**/test.log, Max Directory Watch Depth : 0) et les Processing Configurations (mode Plugin Combination avec le plugin natif RegEx Parser). L'onglet JSON dans Preview Configurations affiche le pipeline complet, y compris inputs (input_file), processors (processor_parse_regex_native) et flushers (flusher_sls).
Appeler une opération API : Le script JSON généré correspond aux paramètres de l'opération CreateLogtailPipelineConfig. Testez l'API dans la console Debugging.

Kubernetes - fichier

Sur la page CRD Generator, cliquez sur Kubernetes - File.
Dans le panneau de gauche, cliquez sur Import Other Configuration pour utiliser une configuration existante, ou créez-en une nouvelle en suivant ces documents :
- Pour collecter des journaux textuels depuis un cluster ACK (Container Service for Kubernetes) où Logtail est déployé en tant que DaemonSet, consultez la rubrique Créer une configuration Logtail dans la console Simple Log Service.
- Pour collecter des journaux textuels depuis un cluster Kubernetes géré par vos soins où Logtail est déployé en tant que DaemonSet, consultez la rubrique Collecter les journaux de conteneurs d'un cluster à l'aide de la console (stdout et stderr/fichiers).
Créez une configuration Logtail.
CRD AliyunPipelineConfig

Utilisez le script YAML issu de Preview Configurations pour créer une configuration Logtail avec une CRD AliyunPipelineConfig :
- Pour collecter des journaux textuels depuis un cluster ACK où Logtail est déployé en tant que DaemonSet, consultez la rubrique [[Recommandé] Utiliser une CRD AliyunPipelineConfig](t2847648.xdita#4da8198751gdi).
- Pour collecter des journaux textuels depuis un cluster Kubernetes géré par vos soins où Logtail est déployé en tant que DaemonSet, consultez la rubrique Collecter les journaux de conteneurs d'un cluster à l'aide de la console (stdout et stderr/fichiers).
API

Le script JSON généré correspond aux paramètres de l'opération CreateLogtailPipelineConfig. Testez l'API dans la console Debugging.

Stdout et stderr - nouvelle/ancienne version

Sur la page CRD Generator, cliquez sur stdout and stderr - New Version ou stdout and stderr - Old Version.
Dans le panneau de gauche, cliquez sur Import Other Configuration pour utiliser une configuration existante, ou créez-en une nouvelle en suivant ces documents :
- Pour collecter les flux stdout et stderr (ancienne version) depuis un cluster ACK où Logtail est déployé en tant que DaemonSet, consultez la rubrique Créer une configuration Logtail dans la console Simple Log Service.
- Pour collecter les flux stdout et stderr (ancienne version) depuis un cluster Kubernetes géré par vos soins où Logtail est déployé en tant que DaemonSet, consultez la rubrique Créer une configuration Logtail dans la console Simple Log Service.
Créez une configuration Logtail.
CRD AliyunPipelineConfig

Utilisez le script YAML issu de Preview Configurations pour créer une configuration Logtail avec une CRD AliyunPipelineConfig :
- Pour collecter les flux stdout et stderr (ancienne version) depuis un cluster ACK où Logtail est déployé en tant que DaemonSet, consultez la rubrique [[Recommandé] Utiliser une CRD AliyunPipelineConfig](t2847860.xdita#7067b8866a2km).
- Pour collecter les flux stdout et stderr (ancienne version) depuis un cluster Kubernetes géré par vos soins où Logtail est déployé en tant que DaemonSet, consultez la rubrique
  
  [[Recommandé] Utiliser une CRD AliyunPipelineConfig](t2848198.xdita#7067b8866a2km).
API

Le script JSON généré correspond aux paramètres de l'opération CreateLogtailPipelineConfig. Testez l'API dans la console Debugging.