ApsaraMQ for Kafka:Filebeat

Filebeat

Filebeat adalah pengirim ringan yang digunakan untuk meneruskan dan memusatkan data log. Filebeat dapat memantau file log atau lokasi tertentu, mengumpulkan peristiwa log, dan meneruskannya ke Elasticsearch atau Logstash untuk diindeks. Berikut adalah cara kerja Filebeat:

1. Filebeat memulai satu atau lebih input untuk mencari data log di lokasi yang telah ditentukan.

2. Filebeat memulai harvester untuk setiap log yang ditemukannya. Setiap harvester membaca satu log dan mengirim data log tersebut ke libbeat.

3. libbeat menggabungkan data tersebut dan mengirimkannya ke output yang telah dikonfigurasi.

Manfaat

Menghubungkan ApsaraMQ for Kafka ke Filebeat memberikan manfaat berikut:

• Pemrosesan asinkron: Mencegah lonjakan lalu lintas.

• Penguraian aplikasi: Memastikan bahwa pengecualian hilir tidak mempengaruhi hulu.

• Pengurangan overhead: Mengurangi overhead sumber daya Filebeat.

Metode koneksi

Anda dapat menghubungkan ApsaraMQ for Kafka ke Filebeat menggunakan metode berikut:

• VPC

  • Hubungkan instance Message Queue for Apache Kafka ke Filebeat sebagai input dalam virtual private cloud (VPC)

  • Hubungkan instance ApsaraMQ for Kafka ke Filebeat sebagai output dalam virtual private cloud (VPC)

• Internet

  • Hubungkan instance ApsaraMQ for Kafka ke Filebeat sebagai input melalui Internet

  • Hubungkan instance ApsaraMQ for Kafka ke Filebeat sebagai output melalui Internet