Container Service for Kubernetes：Gunakan Prometheus open source untuk memonitor cluster ACK

Langkah 1: Terapkan Prometheus open source

1. Masuk ke Konsol ACK. Di panel navigasi di sebelah kiri, klik Clusters.

2. Pada halaman Clusters, temukan kluster yang diinginkan dan klik namanya. Di panel navigasi di sebelah kiri, pilih Applications > Helm.

3. Pada halaman Helm, klik Deploy. Di bagian Chart dari panel Deploy, temukan dan pilih ack-prometheus-operator, gunakan nilai default untuk parameter lainnya, dan klik Next.

   • Bagan akan diinstal di namespace monitoring secara default menggunakan nama aplikasi default.

   • Untuk menggunakan nama dan namespace kustom, konfigurasikan parameter Application Name dan Namespace di langkah Basic Information.

4. Pada halaman wizard Parameters, pilih 12.0.0 untuk versi bagan, konfigurasikan parameter, lalu klik OK. Bagan 12.0.0 mendukung konfigurasi alarm. Anda dapat menetapkan kondisi pemantauan dan alarm menggunakan fungsi bawaan.

   Anda dapat menyesuaikan parameter opsional berikut berdasarkan kebutuhan bisnis Anda:

   • Konfigurasi Alarm: Notifikasi alarm dapat dikirim menggunakan pesan DingTalk atau email.

   • Mount ConfigMap Kustom ke Prometheus: Anda dapat mengonfigurasi ConfigMap kustom berdasarkan kebutuhan bisnis Anda.

   • Mount File Dasbor ke Grafana: Anda dapat menggunakan dasbor kustom untuk meningkatkan visualisasi data.

   Setelah penyebaran selesai, Anda dapat melihat status aplikasi di halaman Helm.

Langkah 2: Lihat tugas pengumpulan data Prometheus

1. Masuk ke Konsol ACK. Di panel navigasi di sebelah kiri, klik Clusters.

2. Pada halaman Clusters, temukan kluster yang diinginkan dan klik namanya. Di panel sebelah kiri, pilih Network > Services.

3. Pada halaman Services, pilih namespace tempat ack-prometheus-operator diterapkan (monitoring secara default). Temukan ack-prometheus-operator-prometheus dan klik Update di kolom Actions.

4. Di kotak dialog Update Service, atur Service Type menjadi SLB. Pilih Create Resource dan atur Access Method menjadi Public Access. Pilih Pay-as-you-go (Pay-by-CU) untuk parameter Billing Method, konfigurasikan parameter lainnya sesuai kebutuhan, dan klik OK.

   Lihat Penagihan Classic Load Balancer (CLB) untuk detail lebih lanjut.

5. Setelah pembaruan selesai, salin alamat IP eksternalnya, dan akses Prometheus dengan memasukkan Alamat IP: nomor port di bilah alamat browser. Contoh: 47.XX.XX.12:9090.

6. Di bilah navigasi atas halaman Prometheus, pilih Status > Targets untuk melihat semua tugas pengumpulan data. Tugas dalam status UP berjalan dengan baik.

   

7. Untuk melihat aturan alarm, klik Alerts di bilah navigasi atas.

   

Langkah 3: Lihat Data Agregat Grafana

1. Masuk ke Konsol ACK. Di panel navigasi di sebelah kiri, klik Clusters.

2. Pada halaman Clusters, temukan kluster yang diinginkan dan klik namanya. Di panel sebelah kiri, pilih Network > Services.

3. Pada halaman Services, pilih namespace tempat deployment ack-prometheus-operator diterapkan (secara default monitoring). Temukan ack-prometheus-operator-prometheus dan klik Update di kolom Actions.

4. Di kotak dialog Update Service, atur Service Type menjadi SLB. Pilih Create Resource dan atur Access Method menjadi Public Access. Pilih Pay-as-you-go (Pay-by-CU) untuk parameter Billing Method, konfigurasikan parameter lainnya sesuai kebutuhan, dan klik OK.

   Lihat Penagihan CLB untuk detail lebih lanjut.

5. Setelah pembaruan selesai, salin alamat IP eksternalnya, dan akses Grafana dengan memasukkan Alamat IP: nomor port di bilah alamat browser. Secara default, nomor port adalah 80. Contoh: 47.XX.XX.12:80.

   

Konfigurasi Alarm

Anda dapat mengonfigurasi prometheus-operator untuk mengirim notifikasi alarm menggunakan pesan DingTalk atau email:

1. Masuk ke Konsol ACK. Di panel navigasi di sebelah kiri, klik Clusters.

2. Pada halaman Clusters, temukan kluster yang diinginkan dan klik namanya. Di panel navigasi di sebelah kiri, pilih Applications > Helm.

3. Pada halaman Helm, klik Deploy. Di langkah Basic Information, temukan dan pilih ack-prometheus-operator di bagian Chart, konfigurasikan parameter lainnya sesuai kebutuhan, dan klik Next. Di langkah Parameters, konfigurasikan parameter alarm berdasarkan konten berikut:

   Jika ack-prometheus-operator sudah terpasang, klik namanya dari daftar di halaman Helm, dan klik tab Parameters untuk mengonfigurasi.

   • Konfigurasikan Notifikasi DingTalk

     1. Temukan bidang dingtalk di file konfigurasi dan atur enabled menjadi true.

     2. Masukkan URL webhook chatbot DingTalk Anda di bidang token. Untuk informasi lebih lanjut tentang cara mendapatkan URL webhook, lihat Skenario 3: Implementasikan pemantauan dan peringatan Kubernetes dengan chatbot DingTalk.

     3. Di bagian alertmanager, temukan parameter receiver di bidang config, dan masukkan nama chatbot DingTalk yang Anda tentukan untuk bidang receivers. Secara default, webhook digunakan.

        Contoh Konfigurasi Beberapa Chatbot DingTalk

        Jika Anda memiliki dua chatbot DingTalk, lakukan langkah-langkah berikut:

        1. Ganti nilai di bidang token.

           Ganti URL webhook dengan alamat dingtalk1 dan dingtalk2 masing-masing. Dalam contoh ini, ganti URL https://oapi.dingtalk.com/robot/send?access_token=xxxxxxxxxx di gambar berikut dengan alamat webhook aktual Anda.

           

        2. Ubah receivers.

           Di bagian alertmanager, cari parameter receiver pada bidang config, lalu masukkan nama chatbot DingTalk yang telah ditentukan untuk bidang receivers. Dalam contoh ini, digunakan webhook1 dan webhook2.

        3. Ubah parameter url.

           Ganti nilai parameter url dengan nama chatbot DingTalk Anda. Dalam contoh ini, dingtalk1 dan dingtalk2 digunakan.

           

        Catatan

        Untuk menambahkan lebih banyak chatbot DingTalk, tambahkan lebih banyak URL webhook.

   • Konfigurasikan Notifikasi Email

     • Masukkan detail alamat email Anda di kotak merah pada gambar berikut.

     • Temukan bidang config di bagian alertmanager dari file konfigurasi, temukan receiver dan masukkan email yang Anda definisikan di bidang receivers. Secara default, mail digunakan.

       

   • Tetapkan Template Notifikasi Alarm

     Anda dapat menyesuaikan template notifikasi alarm di bidang templateFiles dari bagian alertmanager, seperti yang ditunjukkan pada gambar berikut:

Mount ConfigMap Kustom ke Prometheus

Bab ini menjelaskan cara memasang file konfigurasi melalui ConfigMap bernama special-config di Prometheus, dan meneruskannya menggunakan parameter --config.file saat startup pod.

1. Buat ConfigMap.

   Lihat Isi ConfigMap

   apiVersion: v1
   kind: ConfigMap
   metadata:
     name: special-config
   data:
     config.yaml: |-
       global:
         # Interval scrape. Nilai default: 1 menit.
         [ scrape_interval: <durasi> | default = 1m ]
         
         # Periode timeout scrape. Nilai default: 10 detik.
         [ scrape_timeout: <durasi> | default = 10s ]
         
         # Interval evaluasi aturan. Nilai default: 1 menit.
         [ evaluation_interval: <durasi> | default = 1m ]
   
       # Konfigurasi scrape
       scrape_configs:
       [ - <scrape_config> ... ]
   
       # Konfigurasi aturan
       rule_files:
       [ - <filepath_glob> ... ]
   
       # Konfigurasi alarm
       alerting:
         alert_relabel_configs:
         [ - <relabel_config> ... ]
         alertmanagers:
         [ - <alertmanager_config> ... ]

2. Mount ConfigMap.

   Di langkah Parameters, tambahkan konten berikut ke bidang configmaps untuk memasang ConfigMap yang ditentukan ke jalur /etc/prometheus/configmaps/ di pod Prometheus.

   

   Gambar berikut menunjukkan contoh konfigurasi bidang configmaps di bagian prometheus:

   

Konfigurasikan Grafana

Mount File Konfigurasi Dasbor ke Grafana

Aktifkan Persistensi Data untuk Dasbor

Untuk mengekspor dasbor secara lokal, simpan dasbor target sebagai file JSON ke mesin lokal Anda. Untuk detail lebih lanjut, lihat Ekspor Dasbor sebagai JSON.

1. Masuk ke Konsol ACK. Di panel navigasi di sebelah kiri, klik Clusters.

2. Pada halaman Clusters, temukan kluster yang ingin Anda kelola dan klik namanya. Di panel sebelah kiri, pilih Applications > Helm.

3. Temukan ack-prometheus-operator, klik Update di kolom Actions, dan konfigurasikan bidang persistence di bagian grafana seperti yang ditunjukkan pada gambar berikut:

   

Operasi Terkait

Hapus Komponen Prometheus Open Source

Periksa versi Helm chart dari komponen Prometheus open source dan lakukan langkah-langkah berikut untuk menghapus komponen Prometheus open source. Ini membantu Anda mencegah sumber daya residu dan pengecualian yang tidak terduga. Anda perlu secara manual menghapus Helm release terkait, namespace, CustomResourceDefinitions (CRD), dan layanan kubelet.

Jika layanan kubelet tidak dapat dihapus secara otomatis saat Anda menghapus komponen ack-prometheus-operator, lihat bagian berikut. Untuk informasi lebih lanjut tentang masalah ini, lihat #1523.

Konfigurasikan Penindasan Alarm

Anda dapat menindas alarm tertentu dengan mengonfigurasi aturan senyap. Saat alarm sesuai dengan kondisi aturan, notifikasi akan ditahan sampai periode senyap berakhir atau aturan dihapus secara manual.

FAQ

Apa yang harus saya lakukan jika gagal menerima notifikasi alarm DingTalk?

1. Dapatkan URL webhook chatbot DingTalk Anda. Untuk informasi lebih lanjut, lihat Pemantauan Event.

2. Di halaman wizard Parameter, temukan bagian dingtalk, atur enabled menjadi true, dan kemudian tentukan URL webhook chatbot DingTalk Anda di bidang token. Untuk informasi lebih lanjut, lihat Configure DingTalk alert notifications di Konfigurasi Alarm.

Apa yang harus saya lakukan jika muncul pesan kesalahan saat saya menerapkan prometheus-operator di kluster?

Tidak dapat menginstal rilis dengan kesalahan: rpc error: code = Unknown desc = objek sedang dihapus: customresourcedefinitions.apiextensions.k8s.io "xxxxxxxx.monitoring.coreos.com" sudah ada

kubectl delete crd prometheuses.monitoring.coreos.com
kubectl delete crd prometheusrules.monitoring.coreos.com
kubectl delete crd servicemonitors.monitoring.coreos.com
kubectl delete crd alertmanagers.monitoring.coreos.com

Apa yang harus saya lakukan jika gagal menerima notifikasi alarm email?

Pastikan nilai dari smtp_auth_password adalah kode otorisasi SMTP bukan kata sandi logon akun email. Pastikan endpoint server SMTP mencakup nomor port.

Apa yang harus saya lakukan jika konsol menampilkan pesan kesalahan berikut setelah saya klik Perbarui untuk memperbarui template YAML:Kluster saat ini sementara tidak tersedia. Coba lagi nanti atau ajukan tiket?

Jika file konfigurasi Tiller terlalu besar, kluster tidak dapat diakses. Untuk menyelesaikan masalah ini, Anda dapat menghapus beberapa anotasi di file konfigurasi dan mount file tersebut ke pod sebagai ConfigMap. Anda dapat menentukan nama ConfigMap di bidang configMaps dari bagian prometheus dan alertmanager. Untuk informasi lebih lanjut, lihat metode kedua di Mount ConfigMap ke Prometheus.

Bagaimana cara mengaktifkan fitur prometheus-operator setelah saya menerapkannya di kluster?

Setelah prometheus-operator diterapkan, Anda dapat melakukan langkah-langkah berikut untuk mengaktifkan fitur prometheus-operator. Buka halaman detail kluster dan pilih Applications > Helm di panel navigasi sebelah kiri. Pada halaman Helm, temukan ack-prometheus-operator dan klik Update di kolom Tindakan. Di panel Perbarui Rilis, konfigurasikan blok kode untuk mengaktifkan fitur. Lalu, klik OK.

Bagaimana cara memilih penyimpanan data: TSDB atau disk?

Apa yang harus saya lakukan jika dasbor Grafana gagal menampilkan data dengan benar?

Buka halaman detail kluster dan pilih Applications > Helm di panel navigasi sebelah kiri. Pada halaman Helm, temukan ack-prometheus-operator dan klik Update di kolom Tindakan. Di panel Perbarui Rilis, periksa apakah nilai dari bidang clusterVersion benar. Jika versi Kubernetes kluster Anda lebih awal dari 1.16, atur clusterVersion menjadi 1.14.8-aliyun.1. Jika versi Kubernetes kluster Anda adalah 1.16 atau lebih baru, atur clusterVersion menjadi 1.16.6-aliyun.1.

Apa yang harus saya lakukan jika gagal menginstal ack-prometheus setelah saya menghapus namespace ack-prometheus?