ApsaraMQ for Kafka:Lihat risiko instans

Jenis risiko

Tingkat metrik

Hasil diagnosis

Saran perbaikan

Pemeriksaan ulang risiko

CPU Consumption Percentage

• Normal

• Important

Konsumsi CPU: XX%

Penggunaan CPU tinggi sering disebabkan oleh masalah seperti fragmented sending. Mengatasi masalah ini dapat mengurangi konsumsi CPU.

Alert dipicu di Prometheus jika penggunaan CPU melebihi 70%.

Disk Usage

• Important

• Fix as soon as possible

Penggunaan disk: XX%

Untuk memastikan keamanan data dan stabilitas kluster:

• Jika penggunaan disk mencapai 85% atau lebih, sistem secara berkala menghapus pesan yang belum kedaluwarsa.

• Jika penggunaan disk mencapai 90% atau lebih, kluster mengaktifkan mekanisme proteksi tulis.

Alert dipicu di Prometheus jika penggunaan disk instans melebihi 80%.

Disk Skew Issue

• Important

• Fix as soon as possible

None

Kemiringan disk (disk skew) dalam kluster dapat mencegah Anda memanfaatkan performa dan kapasitas disk secara optimal. Anda dapat menambahkan partisi topik berdasarkan nilai yang direkomendasikan atau memicu fitur penyeimbangan partisi kluster. Untuk informasi lebih lanjut tentang optimasi, lihat Apa yang harus saya lakukan jika partisi topik tidak seimbang?.

Alert dipicu jika selisih antara penggunaan disk maksimum dan minimum lebih dari 50%. Konsol hanya menampilkan penggunaan disk maksimum.

Time Consumed for Message Production Format Conversion

• Important

• Fix as soon as possible

Waktu TP98 yang dikonsumsi untuk konversi format produksi pesan: XX ms

Topik yang terdampak menjalani konversi format, yang memengaruhi performa pengiriman secara keseluruhan. Untuk mengatasinya, Anda dapat menyelaraskan versi client pengiriman dan server.

Anda dapat memeriksa apakah versi client produksi untuk topik yang terdampak tidak konsisten dengan versi server.

Time Consumed for Message Consumption Format Conversion

• Important

• Fix as soon as possible

Waktu TP98 yang dikonsumsi untuk konversi format konsumsi pesan: XX ms

Konversi format terjadi, yang memengaruhi performa konsumsi secara keseluruhan. Untuk mengatasinya, Anda dapat menyelaraskan versi client konsumsi dan server.

Anda dapat memeriksa apakah versi client konsumsi tidak konsisten dengan versi server.

Topic Format Conversion

• Normal

• Important

XX topik mengalami konversi format

Topik yang terdampak menjalani konversi format, yang dapat memengaruhi performa pengiriman secara keseluruhan. Anda dapat menyelaraskan versi client pengiriman dan server untuk mengurangi kehilangan performa akibat konversi format.

Anda dapat memeriksa apakah versi client produksi untuk topik yang terdampak tidak konsisten dengan versi server.

Group Subscribes to Too Many Topics

• Normal

• Important

XX grup berlangganan terlalu banyak topik

Grup yang berlangganan terlalu banyak topik rentan mengalami event rebalancing, yang memengaruhi performa konsumsi secara keseluruhan. Jika bisnis Anda memungkinkan, pertahankan hubungan berlangganan satu-ke-satu antara grup dan topik. Untuk informasi lebih lanjut, lihat Praktik terbaik untuk subscriber.

Alert dipicu jika sebuah grup berlangganan lebih dari satu topik.

Use of Sarama Go Client

• Normal

• Important

XX grup menggunakan client Sarama Go untuk konsumsi

Grup yang terdampak menggunakan client Sarama Go. Client Sarama Go memiliki banyak masalah yang diketahui dan penggunaannya tidak disarankan. Untuk informasi lebih lanjut, lihat Mengapa saya tidak disarankan menggunakan client Sarama Go untuk mengirim dan menerima pesan?.

Alert dipicu jika client konsumen menggunakan Sarama Go untuk commit offset.

Rebalancing Timeout

• Normal

• Important

XX grup mengalami timeout rebalancing

Grup yang terdampak memiliki timeout rebalancing yang panjang. Hindari mengatur parameter max.poll.interval.ms ke nilai besar. Jika tidak, rebalancing Kafka akan terganggu dan memakan waktu lama.

Anda dapat membuka halaman detail grup yang terdampak untuk melihat detail rebalancing.

Consumer Client Actively Leaves the Queue

• Important

• Fix as soon as possible

XX konsumen grup secara aktif meninggalkan antrian dan memicu event rebalancing

Pada grup yang terdampak, client konsumen secara aktif meninggalkan antrian dan memicu rebalancing. Anda dapat memeriksa hal-hal berikut:

• Apakah client konsumen mengalami hang.

• Apakah konfigurasi client konsumen sudah tepat.

Untuk informasi lebih lanjut, lihat Mengapa client konsumen sering melakukan rebalancing?.

Anda dapat membuka halaman detail grup yang terdampak untuk melihat detail rebalancing.

Groups with High Latency in Receiving Consumed Data

• Normal

• Important

XX grup memiliki latensi tinggi dalam menerima data yang dikonsumsi

Grup yang terdampak memiliki latensi konsumsi tinggi. Hal ini dapat disebabkan oleh alasan berikut:

• Parameter fetch.max.bytes client konsumen diatur ke nilai besar.

• Client berada dalam lingkungan jaringan yang buruk.

Untuk informasi lebih lanjut tentang optimasi, lihat Praktik terbaik untuk subscriber.

Anda dapat memeriksa latensi konsumsi client konsumen.

Group Quota

• Normal

• Important

Kuota grup tersisa: XX

Kuota grup hampir habis.

Anda dapat melihat jumlah grup saat ini di halaman detail instans.

Topic Quota

• Important

• Fix as soon as possible

Kuota topik tersisa: XX

Kuota topik hampir habis.

Anda dapat melihat jumlah topik saat ini di halaman detail instans.

Partition Quota

• Important

• Fix as soon as possible

Kuota partisi tersisa: XX

Kuota partisi hampir habis.

Anda dapat melihat jumlah partisi saat ini di halaman detail instans.

Server Minor Version Upgrade

• Important

• Fix as soon as possible

Versi minor server saat ini tertinggal XX versi dari versi minor terbaru

Versi minor terbaru memperbaiki beberapa bug open source yang diketahui dan meningkatkan performa serta stabilitas kluster secara keseluruhan. Untuk stabilitas layanan, segera tingkatkan server ke versi minor terbaru.

Anda dapat melihat detail versi minor di halaman detail instans.

TCP Connections for a Single Node

• Important

• Fix as soon as possible

Jumlah koneksi TCP untuk satu node: XX

Jumlah koneksi TCP yang berlebihan memengaruhi stabilitas kluster secara keseluruhan.

• Periksa metode koneksi Anda untuk menentukan apakah objek koneksi diinstansiasi berulang kali.

• Banyak client dapat menyebabkan fragmented sending parah. Kurangi jumlah client dan sesuaikan parameter pengiriman batch.size dan linger.ms untuk mengagregasi data ke dalam batch sebelum dikirim.

• Jika jumlah koneksi terus meningkat, beberapa koneksi mungkin gagal.

Anda dapat melihat jumlah maksimum koneksi TCP untuk node instans di Dasbor atau di Prometheus. Alert dipicu jika jumlah tersebut melebihi batas spesifikasi. Untuk informasi lebih lanjut tentang batas spesifikasi, lihat Batas.

Public TCP Connections for a Single Node

• Important

• Fix as soon as possible

Jumlah koneksi TCP publik untuk satu node: XX

Jumlah koneksi TCP publik yang berlebihan memengaruhi stabilitas kluster secara keseluruhan.

• Periksa metode koneksi Anda untuk menentukan apakah objek koneksi diinstansiasi berulang kali.

• Banyak client dapat menyebabkan fragmented sending parah. Kurangi jumlah client dan sesuaikan parameter pengiriman batch.size dan linger.ms untuk mengagregasi data ke dalam batch sebelum dikirim.

• Jika jumlah koneksi terus meningkat, beberapa koneksi mungkin gagal.

• Koneksi jaringan publik merupakan koneksi heavyweight dengan performa buruk. Gunakan koneksi ini hanya untuk pengembangan dan pengujian. Untuk lingkungan produksi, gunakan koneksi VPC.

Anda dapat melihat jumlah maksimum koneksi TCP publik untuk node instans di Dasbor atau di Prometheus. Alert dipicu jika jumlah tersebut melebihi batas spesifikasi. Untuk informasi lebih lanjut tentang batas spesifikasi, lihat Batas.

Synchronous Sending Issue

• Important

• Fix as soon as possible

XX topik mengalami masalah pengiriman sinkron

Topik yang terdampak menggunakan mekanisme flushing disk sinkron dengan acks=all. Hal ini mengakibatkan performa pengiriman yang buruk secara keseluruhan dan memengaruhi efisiensi pemrosesan kluster. Jika bisnis Anda memungkinkan, atur acks=1 untuk meningkatkan efisiensi pengiriman secara signifikan. Untuk informasi lebih lanjut, lihat Praktik terbaik untuk publisher.

Anda dapat memeriksa apakah client pengiriman untuk topik yang terdampak dikonfigurasi dengan ack diatur ke all atau -1.

Fragmented Sending Issue

• Important

• Fix as soon as possible

XX topik mengalami masalah fragmented sending

Topik yang terdampak mengalami fragmented sending. Hal ini dapat menyebabkan timeout antrian pengiriman dan memengaruhi throughput serta stabilitas pengiriman kluster. Untuk meningkatkan performa pengiriman:

• Atur parameter batch.size dan linger.ms sesuai kebutuhan.

• Jika terdapat banyak partisi, gunakan kebijakan pengiriman sticky partition.

Untuk informasi lebih lanjut, lihat Praktik terbaik untuk publisher.

Alert dipicu jika batchSize yang dikirim kurang dari 4 KB dan penggunaan CPU node lebih dari 60%. Anda dapat mengonfigurasi parameter client pengiriman untuk topik yang terdampak. Kami merekomendasikan penggunaan versi client 2.4.0 atau lebih baru.

Whitelist Security Group Sharing

• Important

• Fix as soon as possible

Daftar putih endpoint default berbagi ID security group: XX

Saat men-deploy instans, Anda menentukan parameter ID security group daftar putih. Beberapa instans mungkin berbagi konfigurasi daftar putih yang sama. Artinya, memodifikasi konfigurasi daftar putih satu instans juga memengaruhi instans lain yang menggunakan security group yang sama. Hal ini meningkatkan dampak kesalahan operasional pada konfigurasi daftar putih. Anda harus menyadari risiko terkait daftar putih.

Anda dapat memeriksa apakah security group yang digunakan oleh instans dibagi dengan resource lain.

Single-Partition Topic Risk

• Important

• Fix as soon as possible

Saat ini terdapat XX topik single-partition untuk cloud storage

Partisi tunggal cloud storage mungkin menjadi tidak tersedia selama gangguan atau peningkatan. Anda dapat menambahkan lebih banyak partisi. Jika harus menggunakan partisi tunggal, gunakan local storage.

Anda dapat memeriksa jumlah partisi untuk topik yang terdampak.

Topic Partition Skew Issue

• Important

• Fix as soon as possible

Saat ini terdapat XX topik dengan ketidakseimbangan partisi

Ketidakseimbangan partisi topik memiliki risiko berikut:

• Hal ini dapat mencegah Anda memanfaatkan performa dan kapasitas disk secara optimal.

• Hal ini dapat memicu pembatasan laju (rate limiting) pada node tunggal. Anda dapat menambahkan partisi topik berdasarkan nilai yang direkomendasikan.

Untuk informasi lebih lanjut tentang optimasi, lihat Apa yang harus saya lakukan jika partisi topik tidak seimbang?.

Anda dapat memeriksa apakah jumlah partisi di halaman detail topik yang terdampak memenuhi jumlah partisi yang direkomendasikan.

Node Sending Traffic

• Important

• Fix as soon as possible

Trafik pengiriman node telah melebihi batas: XX%

Trafik pengiriman node telah mencapai batas atasnya. Untuk stabilitas instans, segera tingkatkan instans.

Anda dapat memeriksa trafik produksi maksimum node (byte/detik) di Prometheus. Selain itu, periksa apakah panjang antrian pembatasan laju produksi instans (item/detik) telah menyebabkan pembatasan laju produksi.

Node Consumption Traffic

• Important

• Fix as soon as possible

Trafik konsumsi node telah melebihi batas: XX%

Trafik konsumsi node telah mencapai batas atasnya. Untuk stabilitas instans, segera tingkatkan instans.

Anda dapat memeriksa trafik konsumsi maksimum node (byte/detik) di Prometheus. Selain itu, periksa apakah panjang antrian pembatasan laju konsumsi instans (item/detik) telah menyebabkan pembatasan laju konsumsi.

Sending Traffic

• Important

• Fix as soon as possible

Trafik pengiriman telah melebihi batas: XX%

Trafik produksi kluster telah mencapai batas atasnya. Sebagian trafik produksi mungkin dikenai pembatasan laju, yang menyebabkan timeout pengiriman produksi. Untuk menghindari dampak pada bisnis dan stabilitas kluster, segera tingkatkan instans.

Anda dapat memeriksa trafik produksi pesan instans (byte/detik) di Prometheus. Selain itu, periksa apakah panjang antrian pembatasan laju produksi instans (item/detik) telah menyebabkan pembatasan laju produksi.

Consumption Traffic

• Important

• Fix as soon as possible

Trafik konsumsi telah melebihi batas: XX%

Trafik konsumsi kluster telah mencapai batas atasnya. Sebagian trafik konsumsi mungkin dikenai pembatasan laju, yang menyebabkan sebagian data pesan ditumpuk alih-alih dikonsumsi tepat waktu. Untuk menghindari dampak pada bisnis dan stabilitas kluster, segera tingkatkan instans.

Anda dapat memeriksa trafik konsumsi pesan instans (byte/detik) di Prometheus. Selain itu, periksa apakah panjang antrian pembatasan laju konsumsi instans (item/detik) telah menyebabkan pembatasan laju konsumsi.

Partition Assignment Policy Issue

• Important

• Fix as soon as possible

Saat ini, XX grup memiliki partisi yang sama yang ditugaskan ke beberapa thread konsumen

Partisi yang sama ditugaskan ke beberapa thread konsumen untuk konsumsi. Periksa apakah terdapat masalah pada kebijakan penugasan konsumen. Untuk informasi lebih lanjut, lihat Mengapa partisi yang sama dikonsumsi oleh beberapa thread konsumen?.

Anda dapat memeriksa apakah client konsumen memiliki beberapa konsumen yang mengonsumsi partisi yang sama.

Consumer Offset Commit Frequency

• Important

• Fix as soon as possible

Client konsumen melakukan commit offset konsumen sebanyak XX kali per detik

Client konsumen melakukan commit offset konsumen terlalu sering, yang memengaruhi performa dan stabilitas kluster. Anda dapat beralih ke autocommit untuk offset konsumen atau mengurangi frekuensi commit offset konsumen. Berikut adalah 10 grup teratas dengan frekuensi commit offset tertinggi. Untuk informasi lebih lanjut tentang optimasi, lihat Praktik terbaik untuk subscriber.

None.

Groups with Rebalancing Within One Day

• Normal

• Important

XX grup memicu event rebalancing dalam satu hari

Grup yang terdampak mengalami rebalancing dalam satu hari. Untuk waktu spesifiknya, lihat halaman detail grup. Selain itu, pastikan apakah hal ini disebabkan oleh konfigurasi client konsumen yang tidak tepat. Untuk informasi lebih lanjut, lihat Mengapa client konsumen sering melakukan rebalancing?.

Anda dapat memeriksa detail rebalancing grup yang terdampak.

Disk Cold Read

• Important

• Fix as soon as possible

Tingkat cold read: XX%

Terjadi cold read disk. Konsumen perlu membaca sejumlah besar data dari disk, yang memengaruhi performa dan stabilitas kluster. Hal ini dapat disebabkan oleh latensi konsumsi tinggi yang menyebabkan penumpukan pesan. Anda dapat meningkatkan laju konsumsi atau mereset offset konsumen.

Alert dipicu ketika operasi input/output per detik (IOPS) disk atau penggunaan bandwidth melebihi 70%.

Disk Write Protection

• Important

• Fix as soon as possible

Proteksi tulis disk dipicu.

Penggunaan disk saat ini terlalu tinggi, dan proteksi tulis disk telah dipicu. Segera lakukan optimasi.

Anda dapat memeriksa di Prometheus apakah penggunaan disk instans melebihi 90%, yang menyebabkan proteksi tulis disk.

Consumer Offset Rollback

• Important

• Fix as soon as possible

XX grup mengalami rollback offset konsumen

Grup yang terdampak mengalami rollback offset konsumen. Reset offset mungkin telah dipicu.

Anda dapat memeriksa apakah client konsumen melakukan commit offset historis, yang menyebabkan offset konsumen mengalami rollback.

Use of GZIP Compression

• Important

• Fix as soon as possible

XX topik menggunakan kompresi GZIP

Topik yang terdampak menggunakan kompresi GZIP, yang meningkatkan muatan kluster. Segera lakukan optimasi.

Anda dapat memeriksa apakah kompresi GZIP dikonfigurasi untuk client produksi.

Possible Early Message Cleanup

• Important

• Fix as soon as possible

Pesan mungkin dihapus sebelum Waktu hidup (TTL) berakhir

Kapasitas disk tunggal kecil dan penggunaan disk tinggi. Pesan mungkin dihapus lebih awal. Pantau masalah ini dan segera tangani.

Anda dapat memeriksa kapasitas disk dan penggunaan disk maksimum saat ini.

Server Major Version Has Expired

• Important

• Fix as soon as possible

Versi utama server terlalu rendah dan telah kedaluwarsa.

Versi utama server terlalu rendah dan memiliki bug open source yang diketahui. Untuk stabilitas layanan, segera tingkatkan versi utama server sesuai petunjuk dalam dokumentasi.

Versi utama server adalah 0.10.x.

Consumer Offset Contains Leader_Epoch

• Important

• Fix as soon as possible

XX grup memiliki catatan leader_epoch saat melakukan commit offset

Client konsumen saat ini membawa catatan leader_epoch saat melakukan commit offset. Hal ini dapat menyebabkan anomali konsumsi atau bahkan kegagalan konsumsi. Segera tingkatkan client ke versi 2.6 atau lebih baru. Untuk informasi lebih lanjut, lihat issue open source.

Versi utama server adalah 2.2.0, dan client konsumen membawa field leader_epoch saat melakukan commit offset konsumen. Hal ini terjadi ketika versi client berada di antara 2.3 dan 2.6.

Local Storage Risk

• Important

• Fix as soon as possible

XX topik menggunakan local storage

Penyimpanan LocalTopic memiliki banyak masalah open source. Kami tidak bertanggung jawab atas kerugian bisnis yang disebabkan oleh cacat pada Kafka open source atau komponen pihak ketiganya, atau oleh konfigurasi dan penggunaan yang tidak tepat.

Topik yang terdampak menggunakan local storage.

Scheduled ECS Restart

• Important

• Fix as soon as possible

Terdapat XX node dalam kluster dengan event restart ECS terjadwal

Kluster memiliki event restart ECS terjadwal. Selama restart terjadwal, jitter lalu lintas layanan ringan mungkin terjadi. Pantau situasi ini secara ketat.

Sebuah node dalam kluster memiliki event O&M. Pelanggan diberi tahu tentang event ini melalui notifikasi risiko ini.

Unused Connector Service Exists for a Long Time

• Normal

• Important

Layanan Connector akan segera dikenai biaya. Jika Anda tidak perlu menggunakannya, segera lepas resource tersebut.

Layanan Connector akan segera menjadi layanan berbayar. Jika Anda tidak lagi membutuhkan layanan ini, segera lepas resource tersebut. Untuk melakukannya, buka Connector Ecosystem Integration/Task List.

Anda dapat membuka halaman yang ditentukan untuk melihat layanan connector.

Unused Message Retrieval Service Exists for a Long Time

• Normal

• Important

Layanan pengambilan pesan akan segera dikenai biaya. Jika Anda tidak perlu menggunakannya, segera lepas resource tersebut.

Layanan pengambilan pesan akan segera dikenai biaya. Jika Anda tidak perlu menggunakannya, segera lepas resource tersebut. Untuk melepas resource, buka halaman Message Retrieval.

Anda dapat membuka halaman yang ditentukan untuk melihat layanan pengambilan pesan.

Unused Cloud Migration Service Exists for a Long Time

• Normal

• Important

Layanan migrasi cloud akan segera dikenai biaya. Jika Anda tidak perlu menggunakannya, segera lepas resource tersebut.

Biaya akan segera diterapkan pada layanan migrasi cloud. Jika Anda tidak perlu menggunakannya, segera lepas resource tersebut. Untuk melepas resource, buka halaman Migration Task.

Anda dapat membuka halaman yang ditentukan untuk melihat layanan migrasi cloud.

Message Batch Is Too Large

• Important

• Fix as soon as possible

XX topik mengalami masalah ukuran batch pesan terlalu besar. Hal ini dapat menyebabkan permintaan pengiriman ditolak. Segera atasi masalah ini.

Jika batch pesan terlalu besar, pesan tidak dapat mencapai server. Anda dapat meningkatkan ukuran pesan maksimum di server atau mengurangi nilai parameter client max.request.size. Untuk informasi lebih lanjut, lihat Batas.

Anda dapat memeriksa apakah konfigurasi batch.size client produksi terlalu besar.

Too Many Messages in a Batch

• Important

• Fix as soon as possible

XX topik mengalami masalah terlalu banyak pesan dalam satu batch. Hal ini dapat menyebabkan permintaan pengiriman ditolak. Segera atasi masalah ini.

Jika satu batch berisi terlalu banyak pesan, pengiriman gagal. Anda dapat mengurangi nilai batch.size untuk mencegah overflow. Untuk informasi lebih lanjut, lihat Batas.

Anda dapat memeriksa apakah konfigurasi batch.size client produksi terlalu besar dan apakah ukuran pesan tunggal kecil.

Server Network Architecture Version Is Too Low

• Important

• Fix as soon as possible

Versi arsitektur jaringan server terlalu rendah, arsitektur jaringan memiliki keamanan yang buruk, dan perlu di-unpublish.

Anda dapat membuat instans baru (Serverless, subscription, atau pay-as-you-go) dan membuka Konsol ApsaraMQ for Kafka. Anda dapat menggunakan fitur migrasi untuk memindahkan instans lama ke instans baru. Setelah migrasi selesai, berhenti berlangganan instans lama.

Arsitektur jaringan instans sudah usang dan dijadwalkan untuk di-unpublish.