Setelah membuat pekerjaan transformasi data, Simple Log Service secara otomatis membuat dasbor untuk pekerjaan tersebut. Anda dapat melihat metrik operasional pekerjaan ini pada dasbor tersebut. Topik ini menjelaskan metrik operasional yang tersedia dan cara melihat dasbor transformasi data.
Lihat Dasbor
Setelah membuat pekerjaan transformasi data, Anda dapat melihat dasbornya di halaman Data Transformation Overview.
Masuk ke Konsol Simple Log Service.
Pada bagian Projects, klik project yang diinginkan.
Di panel navigasi sebelah kiri, pilih .
-
Klik pekerjaan transformasi data yang dituju. Di area Execution Status, lihat informasi dasbor.
Metrik Ikhtisar
Tabel berikut mencantumkan metrik ikhtisar.
-
Total logs read: Jumlah total log yang dibaca dari semua shard pada Logstore sumber.
-
Total logs delivered: Jumlah total log yang dibaca dari semua shard pada Logstore sumber dan berhasil ditulis ke Logstore tujuan.
-
Total failed logs: Jumlah total log yang dibaca dari semua shard pada Logstore sumber namun gagal selama proses transformasi.
-
Log delivery ratio: Rasio antara jumlah log yang berhasil dikirimkan ke Logstore tujuan terhadap jumlah total log yang dibaca dari Logstore sumber.
Laju Transformasi
Laju transformasi menunjukkan jumlah log yang diproses oleh pekerjaan transformasi data dalam rentang waktu satu menit.
-
Accepted: Jumlah log yang dibaca dari semua shard pada Logstore sumber.
-
Dropped: Jumlah log yang dibaca dari semua shard pada Logstore sumber dan dibuang sesuai skrip aturan.
-
Delivered: Jumlah log yang dibaca dari semua shard pada Logstore sumber dan berhasil ditulis ke Logstore tujuan.
-
Failed: Jumlah log yang dibaca dari semua shard pada Logstore sumber namun gagal selama proses transformasi.
Latensi Konsumsi Shard dan Laju Konsumsi Shard
Metrik ini dihitung dalam rentang waktu satu menit saat pekerjaan transformasi membaca data dari Logstore sumber. Metrik ini merepresentasikan data per shard.
-
Consumption latency: Selisih antara waktu saat log dalam suatu shard sepenuhnya dikonsumsi dan waktu saat log terbaru dalam shard tersebut dihasilkan. Kedua waktu tersebut didasarkan pada waktu penerimaan server terhadap data shard.
-
Consumption rate: Rata-rata jumlah log yang dibaca per detik oleh suatu shard dalam rentang waktu satu menit.
Saat memproses log waktu nyata, latensi konsumsi biasanya sekitar 1 detik. Saat memproses data log historis, latensi konsumsi mungkin tinggi pada awal pekerjaan. Seiring kemajuan transformasi data, konsumsi menyusul dan latensi berkurang.
Shard Aktif
Menampilkan jumlah baris log yang diproses per detik oleh setiap shard—accepted, dropped, delivered, atau failed—selama periode terkini.
Detail Anomali
Berdasarkan bidang reason, Anda dapat mengidentifikasi skrip aturan yang mungkin menyebabkan error.
Anda juga dapat mengambil log error lengkap dengan mencari kata kunci ERROR atau WARNING di Logstore internal-etl-log dalam Project saat ini.