Diagnosis Cerdas - DataWorks

Fitur Diagnosis Cerdas memungkinkan Anda melakukan diagnosis ujung ke ujung pada instance tugas. Jika instance tidak berjalan sesuai harapan, gunakan fitur ini untuk mengidentifikasi masalah.

Informasi Latar Belakang

Gunakan fitur Diagnosis Cerdas untuk mendiagnosis dan menganalisis instance tugas dari dimensi-dimensi berikut:

Lihat status instance saat ini: Instance hanya dapat dijadwalkan jika kondisi-kondisi berikut terpenuhi: Instance leluhur berhasil dijalankan, waktu penjadwalan telah tiba, sumber daya mencukupi, dan instance belum dijalankan. Untuk informasi lebih lanjut, lihat Apa saja kondisi yang diperlukan agar sebuah node berhasil dijalankan?.
Lihat informasi dasar: Anda dapat melihat poin-poin penting dalam waktu untuk instance saat ini.
Lihat baseline yang terpengaruh: Anda dapat melihat baseline yang mencakup tugas tempat instance dibuat dalam lingkup pemantauan serta status baseline tersebut. Untuk informasi lebih lanjut tentang fitur baseline cerdas, lihat Ikhtisar.
Lihat status instance historis: Anda dapat melihat status instance historis dari tugas saat ini dalam 15 hari terakhir dalam mode grafik atau daftar.

Batasan

Hanya pengguna DataWorks Edisi Profesional atau edisi yang lebih canggih yang dapat menggunakan fitur Diagnosis Cerdas. Jika Anda menggunakan edisi lain, Anda dapat mencoba fitur ini secara gratis. Namun, kami menyarankan Anda meningkatkan layanan DataWorks ke DataWorks Edisi Profesional untuk akses ke lebih banyak fitur. Untuk informasi lebih lanjut, lihat Perbedaan antara edisi DataWorks.
Fitur Diagnosis Cerdas didukung hanya di wilayah-wilayah berikut: Tiongkok (Hangzhou), Tiongkok (Shanghai), Tiongkok (Beijing), Tiongkok (Zhangjiakou), Tiongkok (Shenzhen), Tiongkok (Hong Kong), Jepang (Tokyo), Singapura, Malaysia (Kuala Lumpur), Indonesia (Jakarta), Jerman (Frankfurt), AS (Silicon Valley), AS (Virginia), dan UEA (Dubai).

Pergi ke Halaman Diagnosis Cerdas

Buka halaman Pusat Operasi.
Masuk ke Konsol DataWorks. Di bilah navigasi atas, pilih wilayah yang diinginkan. Di panel navigasi kiri, pilih Data Development and O&M > Operation Center. Di halaman yang muncul, pilih workspace yang diinginkan dari daftar drop-down dan klik Go to Operation Center.
Di halaman Operation Center, gunakan salah satu metode berikut untuk membuka halaman Intelligent Diagnosis:
- Metode 1: Buka halaman Diagnosis Cerdas dari sebuah instance.
  - Di panel navigasi kiri, pilih Auto Triggered Node O&M > Auto Triggered Instances. Pada tab Instance Perspective, temukan instance yang diinginkan dan klik Perform Diagnostics di kolom Actions untuk membuka halaman Diagnosis Cerdas.
  - Di panel navigasi kiri, pilih Auto Triggered Node O&M > Auto Triggered Instances. Pada tab Instance Perspective, temukan instance yang diinginkan dan klik DAG di kolom Actions. Pada halaman DAG dari instance yang diinginkan, klik kanan instance dan pilih Instance Diagnose.
- Metode 2: Di panel navigasi kiri, pilih O&M Assistant > Intelligent Diagnosis.
  Catatan
  Fitur Diagnosis Cerdas memungkinkan Anda mencari instance hanya dengan ID instance.

Lihat status instance saat ini

Di tab Detail Berjalan, DataWorks memeriksa status instance leluhur dari instance saat ini, waktu penjadwalan yang dikonfigurasikan, penggunaan sumber daya penjadwalan, dan status instance saat ini secara berurutan berdasarkan kondisi yang diperlukan untuk menjalankan sebuah instance.

Upstream Nodes
Di langkah Upstream Nodes pada tab Detail Berjalan halaman Diagnosis Cerdas, fitur Diagnosis Cerdas memungkinkan Anda melihat status instance leluhur. Jika sebuah instance leluhur gagal dijalankan, instance saat ini akan terblokir. Anda dapat mengklik Instance Diagnose di kolom Operation dari instance leluhur untuk mengidentifikasi alasan kegagalan.
Catatan
Jika beberapa instance leluhur dari instance saat ini tidak dijalankan dan dependensi antara instance saat ini dan instance leluhurnya kompleks, kami sarankan Anda menggunakan fitur analisis hulu pada tab Analisis Hulu halaman DAG untuk mengidentifikasi instance leluhur utama yang memblokir jalannya instance saat ini. Kemudian, Anda dapat menggunakan fitur intelligent diagnosis untuk mengidentifikasi alasan mengapa instance leluhur tidak dijalankan. Ini meningkatkan efisiensi O&M.
Timing Check
Di langkah Timing Check, Anda dapat memeriksa apakah waktu penjadwalan yang dikonfigurasikan untuk instance saat ini telah tiba. Pemeriksaan ini dipicu hanya ketika pemeriksaan dependensi hulu berhasil.
Catatan
Saat mengonfigurasikan properti penjadwalan untuk sebuah tugas tempat instance saat ini dibuat di halaman DataStudio, Anda harus menentukan waktu di mana tugas dijadwalkan untuk dijalankan dalam sistem penjadwalan. Namun, waktu sebenarnya di mana tugas mulai dijalankan mungkin lebih lambat dari waktu penjadwalan tugas karena masalah seperti kegagalan tugas leluhur dari tugas saat ini.

Resources

Di langkah Resources, Anda dapat melihat penggunaan sumber daya dan daftar instance yang menempati sumber daya saat instance saat ini sedang menunggu sumber daya. Jika instance saat ini gagal melewati pemeriksaan penggunaan sumber daya, sumber daya penjadwalan yang digunakan untuk menjalankan instance saat ini tidak mencukupi. Dalam hal ini, instance saat ini hanya dapat mulai dijalankan ketika sumber daya penjadwalan dilepaskan. Anda dapat mengatur waktu penjadwalan instance saat ini untuk menghindari jam sibuk berdasarkan informasi di langkah Sumber Daya.

Bagian	Deskripsi
Scheduling resource information	Memungkinkan Anda melihat nama grup sumber daya penjadwalan yang digunakan oleh instance saat ini, jumlah instance yang sedang berjalan pada grup sumber daya penjadwalan, dan jumlah instance yang menunggu untuk dijalankan pada grup sumber daya penjadwalan. Catatan Kami sarankan Anda menggunakan grup sumber daya serverless untuk mengurangi kendala sumber daya penjadwalan. Jam sibuk untuk tugas DataWorks adalah dari 00:00 hingga 09:00 setiap hari. Jika Anda menggunakan grup sumber daya bersama untuk penjadwalan selama jam sibuk, sumber daya dalam grup sumber daya mungkin tidak mencukupi, dan tugas mungkin menunggu sumber daya.
Diagnosis Results	Memungkinkan Anda melihat status eksekusi tugas saat ini.
Resource Usage Trends	Memungkinkan Anda melihat penggunaan sumber daya dari grup sumber daya penjadwalan saat ini dalam setiap periode waktu dan waktu yang dihabiskan oleh instance saat ini untuk menunggu sumber daya jika Anda menggunakan grup sumber daya bersama untuk penjadwalan.

Execution

Di langkah Execution, Anda dapat melihat log run dari instance saat ini, detail aturan pemantauan kualitas data terkait, dan detail kode dari node tempat instance saat ini dibuat. Untuk instance yang gagal dijalankan, fitur Diagnosis Cerdas memberikan hasil diagnosis dan saran berdasarkan informasi log. Ini membantu Anda mengidentifikasi penyebab kesalahan yang terjadi pada instance.

Tab	Deskripsi
Log	Memungkinkan Anda melihat detail berjalan dari instance saat ini. Di langkah Execution dari tab Running Details, Anda dapat mengklik URL antarmuka web EMR di tab Log untuk pergi ke halaman web EMR dan melihat informasi sumber daya EMR. Anda juga dapat mengklik Intelligent Diagnostics di pojok kanan bawah untuk pergi ke tab Diagnosis Cerdas dan menganalisis kesalahan.
Intelligent Diagnostics	Memungkinkan Anda menganalisis log kesalahan dari instance saat ini dengan menggunakan LLMs. Tongyi Qianwen, DeepSeek, dan DW Knowledge Base didukung. Anda dapat menggunakan Tongyi Qianwen dan DeepSeek untuk menganalisis dan mengurai log kesalahan untuk menghasilkan hasil analisis dan saran. Anda juga dapat melihat saran di DW Knowledge Base. Catatan Setelah analisis selesai, Anda juga dapat melakukan operasi berikut: edit kode instance, jalankan ulang instance, setel status instance menjadi sukses, ubah grup sumber daya untuk penjadwalan dan grup sumber daya untuk Data Integration, ajukan tiket, dan ajukan permohonan izin tabel.
DQC	Memungkinkan Anda melihat detail aturan pemantauan kualitas data. Jika Anda mengaitkan aturan pemantauan kualitas data dengan tugas tempat instance saat ini dibuat, aturan pemantauan kualitas data dipicu setelah tugas dijalankan.
Code details	Memungkinkan Anda melihat detail kode dari tugas tempat instance saat ini dibuat.

Lihat informasi dasar

Di tab General, Anda dapat melihat poin-poin penting dalam waktu untuk instance saat ini dan informasi dasar tentang instance saat ini. Untuk informasi lebih lanjut tentang properti penjadwalan yang dikonfigurasikan untuk node tempat instance saat ini dibuat, lihat Konfigurasi properti dasar.

Lihat baseline yang terpengaruh

Di tab Impact baseline, Anda dapat melihat baseline yang mencakup tugas tempat instance dibuat dalam lingkup pemantauan serta status baseline tersebut. Untuk informasi lebih lanjut tentang fitur baseline cerdas, lihat Ikhtisar.

Lihat status instance historis

Di tab Historical instance, Anda dapat melihat informasi berikut:

Tren dari metrik-metrik berikut yang diukur untuk node saat ini dalam 15 hari terakhir dalam grafik: Running time, Start run time, Time consumption of waiting for scheduling resources, dan Completed At.
Detail berjalan dari instance yang dihasilkan untuk node saat ini selama periode historis dalam Daftar Instance Historis, termasuk waktu ketika instance mulai berjalan, waktu ketika instance selesai, durasi berjalan, dan waktu yang dihabiskan untuk menunggu sumber daya. Anda dapat mengklik Instance Diagnose di kolom Operasi dari sebuah instance untuk pergi ke halaman detail diagnosis dari instance tersebut.