Node yang sedang menunggu sumber daya - DataWorks

Topik ini menjawab beberapa pertanyaan umum terkait node yang sedang menunggu sumber daya.

Mengapa sebuah node menunggu sumber daya?
Mengapa sebuah node menunggu sumber daya gateway untuk waktu yang lama?
Mengapa sebuah node sinkronisasi data di Data Integration menunggu sumber daya untuk waktu yang lama?

Mengapa sebuah node menunggu sumber daya?

Deskripsi Masalah
Setelah sistem penjadwalan mengeluarkan node ke mesin komputasi, node mungkin menunggu sumber daya karena alasan berikut:
- Node menunggu grup sumber daya untuk penjadwalan.
- Jika node adalah node sinkronisasi data di Data Integration, node menunggu grup sumber daya untuk Data Integration.
- Jika node adalah node komputasi, node menunggu sumber daya komputasi.
Penyebab
Sumber daya dalam grup sumber daya terbatas. Jika sumber daya ditempati oleh node untuk waktu yang lama, node lain tidak dapat dijalankan sampai sumber daya dilepaskan. Untuk informasi lebih lanjut tentang cara sistem penjadwalan mengeluarkan node, lihat Ikhtisar.
Solusi
Di panel navigasi kiri Operation Center, klik Intelligent Diagnosis. Di halaman yang muncul, masukkan ID instance yang dihasilkan untuk node di kotak pencarian dan klik Lakukan Diagnosis untuk melakukan diagnosis ujung ke ujung untuk node tersebut. Anda dapat melihat informasi seperti status eksekusi node, node yang sedang menunggu sumber daya, dan node yang sedang berjalan saat node saat ini menunggu sumber daya. Anda dapat dengan cepat menemukan node yang menempati sumber daya untuk waktu yang lama dan memblokir eksekusi node yang terlibat dalam grafik asiklik terarah (DAG) dari node tersebut. Untuk informasi lebih lanjut, lihat Diagnosis Cerdas.
Untuk melihat node yang sedang berjalan saat node saat ini menunggu sumber daya, ikuti langkah-langkah berikut: Di halaman Overview Operation Center, klik Instance waiting for resource. Di halaman yang muncul, temukan node saat ini, klik kanan node di DAG, dan pilih Instance Diagnose. Di halaman yang muncul, klik tab Resources dan lihat node yang ditampilkan di bagian Resource-consuming tasks.

Mengapa sebuah node menunggu sumber daya gateway untuk waktu yang lama?

Deskripsi Masalah
Log node menunjukkan bahwa node sedang menunggu sumber daya gateway.
Penyebab
Jumlah node yang berjalan secara paralel pada grup sumber daya terkait untuk penjadwalan mencapai batas maksimum.
Solusi
Tunggu hingga node yang sedang berjalan melepaskan sumber daya yang ditempati atau perluas grup sumber daya eksklusif Anda untuk penjadwalan. Anda dapat menggunakan salah satu metode berikut untuk melihat penggunaan sumber daya di grup sumber daya:
- Jika grup sumber daya bersama untuk penjadwalan digunakan, gunakan salah satu metode berikut untuk melihat penggunaan sumber daya di grup sumber daya:
  - Menggunakan Fitur Diagnosis Cerdas
    Di panel navigasi kiri Operation Center, klik Intelligent Diagnosis. Di halaman yang muncul, masukkan ID instance yang dihasilkan untuk node di kotak pencarian dan klik Lakukan Diagnosis untuk melakukan diagnosis ujung ke ujung untuk node tersebut. Anda dapat melihat informasi seperti status eksekusi node, node yang sedang menunggu sumber daya, dan node yang sedang berjalan saat node saat ini menunggu sumber daya. Anda dapat dengan cepat menemukan node yang menempati sumber daya untuk waktu yang lama dan memblokir eksekusi node yang terlibat dalam DAG dari node tersebut. Untuk informasi lebih lanjut, lihat Diagnosis Cerdas.
    Untuk melihat node yang sedang berjalan saat node saat ini menunggu sumber daya, ikuti langkah-langkah berikut: Di halaman Overview Operation Center, klik Instance waiting for resource. Di halaman yang muncul, temukan node saat ini, klik kanan node di DAG, dan pilih Instance Diagnose. Di halaman yang muncul, klik tab Resources dan lihat node yang ditampilkan di bagian Resource-consuming tasks.
  - Di Halaman Ikhtisar Operation Center
    Anda dapat melihat penggunaan sumber daya di grup sumber daya bersama untuk penjadwalan di halaman Overview Operation Center.
    Catatan
    Jam puncak untuk node DataWorks adalah dari 00:00 hingga 09:00 setiap hari. Selama periode ini, sumber daya di grup sumber daya bersama untuk penjadwalan mungkin tidak cukup, dan node mungkin menunggu sumber daya. Anda dapat mengubah waktu penjadwalan node atau membeli grup sumber daya eksklusif untuk penjadwalan di konsol DataWorks.
- Jika Anda menggunakan grup sumber daya eksklusif untuk penjadwalan, Anda dapat masuk ke konsol DataWorks, pergi ke tab Grup Sumber Daya Eksklusif halaman Grup Sumber Daya atau pergi ke halaman Sumber Daya Operation Center, dan kemudian melihat node yang sedang berjalan di grup sumber daya eksklusif untuk penjadwalan dan penggunaan sumber daya di grup sumber daya tersebut.
  - Menggunakan Fitur Diagnosis Cerdas
    Di panel navigasi kiri Operation Center, klik Intelligent Diagnosis. Di halaman yang muncul, masukkan ID instance yang dihasilkan untuk node di kotak pencarian dan klik Lakukan Diagnosis untuk melakukan diagnosis ujung ke ujung untuk node tersebut. Anda dapat melihat informasi seperti status eksekusi node, node yang sedang menunggu sumber daya, dan node yang sedang berjalan saat node saat ini menunggu sumber daya. Anda dapat dengan cepat menemukan node yang menempati sumber daya untuk waktu yang lama dan memblokir eksekusi node yang terlibat dalam DAG dari node tersebut. Untuk informasi lebih lanjut, lihat Diagnosis Cerdas.
    Untuk melihat node yang sedang berjalan saat node saat ini menunggu sumber daya, ikuti langkah-langkah berikut: Di halaman Overview Operation Center, klik Instance waiting for resource. Di halaman yang muncul, temukan node saat ini, klik kanan node di DAG, dan pilih Instance Diagnose. Di halaman yang muncul, klik tab Resources dan lihat node yang ditampilkan di bagian Resource-consuming tasks.
  - Di Konsol DataWorks
    Masuk ke konsol DataWorks dan klik Resource Groups di panel navigasi kiri. Di tab Exclusive Resource Groups halaman Resource Groups, temukan grup sumber daya eksklusif dan lihat penggunaan sumber daya di kolom Resource Group Usage. Kemudian, Anda dapat mengklik nilai persentase di kolom Resource Group Usage, dan melihat detail grup sumber daya dan penggunaan sumber daya di grup sumber daya tersebut.
  - Di Halaman Sumber Daya Operation Center
    Pergi ke Operation Center, klik Resource di panel navigasi kiri, dan kemudian lihat informasi tentang grup sumber daya, seperti penggunaan sumber daya.
    Catatan
    Jumlah maksimum node yang dapat dijalankan secara paralel di grup sumber daya eksklusif untuk penjadwalan bervariasi berdasarkan spesifikasi grup sumber daya. Untuk informasi lebih lanjut, lihat Penagihan Grup Sumber Daya Eksklusif untuk Penjadwalan (Langganan).

Mengapa sebuah node sinkronisasi data di Data Integration menunggu sumber daya untuk waktu yang lama?

Deskripsi Masalah
Log node sinkronisasi data di Data Integration menunjukkan bahwa node sedang menunggu sumber daya.
Penyebab
Masalah ini terjadi karena jumlah node yang berjalan secara paralel di grup sumber daya saat ini untuk Data Integration melebihi batas maksimum untuk grup sumber daya. Akibatnya, node terus menunggu sumber daya.
Catatan
Jika penggunaan sumber daya grup sumber daya tinggi tetapi tidak ada node yang berjalan di grup sumber daya, atau jumlah node yang dijalankan secara paralel di grup sumber daya tidak melebihi batas maksimum grup sumber daya tetapi node yang menggunakan grup sumber daya tidak dapat dijalankan,
Solusi
- Periksa apakah nilai parameter konkuren yang ditentukan saat Anda mengonfigurasi node terlalu besar. Jika nilainya terlalu besar, Anda harus mengonfigurasi parameter berdasarkan batas maksimum untuk grup sumber daya untuk Data Integration dan jumlah node yang berjalan secara paralel.
- Anda mungkin telah menetapkan parameter konkuren node ke nilai yang melebihi batas maksimum untuk grup sumber daya untuk Data Integration. Dalam hal ini, hentikan node dan ubah nilai parameter konkuren sebelum menjalankan node lagi.
  Pergi ke Operation Center. Halaman Overview muncul. Di halaman Overview, klik tab Data Integration dan lihat detail node sinkronisasi data di bagian Synchronization task execution details.
  Catatan
  Anda harus menetapkan parameter konkuren untuk node berdasarkan jumlah maksimum node yang dapat dijalankan secara paralel di grup sumber daya eksklusif untuk Data Integration. Selain itu, Anda juga harus mempertimbangkan jumlah node yang ingin Anda jalankan secara paralel dan jumlah total nilai parameter konkuren untuk setiap node.
  Sebuah node sinkronisasi data di Data Integration menempati sumber daya grup sumber daya untuk Data Integration. Jika sumber daya ditempati oleh node untuk waktu yang lama, node lain yang akan dijalankan di grup sumber daya tidak dapat dijalankan.
- Tunggu hingga node yang sedang berjalan melepaskan sumber daya yang ditempati atau perluas grup sumber daya eksklusif Anda untuk Data Integration. Anda dapat menggunakan salah satu metode berikut untuk melihat penggunaan sumber daya di grup sumber daya:
  Catatan
  Jika sebuah node sinkronisasi data di Data Integration menunggu sumber daya di grup sumber daya, Anda dapat menyelesaikan masalah tersebut dengan merujuk ke Mempercepat atau Memperlambat Proses Sinkronisasi Batch.
  - Menggunakan Fitur Diagnosis Cerdas
    Di panel navigasi kiri Operation Center, klik Intelligent Diagnosis. Di halaman yang muncul, masukkan ID instance yang dihasilkan untuk node di kotak pencarian dan klik Lakukan Diagnosis untuk melakukan diagnosis ujung ke ujung untuk node tersebut. Anda dapat melihat informasi seperti status eksekusi node, node yang sedang menunggu sumber daya, dan node yang sedang berjalan saat node saat ini menunggu sumber daya. Anda dapat dengan cepat menemukan node yang menempati sumber daya untuk waktu yang lama dan memblokir eksekusi node yang terlibat dalam DAG dari node tersebut. Untuk informasi lebih lanjut, lihat <Diagnosis Cerdas.
    Untuk melihat node yang sedang berjalan saat node saat ini menunggu sumber daya, ikuti langkah-langkah berikut: Di halaman Overview Operation Center, klik Instance waiting for resource. Di halaman yang muncul, temukan node saat ini, klik kanan node di DAG, dan pilih Instance Diagnose. Di halaman yang muncul, klik tab Resources dan lihat node yang ditampilkan di bagian Resource-consuming tasks.
  - Di Konsol DataWorks
    Masuk ke konsol DataWorks dan klik Resource Groups di panel navigasi kiri. Di tab Exclusive Resource Groups halaman Resource Groups, temukan grup sumber daya eksklusif dan lihat penggunaan sumber daya di kolom Resource Group Usage. Kemudian, Anda dapat mengklik nilai persentase di kolom Resource Group Usage, dan melihat detail grup sumber daya dan penggunaan sumber daya di grup sumber daya tersebut.
  - Di Halaman Sumber Daya Operation Center
    Pergi ke Operation Center. Klik Resource di panel navigasi kiri dan lihat informasi tentang grup sumber daya, seperti penggunaan sumber daya dan node yang sedang berjalan di grup sumber daya tersebut.
    Catatan
    Jumlah maksimum node yang dapat dijalankan secara paralel di grup sumber daya eksklusif untuk Data Integration bervariasi berdasarkan spesifikasi grup sumber daya. Untuk informasi lebih lanjut, lihat Penagihan Grup Sumber Daya Eksklusif untuk Data Integration (Langganan).