Tugas pemicu otomatis dijalankan secara otomatis sesuai jadwal setelah dikomit ke sistem penjadwalan. Anda dapat melihat daftar tugas pemicu otomatis dalam ruang kerja, memeriksa konfigurasi yang diterapkan di lingkungan produksi, serta mengelola tugas tersebut pada halaman Node Pemicu Otomatis di Operation Center.
Informasi latar belakang
Dalam DataWorks, tugas pemicu otomatis dijadwalkan secara otomatis oleh sistem berdasarkan pengaturan penjadwalan. Anda dapat melihat tugas pemicu otomatis pada halaman Node Pemicu Otomatis di Operation Center. Tugas ini juga dapat dipicu secara manual. Jika ingin memicu tugas pemicu otomatis secara manual, Anda dapat mengisi ulang data atau menguji tugas tersebut. Sistem kemudian akan menghasilkan instance pengisian ulang data atau instance uji untuk tugas tersebut. Instance ini dapat digunakan untuk pemrosesan data atau debugging. Jika tugas pemicu otomatis memenuhi kondisi tertentu, sistem secara otomatis menghasilkan instance pemicu otomatis untuk tugas tersebut pada 23:30 setiap malam dan menjalankannya pada hari berikutnya.
Jika Anda memodifikasi tugas pemicu otomatis yang diterapkan ke lingkungan produksi, modifikasi tersebut akan berlaku pada instance yang dihasilkan setelah perubahan selesai. Modifikasi biasanya mulai berlaku ketika waktu penjadwalan tugas pada hari berikutnya tiba. Sebagai contoh, jika Anda menerapkan tugas pemicu otomatis dengan waktu penjadwalan ditetapkan pada suatu waktu di hari berikutnya, sistem akan menghasilkan instance pemicu otomatis untuk tugas tersebut pada 23:30 hari ini dan menjalankannya pada waktu penjadwalan di hari berikutnya. Jika Anda mengisi ulang data untuk tugas pemicu otomatis, sistem segera menghasilkan instance pengisian ulang data berdasarkan konfigurasi tugas, dan instance tersebut langsung berlaku setelah Anda memicunya secara manual. Untuk informasi lebih lanjut tentang operasi seperti pembuatan, penerapan, pelaksanaan, penghentian sementara, dan pencabutan penerapan, lihat Melakukan Operasi O&M Dasar pada Tugas Pemicu Otomatis.
Batasan
Hanya pengguna DataWorks Edisi Profesional atau edisi yang lebih canggih yang dapat menggunakan fitur agregasi, analisis hulu, dan analisis hilir yang disediakan oleh grafik asiklik terarah (DAG). Untuk informasi lebih lanjut tentang aturan penagihan untuk peningkatan edisi layanan DataWorks, lihat Penagihan Edisi DataWorks.
Peringatan
Jangan membekukan tugas yang diberi nama dalam format
Nama Ruang Kerja_root. Tugas ini adalah tugas utama dari ruang kerja Anda. Semua instance tugas pemicu otomatis bergantung pada tugas ini. Jika tugas ini dibekukan, instance tugas pemicu otomatis tidak dapat dijalankan.Setelah Anda memodifikasi tugas pemicu otomatis, Anda harus menerapkan tugas tersebut. Setelah tugas berhasil diterapkan, modifikasi tersebut mulai berlaku di lingkungan produksi. Penyimpangan berikut mungkin terjadi saat Anda menerapkan tugas pemicu otomatis: tugas gagal diterapkan, proses penerapan terblokir, atau versi tugas yang diterapkan tidak sesuai harapan. Dalam kasus ini, kami sarankan Anda pergi ke halaman Auto Triggered Nodes di Operation Center untuk menyelesaikan masalah.
Pergi ke halaman Node Pemicu Otomatis
Masuk ke Konsol DataWorks. Di bilah navigasi atas, pilih wilayah yang diinginkan. Di panel navigasi kiri, pilih . Pada halaman yang muncul, pilih ruang kerja yang diinginkan dari daftar drop-down dan klik Go to Operation Center.
Di panel navigasi kiri halaman Operation Center, pilih . Pada halaman Auto Triggered Nodes, lihat daftar tugas pemicu otomatis atau DAG dari tugas pemicu otomatis.
Lihat tugas pemicu otomatis
Halaman Node Pemicu Otomatis menampilkan semua tugas yang dikomit ke sistem penjadwalan. Anda dapat mengklik Pencarian Cerdas dan menentukan kondisi filter untuk mencari tugas pemicu otomatis yang diinginkan. Anda juga dapat langsung menentukan kondisi filter untuk mencari tugas pemicu otomatis yang diinginkan.
Cari tugas pemicu otomatis menggunakan fitur Pencarian Cerdas
Halaman Node Pemicu Otomatis menyediakan fitur Pencarian Cerdas. Setelah Anda mengklik Pencarian Cerdas dan memilih atau memasukkan kondisi filter, sistem secara otomatis menampilkan tugas pemicu otomatis yang memenuhi kondisi filter.
Lakukan pencarian menggunakan fitur Pencarian Cerdas.
Di bagian atas halaman Tugas Pemicu Otomatis, klik Intelligent Search. Di kotak pencarian yang muncul, masukkan atau pilih kondisi filter dan tekan Enter. Lalu, sistem secara otomatis menampilkan tugas pemicu otomatis yang memenuhi kondisi filter. Sebagai contoh, Anda dapat memasukkan kondisi filter
Pengurutan berdasarkan jenis tugas.Simpan tampilan.
Jika Anda ingin terus menggunakan kondisi filter dalam operasi selanjutnya, lakukan langkah-langkah berikut untuk menyimpan daftar tugas pemicu otomatis yang ditampilkan setelah penyaringan sebagai tampilan baru: Klik Unsaved View, dan pilih Save as New View dalam daftar drop-down. Di kotak dialog Save View, konfigurasikan parameter View Name dan klik Save. Lalu, Anda dapat menemukan tampilan di daftar pencarian tampilan dan menggunakan tampilan tersebut untuk mencari tugas pemicu otomatis yang diinginkan.
CatatanJika Anda tidak lagi memerlukan tampilan tersebut, Anda dapat menemukannya di daftar pencarian tampilan, arahkan kursor ke ikon More di sebelah nama tampilan, lalu pilih Edit atau Delete untuk memodifikasi atau menghapus tampilan.
Nonaktifkan fitur Pencarian Cerdas.
Jika Anda ingin melakukan pencocokan tepat berdasarkan kondisi filter, tekan Esc atau klik Disable Intelligent Search untuk keluar dari mode pencarian cerdas.
Cari tugas pemicu otomatis dengan menentukan kondisi filter secara langsung
Anda dapat menggunakan kondisi filter yang ditampilkan di halaman Node Pemicu Otomatis untuk mencari tugas pemicu otomatis yang diinginkan.
Lakukan pencarian berdasarkan kondisi filter sederhana.
Tentukan nama tugas atau ID tugas atau pilih kondisi filter seperti Node Type, Expired Within Last 180 Days, dan Referenced untuk mencari tugas pemicu otomatis yang diinginkan.
Lakukan pencarian berdasarkan kondisi filter kompleks.
Klik ikon Filter. Di kotak dialog yang muncul, tentukan nama tugas atau ID tugas atau konfigurasikan kondisi filter seperti Computing Resource Type, Baselines, dan Priority untuk mencari tugas pemicu otomatis yang diinginkan.
Tugas dibekukan: Tugas pemicu otomatis yang dibekukan tidak dijadwalkan secara otomatis, dan tugas turunannya diblokir agar tidak berjalan. Jika tugas pemicu otomatis dibekukan, instance yang dihasilkan untuk tugas tersebut juga dibekukan. Instance yang dibekukan tidak dijadwalkan secara otomatis, dan tugas turunan dari tugas pemicu otomatis diblokir agar tidak berjalan.
Tugas terisolasi: Tugas terisolasi tidak bergantung pada tugas lain. Jenis tugas ini tidak dijadwalkan secara otomatis. Jika tugas terisolasi memiliki banyak tugas turunan, pelaksanaan tugas turunan tersebut terpengaruh. Untuk informasi lebih lanjut, lihat Skenario: Node Terisolasi.
Tugas kedaluwarsa: Tugas kedaluwarsa tidak menghasilkan instance dan tidak dijalankan.
Kelola tugas pemicu otomatis
Kelola satu tugas
Jika Anda ingin mengelola satu tugas pemicu otomatis, temukan tugas tersebut di halaman Node Pemicu Otomatis dan klik titik entri terkait untuk fitur berbeda di kolom Actions.
Fitur | Deskripsi | |
DAG | DAG dari tugas pemicu otomatis menampilkan dependensi tugas tersebut. Anda dapat melakukan operasi pada tugas pemicu otomatis di DAG tugas tersebut. Untuk informasi lebih lanjut, lihat Lihat DAG dari tugas pemicu otomatis. | |
Test | Fitur ini memungkinkan Anda menguji apakah pelaksanaan tugas pemicu otomatis memenuhi harapan. Setelah Anda mengklik Uji di kolom Tindakan tugas, instance uji dihasilkan untuk tugas tersebut. Anda dapat pergi ke halaman Test Instances untuk melihat status instance uji. Untuk informasi lebih lanjut, lihat Uji tugas pemicu otomatis dan lihat instance uji yang dihasilkan untuk tugas tersebut. Catatan Instance uji menghasilkan data. Lakukan operasi ini hanya jika diperlukan. | |
Backfill Data | Fitur ini memungkinkan Anda mengisi ulang data untuk tugas pemicu otomatis untuk periode waktu di masa lalu atau di masa depan. Setelah Anda mengisi ulang data untuk tugas pemicu otomatis, instance pengisian ulang data dihasilkan untuk tugas tersebut. Anda dapat pergi ke halaman Data Backfill untuk melihat status instance pengisian ulang data. Untuk informasi lebih lanjut, lihat Isi ulang data dan lihat instance pengisian ulang data (versi baru). | |
More | Freeze | Jika Anda tidak ingin tugas pemicu otomatis dan tugas turunannya berjalan selama periode waktu tertentu, Anda dapat mengklik Bekukan untuk membekukan tugas tersebut. Instance yang dihasilkan untuk tugas pemicu otomatis yang dibekukan juga dalam keadaan dibekukan. Instance yang dibekukan tidak dijalankan dan memblokir pelaksanaan tugas turunannya. Catatan Jangan membekukan tugas yang diberi nama dalam format |
Unfreeze | Fitur ini memungkinkan Anda melanjutkan tugas pemicu otomatis yang dibekukan. | |
Change Owner | Fitur ini memungkinkan Anda mengubah pemilik tugas pemicu otomatis. | |
Modify Scheduling Resource Group | Fitur ini memungkinkan Anda mengubah grup sumber daya penjadwalan yang digunakan untuk menjalankan tugas pemicu otomatis. | |
Modify label | Fitur ini memungkinkan Anda menambahkan tag, menghapus tag, atau memodifikasi tag yang telah ditambahkan ke tugas pemicu otomatis. Untuk informasi lebih lanjut tentang cara mengelola tag untuk tugas pemicu otomatis, lihat Kelola tag. | |
Configure Data Quality Rules | Fitur ini memungkinkan Anda mengonfigurasi aturan pemantauan kualitas data untuk tugas pemicu otomatis untuk memeriksa kualitas data tugas tersebut saat tugas dijalankan. Untuk informasi lebih lanjut, lihat Ikhtisar. | |
View Instances | Fitur ini memungkinkan Anda melihat instance pemicu otomatis yang dihasilkan untuk tugas pemicu otomatis di halaman Auto Triggered Instances. | |
View Lineage | Fitur ini memungkinkan Anda melihat garis keturunan data dari tugas pemicu otomatis. | |
View cycle task details | Fitur ini memungkinkan Anda melihat properti dasar dari tugas pemicu otomatis. Untuk informasi lebih lanjut tentang parameter terkait, lihat Lihat detail tugas pemicu otomatis. | |
Add Alert Rule | Fitur ini memungkinkan Anda mengonfigurasi aturan peringatan kustom untuk memantau status tugas pemicu otomatis setiap hari. Setelah konfigurasi selesai, Anda dapat memilih di panel navigasi kiri halaman Operation Center untuk melihat aturan peringatan kustom yang telah dikonfigurasi. Untuk informasi lebih lanjut, lihat Buat aturan peringatan kustom. | |
Add Baseline | Fitur ini memungkinkan Anda mengaitkan tugas pemicu otomatis dengan baseline. Untuk informasi tentang baseline, lihat Ikhtisar. | |
Kelola beberapa tugas pemicu otomatis sekaligus
Jika Anda ingin mengelola beberapa tugas pemicu otomatis sekaligus, Anda dapat memilih tugas-tugas tersebut di halaman Node Pemicu Otomatis, dan klik titik entri untuk operasi seperti Freeze dan Unfreeze di bagian bawah halaman.
Lihat DAG dari tugas pemicu otomatis
Jika Anda ingin melihat DAG dari tugas pemicu otomatis, Anda dapat menemukan tugas tersebut di halaman Node Pemicu Otomatis dan mengklik DAG di kolom Actions.
Fitur dalam DAG dari tugas pemicu otomatis
Tabel berikut menjelaskan fitur yang disediakan dalam DAG dari tugas pemicu otomatis.
Fitur (diwakili oleh ikon) | Deskripsi | |
| Anda dapat mengklik ikon-ikon di sudut kiri atas DAG dari tugas pemicu otomatis untuk mengumpulkan informasi tugas dari salah satu dimensi berikut atau membatalkan pengumpulan:
| |
| Jika tugas pemicu otomatis memiliki banyak tugas turunan atau tugas turunan dari tugas pemicu otomatis didistribusikan di beberapa level, Anda dapat menggunakan fitur Downgrade Analysis untuk menghitung jumlah tugas turunan yang terpengaruh oleh tugas saat ini. | |
| Anda dapat mengklik ikon-ikon di sudut kanan atas DAG dari tugas pemicu otomatis untuk menyesuaikan gaya tampilan DAG. | |
Operasi yang dapat Anda lakukan di DAG dari tugas pemicu otomatis
Di dalam DAG dari tugas pemicu otomatis, Anda dapat mengklik kanan nama tugas untuk melakukan berbagai operasi. Contoh:
Show Ancestor Nodes: Lihat tugas leluhur dari tugas pemicu otomatis di berbagai level. Maksimal enam level tugas leluhur dapat ditampilkan secara bersamaan. Anda dapat melakukan operasi ini untuk melihat tugas leluhur yang memengaruhi output data dari tugas pemicu otomatis saat ini.
Show Descendant Nodes: Lihat tugas turunan dari tugas pemicu otomatis di berbagai level. Maksimal enam level tugas turunan dapat ditampilkan secara bersamaan. Anda dapat melakukan operasi ini untuk melihat tugas turunan yang output datanya mungkin dipengaruhi oleh tugas pemicu otomatis saat ini.
View Code: Lihat kode dari tugas pemicu otomatis di lingkungan produksi. Jika kode dari tugas pemicu otomatis tidak sesuai harapan, Anda perlu memastikan apakah kode terbaru dari tugas tersebut berhasil diterapkan ke lingkungan produksi. Untuk informasi tentang cara menerapkan tugas ke lingkungan produksi, lihat Terapkan Tugas.
Edit Node: Edit tugas pemicu otomatis pada tab konfigurasi tugas di halaman DataStudio.
Untuk informasi tentang operasi lainnya, lihat Lakukan Operasi pada Tugas Pemicu Otomatis.
Lihat detail tugas pemicu otomatis
Di dalam DAG dari tugas pemicu otomatis, Anda dapat melihat properti dasar, properti detail, log operasi, dan kode dari tugas tersebut. Ini membantu Anda memeriksa apakah parameter penjadwalan, grup sumber daya, dan kode dari tugas tersebut memenuhi kebutuhan bisnis Anda.
Di dalam DAG dari tugas pemicu otomatis, klik nama tugas. Di kartu yang muncul di sudut kanan bawah DAG, klik Tampilkan Detail. Lalu, lihat detail tugas pemicu otomatis di tab-tab yang muncul.
Tab | Deskripsi |
General | Di tab ini, Anda dapat melihat properti penjadwalan dari tugas pemicu otomatis di lingkungan produksi. Untuk informasi lebih lanjut tentang parameter dasar, lihat Konfigurasikan properti dasar. Catatan Jika konfigurasi parameter untuk tugas pemicu otomatis di halaman DataStudio tidak konsisten dengan konfigurasi untuk tugas tersebut di halaman Node Pemicu Otomatis di Operation Center, kami sarankan Anda memeriksa apakah Anda berhasil menerapkan tugas setelah Anda memodifikasi tugas tersebut.
|
Operation Log | Di tab ini, Anda dapat melihat catatan operasi dari tugas pemicu otomatis, termasuk waktu operasi, operator, dan operasi spesifik. |
Code | Di tab ini, Anda dapat melihat kode terbaru dari tugas pemicu otomatis di lingkungan produksi. Jika kode tugas tidak sesuai harapan, Anda perlu memeriksa apakah kode terbaru dari tugas tersebut berhasil diterapkan ke lingkungan produksi. Untuk informasi lebih lanjut, lihat Terapkan tugas. |