DataWorks：Konfigurasikan sebuah node PostgreSQL

Informasi latar belakang

PostgreSQL adalah sistem manajemen basis data relasional (RDBMS) sumber terbuka yang kuat dan fleksibel. PostgreSQL sangat skalabel, stabil, serta menawarkan model data yang kuat dan berbagai fitur inti. Untuk informasi lebih lanjut, lihat PostgreSQL.

Prasyarat

• Sebuah alur kerja telah dibuat.

  Operasi pengembangan di berbagai jenis mesin komputasi dilakukan berdasarkan alur kerja di DataStudio. Oleh karena itu, sebelum membuat node, Anda harus membuat alur kerja. Untuk informasi lebih lanjut, lihat Buat Alur Kerja.

• Sumber data PostgreSQL telah ditambahkan.

  Anda harus menambahkan basis data PostgreSQL ke DataWorks sebagai sumber data PostgreSQL sebelum dapat menggunakannya untuk mengakses data dalam basis data. Untuk informasi lebih lanjut, lihat Sumber Data PostgreSQL.

  Catatan

  Anda hanya dapat membuat node PostgreSQL berdasarkan sumber data PostgreSQL yang ditambahkan ke DataWorks dalam mode string koneksi Java Database Connectivity (JDBC).

• (Diperlukan jika Anda menggunakan pengguna RAM untuk mengembangkan tugas) Pengguna RAM telah ditambahkan ke ruang kerja DataWorks sebagai anggota dan diberi peran Develop atau Workspace Administrator. Peran Workspace Administrator memiliki lebih banyak izin daripada yang diperlukan. Berhati-hatilah saat menetapkan peran tersebut. Untuk informasi lebih lanjut tentang cara menambahkan anggota dan menetapkan peran kepada mereka, lihat Tambahkan Anggota Ruang Kerja dan Tetapkan Peran Kepada Mereka.

Batasan

Jenis node ini didukung di wilayah berikut: Tiongkok (Hangzhou), Tiongkok (Shanghai), Tiongkok (Beijing), , Tiongkok (Shenzhen), Tiongkok (Chengdu), Tiongkok (Hong Kong), Singapura, Malaysia (Kuala Lumpur), Jerman (Frankfurt), AS (Silicon Valley), dan AS (Virginia).

Langkah 1: Buat node PostgreSQL

1. Pergi ke halaman DataStudio.

   Masuk ke Konsol DataWorks. Di bilah navigasi atas, pilih wilayah yang diinginkan. Di panel navigasi sisi kiri, pilih Data Development and O&M > Data Development. Pada halaman yang muncul, pilih ruang kerja yang diinginkan dari daftar drop-down dan klik Go to Data Development.

2. Temukan alur kerja yang diinginkan, klik kanan nama alur kerja, dan pilih Create Node > Database > Postgresql.

3. Di kotak dialog Create Node, konfigurasikan parameter Name dan klik Confirm. Kemudian, Anda dapat menggunakan node tersebut untuk mengembangkan tugas dan mengonfigurasi properti penjadwalan tugas.

Langkah 2: Kembangkan tugas PostgreSQL

(Opsional) Pilih sumber data PostgreSQL

Jika Anda telah menambahkan beberapa sumber data PostgreSQL ke ruang kerja yang diinginkan, Anda harus memilih sumber data pada tab konfigurasi node PostgreSQL sebelum dapat menggunakan node tersebut untuk mengembangkan tugas. Jika Anda hanya menambahkan satu sumber data PostgreSQL ke ruang kerja yang diinginkan, sumber data tersebut digunakan secara default untuk mengembangkan tugas.

Kembangkan kode SQL: Contoh sederhana

Di editor kode pada tab konfigurasi node PostgreSQL, tulis kode tugas. Contoh kode berikut memberikan contoh tentang cara menanyakan informasi tentang semua tabel dasar dalam basis data PostgreSQL:

SELECT * FROM information_schema.tables
WHERE table_type = 'BASE TABLE';

Kembangkan kode SQL: Gunakan parameter penjadwalan

DataWorks menyediakan parameter penjadwalan yang nilainya diganti secara dinamis dalam kode tugas berdasarkan konfigurasi parameter penjadwalan dalam skenario penjadwalan periodik. Anda dapat mendefinisikan variabel dalam kode tugas dalam format ${Variable} dan memberikan nilai kepada variabel di bagian Parameters tab Properties. Untuk informasi tentang format yang didukung dari parameter penjadwalan dan cara mengonfigurasi parameter penjadwalan, lihat Format yang Didukung dari Parameter Penjadwalan dan Konfigurasikan dan Gunakan Parameter Penjadwalan.

Dalam contoh kode berikut, nilai parameter penjadwalan a adalah BASE_TABLE, yang menunjukkan jenis tabel. Anda dapat menjalankan kode berikut untuk menanyakan informasi tentang semua tabel dasar dalam basis data.

Contoh Kode

SELECT * FROM information_schema.tables
WHERE table_type = '${a}';

Langkah 3: Konfigurasikan properti penjadwalan tugas

Jika Anda ingin sistem secara berkala menjalankan tugas pada node, Anda dapat mengklik Properties di panel navigasi sisi kanan pada tab konfigurasi node untuk mengonfigurasi properti penjadwalan tugas berdasarkan kebutuhan bisnis Anda. Untuk informasi lebih lanjut, lihat Ikhtisar.

Langkah 4: Debug kode tugas

Anda dapat melakukan operasi berikut untuk memeriksa apakah tugas dikonfigurasi sesuai harapan berdasarkan kebutuhan bisnis Anda:

1. Opsional. Pilih grup sumber daya dan tetapkan parameter kustom ke variabel.

   • Klik ikon di bilah alat atas tab konfigurasi node. Di kotak dialog Parameters, pilih grup sumber daya untuk penjadwalan yang ingin Anda gunakan untuk men-debug dan menjalankan kode tugas.

   • Jika Anda menggunakan parameter penjadwalan dalam kode tugas Anda, tetapkan parameter penjadwalan ke variabel sebagai nilai dalam kode tugas untuk debugging. Untuk informasi lebih lanjut tentang logika penetapan nilai parameter penjadwalan, lihat Prosedur Debugging.

2. Simpan dan jalankan kode tugas.

   Di bilah alat atas, klik ikon untuk menyimpan kode tugas. Lalu, klik ikon untuk menjalankan kode tugas.

3. Opsional. Lakukan pengujian asap.

   Saat Anda mengirimkan node atau setelah Anda mengirimkan node, Anda dapat melakukan pengujian asap pada node di lingkungan pengembangan untuk memeriksa apakah node dijalankan sesuai harapan. Untuk informasi lebih lanjut, lihat Lakukan Pengujian Asap.

Langkah 5: Kirim dan terapkan tugas

Setelah tugas pada node dikonfigurasi, Anda harus mengirimkan dan menerapkan tugas tersebut. Setelah Anda mengirimkan dan menerapkan tugas, sistem akan menjalankan tugas tersebut secara berkala berdasarkan konfigurasi penjadwalan.

1. Klik ikon di bilah alat atas untuk menyimpan tugas.

2. Klik ikon di bilah alat atas untuk mengirimkan tugas pada node.

   Di kotak dialog Submit, konfigurasikan parameter Change description. Lalu, tentukan apakah akan meninjau kode tugas setelah Anda mengirimkan tugas berdasarkan kebutuhan bisnis Anda.

   Catatan

   • Anda harus mengonfigurasi parameter Rerun dan Parent Nodes pada tab Properti sebelum Anda mengirimkan tugas.

   • Anda dapat menggunakan fitur tinjauan kode untuk memastikan kualitas kode tugas dan mencegah kesalahan eksekusi tugas yang disebabkan oleh kode tugas yang tidak valid. Jika Anda mengaktifkan fitur tinjauan kode, kode node yang dikirimkan hanya dapat diterapkan setelah kode node tersebut lolos tinjauan kode. Untuk informasi lebih lanjut, lihat Tinjauan Kode.

Jika Anda menggunakan ruang kerja dalam mode standar, Anda harus menerapkan tugas di lingkungan produksi setelah Anda mengirimkan tugas. Untuk menerapkan tugas pada node, klik Deploy di pojok kanan atas tab konfigurasi node. Untuk informasi lebih lanjut, lihat Terapkan Tugas.

Apa yang harus dilakukan selanjutnya

O&M Tugas: Setelah Anda mengirimkan dan menerapkan tugas, tugas tersebut dijalankan secara berkala berdasarkan konfigurasi penjadwalan. Anda dapat mengklik Operation Center di pojok kanan atas tab konfigurasi node yang sesuai untuk pergi ke Pusat Operasi dan melihat status penjadwalan tugas. Untuk informasi lebih lanjut, lihat Lihat dan Kelola Tugas yang Dipicu Otomatis.