All Products
Search

This Product

    DataWorks:Buat node CDH Hive

    Document Center

    DataWorks:Buat node CDH Hive

    Last Updated:Jul 12, 2025

    Jika Anda telah menerapkan kluster Cloudera's Distribution Including Apache Hadoop (CDH), Anda dapat menggunakan node CDH Hive di DataWorks untuk menjalankan tugas Hive guna menanyakan atau memproses data secara massal. Topik ini menjelaskan cara membuat node CDH Hive.

    Prasyarat

    • Sebuah alur kerja dibuat di DataStudio.

      Operasi pengembangan di berbagai jenis mesin komputasi dilakukan berdasarkan alur kerja di DataStudio. Oleh karena itu, sebelum membuat sebuah node, Anda harus membuat alur kerja. Untuk informasi lebih lanjut, lihat Buat alur kerja.

    • Sebuah kluster CDH dibuat dan didaftarkan ke DataWorks. Untuk informasi lebih lanjut, lihat DataStudio (versi lama): Asosiasikan sumber daya komputasi CDH.

    • (Diperlukan jika Anda menggunakan pengguna RAM untuk mengembangkan tugas) Pengguna RAM ditambahkan ke ruang kerja DataWorks sebagai anggota dan diberi peran Development atau Workspace Administrator. Peran Workspace Administrator memiliki lebih banyak izin daripada yang diperlukan. Berhati-hatilah saat memberikan peran Workspace Administrator. Untuk informasi lebih lanjut tentang cara menambahkan anggota, lihat Tambah anggota ruang kerja dan tetapkan peran kepada mereka.

    • Sumber daya tanpa server dibeli dan dikonfigurasi. Konfigurasinya mencakup asosiasi dengan ruang kerja dan konfigurasi jaringan. Untuk informasi lebih lanjut, lihat Buat dan gunakan sumber daya tanpa server.

    Batasan

    Tugas pada jenis node ini dapat dijalankan pada sumber daya tanpa server atau grup sumber daya eksklusif versi lama untuk penjadwalan. Kami sarankan Anda menjalankan tugas pada sumber daya tanpa server.

    Langkah 1: Buat node CDH Hive

    1. Pergi ke halaman DataStudio.

      Masuk ke Konsol DataWorks. Di bilah navigasi atas, pilih wilayah yang diinginkan. Di panel navigasi di sebelah kiri, pilih Data Development and O&M > Data Development. Pada halaman yang muncul, pilih ruang kerja yang diinginkan dari daftar drop-down dan klik Go to Data Development.

    2. Di halaman DataStudio, temukan alur kerja yang diinginkan, klik kanan nama alur kerja, dan pilih Create Node > CDH > CDH Hive.

      Catatan

      Sebagai alternatif, Anda dapat mengarahkan pointer ke ikon Create di bagian atas panel Alur Kerja Terjadwal dan membuat node CDH sesuai petunjuk.

    3. Di kotak dialog Create Node, konfigurasikan parameter Name dan klik Confirm. Kemudian, Anda dapat menggunakan node yang dibuat untuk mengembangkan dan mengonfigurasi tugas.

    Langkah 2: Kembangkan tugas Hive

    Anda dapat mengklik dua kali nama node yang dibuat untuk pergi ke tab konfigurasi node dan kemudian melakukan operasi berikut untuk mengembangkan tugas.

    (Opsional) Pilih instance mesin komputasi CDH

    Jika beberapa kluster CDH terdaftar ke ruang kerja saat ini, Anda harus memilih satu dari daftar drop-down Instance Mesin CDH berdasarkan kebutuhan bisnis Anda. Jika hanya ada satu kluster CDH yang terdaftar ke ruang kerja saat ini, Anda tidak perlu memilih kluster CDH.image.png

    Contoh pengembangan kode SQL sederhana

    Di editor SQL, masukkan kode untuk node. Contoh:

    TAMPILKAN tabel;

PILIH * DARI userinfo ;

    Kembangkan kode SQL: Gunakan parameter penjadwalan

    DataWorks menyediakan scheduling parameters yang nilainya diganti secara dinamis dalam kode tugas berdasarkan konfigurasi parameter penjadwalan dalam skenario penjadwalan periodik. Anda dapat mendefinisikan variabel dalam kode tugas dalam format ${Variabel} dan menetapkan nilai ke variabel di bagian Scheduling Parameter dari tab Properties. Untuk informasi tentang format yang didukung dari parameter penjadwalan, lihat Format yang didukung dari parameter penjadwalan.

    PILIH '${var}'; -- Anda dapat menetapkan parameter penjadwalan tertentu ke variabel var.

    Langkah 3: Konfigurasikan properti penjadwalan tugas

    Jika Anda ingin sistem secara berkala menjalankan tugas pada node, Anda dapat mengklik Properties di panel navigasi di sebelah kanan pada tab konfigurasi node untuk mengonfigurasi properti penjadwalan tugas berdasarkan kebutuhan bisnis Anda.

    Langkah 4: Debug kode tugas

    1. Opsional. Pilih grup sumber daya dan tetapkan parameter kustom ke variabel.

    2. Simpan dan eksekusi pernyataan SQL.

      Di bilah alat atas, klik ikon 保存 untuk menyimpan pernyataan SQL. Lalu, klik ikon 运行 untuk mengeksekusi pernyataan SQL.

    3. Opsional. Lakukan pengujian asap.

      Anda dapat melakukan pengujian asap pada tugas di lingkungan pengembangan saat Anda mengirimkan tugas atau setelah Anda mengirimkan tugas. Untuk informasi lebih lanjut, lihat Lakukan pengujian asap.

    Apa yang harus dilakukan selanjutnya

    1. Kirimkan dan terapkan tugas.

      1. Klik ikon 保存 di bilah alat atas untuk menyimpan tugas.

      2. Klik ikon 提交 di bilah alat atas untuk mengirimkan tugas.

      3. Di kotak dialog Submit, konfigurasikan parameter Change description.

      4. Klik Confirm.

      Jika Anda menggunakan ruang kerja dalam mode standar, Anda harus menerapkan tugas di lingkungan produksi setelah Anda mengirimkan tugas. Untuk menerapkan tugas pada node, klik Deploy di bilah navigasi atas halaman DataStudio. Untuk informasi lebih lanjut, lihat Terapkan tugas.

    2. Lihat tugas.

      1. Klik Operation Center di sudut kanan atas tab konfigurasi node yang sesuai untuk pergi ke Pusat Operasi di lingkungan produksi.

      2. Lihat tugas terjadwal. Untuk informasi lebih lanjut, lihat Lihat dan kelola tugas pemicu otomatis.

      Untuk melihat lebih banyak informasi tentang tugas, klik Operation Center di bilah navigasi atas halaman DataStudio. Untuk informasi lebih lanjut, lihat Ikhtisar.