全部产品
Search

搜索本产品

    E-MapReduce：SPARK

    文档中心

    E-MapReduce：SPARK

    更新时间：Nov 11, 2025

    Node SPARK digunakan untuk menjalankan aplikasi Spark. Topik ini menjelaskan parameter yang tersedia saat Anda membuat node SPARK.

    Parameter

    Parameter

    Deskripsi

    Node Name

    Nama node. Nama node bersifat unik dalam suatu alur kerja.

    Run flag

    • Flag eksekusi node. Nilai default: Normal. Nilai yang valid: Normal: Node dijalankan saat alur kerja dijalankan.

    • Prohibition execution: Node tidak dijalankan saat alur kerja dieksekusi.

    Description

    Deskripsi fitur dari node.

    Task priority

    Prioritas node dalam alur kerja. Nilai default: MEDIUM. Nilai yang valid:

    • HIGHEST

    • HIGH

    • MEDIUM

    • LOW

    • LOWEST

    Number of failed retries

    Jumlah maksimum percobaan ulang otomatis oleh sistem jika eksekusi node gagal.

    Failed retry interval

    Interval antara dua percobaan ulang berturut-turut. Satuan: menit.

    Delay execution time

    Lama waktu penundaan sebelum node dijalankan. Nilai default adalah 0, yang berarti node langsung dijalankan setelah dibuat. Node akan ditunda pelaksanaannya hanya jika Anda menentukan nilai lebih besar dari 0 untuk parameter ini. Satuan: menit.

    Timeout alarm

    Menentukan apakah akan mengaktifkan peringatan saat eksekusi node melebihi batas waktu. Secara default, sakelar Timeout alarm dimatikan. Anda dapat mengaktifkan sakelar Timeout alarm dan memilih Timeout alarm serta Timeout failure sebagai Timeout strategy. Jika eksekusi node melebihi periode timeout, pesan peringatan akan dikirim ke kotak surat Anda, dan node tersebut akan gagal.

    Program Type

    Jenis bahasa pemrograman. Nilai yang valid: JAVA, SCALA, PYTHON, SQL, dan CUSTOM_SCRIPT.

    Catatan

    Parameter yang ditampilkan bervariasi tergantung pada jenis bahasa pemrograman yang Anda pilih. Parameter yang ditampilkan di konsol memiliki prioritas utama.

    Main Class

    Jalur lengkap kelas yang berisi metode main untuk aplikasi Spark.

    Main Package

    Paket JAR yang digunakan untuk menjalankan aplikasi Spark. Paket JAR diunggah menggunakan fitur manajemen sumber daya. Untuk informasi selengkapnya, lihat manajemen sumber daya.

    Deploy Mode

    Mode penyebaran. Atur parameter ini ke cluster.

    Script

    • Skrip. Jika Anda mengatur parameter Program Type ke SQL, Anda harus memasukkan Pernyataan SQL di bidang Script.

    • Jika Anda mengatur parameter Program Type ke CUSTOM_SCRIPT, Anda harus memasukkan perintah spark-submit atau spark-sql lengkap di bidang Script.

    App Name

    Nama aplikasi Spark.

    Driver Cores

    Jumlah core driver. Konfigurasikan parameter ini berdasarkan lingkungan produksi yang sebenarnya.

    Driver Memory

    Ukuran memori driver. Konfigurasikan parameter ini berdasarkan lingkungan produksi yang sebenarnya.

    Executor Number

    Jumlah executor. Konfigurasikan parameter ini berdasarkan lingkungan produksi yang sebenarnya.

    Executor Memory

    Ukuran memori executor. Konfigurasikan parameter ini berdasarkan lingkungan produksi yang sebenarnya.

    Executor Cores

    Jumlah core executor. Konfigurasikan parameter ini berdasarkan lingkungan produksi yang sebenarnya.

    Main Arguments

    Parameter input aplikasi Spark. Anda dapat mengganti variabel kustom yang didefinisikan dalam parameter input.

    Option Parameters

    Parameter opsional. Format yang didukung: --jars, --files, --archives, dan --conf.

    Resources

    Berkas sumber daya yang diperlukan untuk eksekusi node. Jika berkas sumber daya dirujuk oleh parameter lain, pastikan Anda telah membuat atau mengunggah berkas tersebut di halaman File Manage pada tab Resources dan memilih berkas tersebut sebagai Resources.

    Custom Parameters

    Parameter kustom dari node. Parameter kustom digunakan untuk menggantikan ${Variable} dalam skrip.

    Pre tasks

    Node leluhur dari node saat ini.