Lindorm Distributed Processing System (LDPS) menyediakan Spark web UI untuk melihat informasi detail mengenai Pekerjaan Spark Anda, seperti status, waktu pengiriman, dan penggunaan resource.
Akses Spark web UI
-
Untuk mendapatkan alamat Spark web UI, lihat Kelola pekerjaan di Konsol Lindorm.
-
Untuk informasi lebih lanjut mengenai Spark web UI open source, lihat Web UI.
Untuk mengakses Spark web UI, tempelkan alamatnya ke bilah alamat browser Anda. Antarmuka akan membuka halaman Jobs secara default. Header menampilkan informasi dasar aplikasi, seperti User, Total Uptime, dan Scheduling Mode (misalnya, FIFO). Di bawah header terdapat bagian Event Timeline yang dapat diperluas.
Tabel 1. Tab Spark web UI
|
Tab |
Description |
|
Jobs |
Menampilkan informasi detail mengenai semua pekerjaan. |
|
Stages |
Menampilkan informasi status untuk semua stage dari sebuah Pekerjaan Spark. |
|
Storage |
Menampilkan informasi penyimpanan untuk resilient distributed datasets (RDDs) dan DataFrames (DFs) yang dipertahankan (persisted). |
|
Environment |
Menampilkan konfigurasi lingkungan untuk Pekerjaan Spark, yang dikompilasi saat startup dari lingkungan runtime, file konfigurasi, dan parameter yang ditentukan pengguna. |
|
Executors |
Menampilkan status pelaksana (executor) untuk Pekerjaan Spark. |
|
SQL |
Menampilkan detail kueri SQL yang dieksekusi oleh Lindorm Distributed Processing System (LDPS). |
|
Kyuubi Query Engine |
Menampilkan informasi mengenai Sesi Java Database Connectivity (JDBC). |