Lindorm計算引擎提供了SparkUI介面,方便您查看Spark作業的運行狀態、作業提交時間以及資源使用方式等詳細資料。
進入SparkUI介面
說明
-
SparkUI地址擷取方法請參見查看SparkUI地址。
-
關於開源SparkUI介面的詳細介紹請參見開源SparkUI。
將SparkUI地址複製在瀏覽器地址欄中,可以進入SparkUI介面。進入SparkUI後,預設顯示 Jobs 頁面,頁面頂部展示當前應用基本資料,包括 User、Total Uptime 和 Scheduling Mode(如 FIFO),下方提供可展開的 Event Timeline 地區。
表 1. SparkUI頁簽介紹
|
頁簽 |
描述 |
|
Jobs |
所有運行作業的詳細資料。 |
|
Stages |
Spark作業所有Stage的狀態資訊。 |
|
Storage |
顯示持久化的RDD以及DF的儲存資訊。 |
|
Environment |
Spark作業啟動並執行環境。Spark作業啟動時,從運行環境、設定檔、使用者傳入參數共同構建而來。 |
|
Executors |
Spark作業啟動並執行Executors狀態資訊。 |
|
SQL |
計算引擎執行SQL的詳細資料。 |
|
Kyuubi Query Engine |
展示JDBC Session資訊。 |