Lindorm が提供する Lindorm 分散処理システム (LDPS) は、各 Spark ジョブに対して Spark Web UI を提供します。Spark ジョブの Spark Web UI ページでは、Spark ジョブの状態、Spark ジョブが送信された時点、Spark ジョブのリソース使用量など、ジョブに関する情報を表示できます。
Spark Web UI に移動する
説明
- Spark Web UI のアドレスを取得する方法の詳細については、「Lindorm コンソールでジョブを管理する」をご参照ください。
- オープンソースの Apache Spark を使用して作成された Spark ジョブの Spark Web UI の詳細については、「Web UI」をご参照ください。
Spark ジョブの Spark Web UI のアドレスをコピーし、ブラウザーのアドレスバーに貼り付けて、Spark Web UI ページにアクセスします。
| タブ | 説明 |
| ジョブ | すべての Spark ジョブに関する情報を表示します。 |
| ステージ | Spark ジョブのすべてのステージのステータス情報を表示します。 |
| ストレージ | 永続化された Resilient Distributed Datasets (RDD) および DataFrames (DF) に関する情報を表示します。 |
| 環境 | Spark ジョブが実行される環境に関する情報を表示します。Spark ジョブが開始されると、指定したランタイム環境ファイル、構成ファイル、およびパラメーターに基づいて環境が構築されます。 |
| エグゼキューター | Spark ジョブの実行に使用されるエグゼキューターに関する情報を表示します。 |
| SQL | LDPS によって処理される SQL クエリに関する情報を表示します。 |
| Kyuubi クエリエンジン | Java Database Connectivity (JDBC) セッションに関する情報を表示します。 |