Managed Service for Prometheus は、Fluid コンポーネントを自動的にインストールし、Fluid コントロールプレーンと Fluid JindoRuntime キャッシュシステム向けのすぐに使えるダッシュボードを提供します。Fluid を一度統合するだけで、ダッシュボードを自分で構築することなく、コントローラーと Webhook のヘルス、キャッシュヒット率、FUSE クライアントのレイテンシーを追跡できます。
前提条件
ACK クラスターまたは ACK Serverless クラスターで Managed Service for Prometheus が有効になっていること。詳細については、「Managed Service for Prometheus」をご参照ください。
クラウドネイティブ AI スイートがデプロイされており、Fluid データ高速化機能が有効になっていること。詳細については、「クラウドネイティブ AI スイートのデプロイ」をご参照ください。
クラスターで実行されている
ack-fluidアドオンが、使用するダッシュボードのバージョン要件を満たしていること。Fluid コントロールプレーンモニタリングダッシュボードのすべての機能を使用するには、
ack-fluidアドオンがバージョン 0.9.7 以降であることを確認してください。Fluid JindoRuntime キャッシュシステムモニタリングダッシュボードのすべての機能を使用するには、
ack-fluidアドオンがバージョン 1.0.11 以降であることを確認してください。
制限
Fluid JindoRuntime キャッシュシステムのモニタリングダッシュボードは、JindoCache キャッシュエンジンを使用する JindoRuntime タイプのキャッシュランタイムコンポーネントのみを監視できます。
ステップ 1:Fluid の統合
ARMS コンソールにログインします。
左側のナビゲーションペインで、[統合センター] をクリックします。[人工知能] セクションで、Fluid カードをクリックします。
Fluid ページで、クラスターを選択するセクションで対象のクラスターを選択します。Fluid コンポーネントがすでにインストールされている場合は、再度インストールする必要はありません。
設定情報 セクションでパラメーターを設定し、OK をクリックしてコンポーネントの統合を完了します。
パラメーター
説明
統合名 (オプション)
現在の Fluid モニタリング統合の一意の名前。このパラメーターは空のままにできます。
メトリクス収集間隔 (秒)
モニタリングデータを収集する間隔。
統合済みのコンポーネントは、Application Real-Time Monitoring Service (ARMS) コンソールの [統合管理] ページで確認できます。
ARMS コンソールにログインします。
左側のナビゲーションペインで、[統合管理] をクリックします。[統合済みコンポーネント] タブをクリックし、Fluid コンポーネントのカードをクリックします。
[環境リスト] タブで、Actions 列の 詳細を見る をクリックして、対象クラスターの Fluid コンポーネント、ダッシュボード、およびアラートルールを表示します。
ステップ 2:Fluid モニタリングダッシュボードの表示
Managed Service for Prometheus は、Fluid 用に 2 つのダッシュボードを提供します。Fluid コントロールプレーンコンポーネントのステータスを表示する Fluid コントロールプレーンモニタリングダッシュボードと、キャッシュシステムおよび FUSE クライアントのメトリクスを表示する Fluid JindoRuntime キャッシュシステムモニタリングダッシュボードです。両方のダッシュボードは、ACK コンソールまたは ARMS コンソールから開くことができます。2 つのパスは同じダッシュボードに繋がるため、普段お使いのコンソールを使用してください。ACK コンソールを推奨します。
(推奨) ACK コンソールでダッシュボードを表示
ACK コンソールにログインします。 左側のナビゲーションウィンドウで、[クラスター] をクリックします。
クラスターリスト ページで、Fluid コンポーネントと統合された ACK クラスターまたは ACK Serverless クラスター をクリックします。次に、左側のナビゲーションペインで、 を選択します。
Prometheus 監視 ページで、 を選択して、Fluid コントロールプレーンモニタリングダッシュボードの詳細を表示します。
Fluid コントロールプレーンモニタリングダッシュボードでは、Fluid コントロールプレーンコンポーネントの詳細を表示できます。Managed Service for Prometheus が提供するダッシュボードデータには、Fluid コンポーネントの実行ステータス、Fluid コントローラーの処理レイテンシー、Fluid Webhook の 1 秒あたりのクエリ数 (QPS) とリクエストレイテンシー、および各コンポーネントのリソース使用量が含まれます。詳細については、「Fluid モニタリングダッシュボードのパラメーター」をご参照ください。
[コンポーネント実行ステータス] セクションでは、準備完了 Pod の数、これまでの再起動回数、および Fluid コントロールプレーンコンポーネントのこれまでの再起動時刻を表示できます。

[Fluid コントローラーの詳細メトリクス] セクションでは、Fluid コントローラーコンポーネントの負荷、処理失敗、および Kubernetes API リクエストを表示できます。

[Fluid Webhook の詳細メトリクス] セクションでは、Fluid Webhook コンポーネントのリソース使用量、処理するリクエスト数、およびリクエストレイテンシーを表示できます。

[リソース使用量] セクションでは、すべての Fluid コントロールプレーンコンポーネントのリソース使用量とネットワークの送受信レートを表示できます。

Prometheus 監視 ページで、 を選択して、Fluid JindoRuntime キャッシュシステムモニタリングダッシュボードの詳細を表示します。
Fluid JindoRuntime キャッシュシステムモニタリングダッシュボードでは、Fluid JindoRuntime キャッシュシステムの詳細を表示できます。ダッシュボードデータには、Fluid データセットの概要、キャッシュシステムメトリクス、および FUSE クライアントメトリクスが含まれます。詳細については、「Fluid モニタリングダッシュボードのパラメーター」をご参照ください。
[データセットの概要] セクションでは、ダッシュボードに表示される Fluid データセットの概要 (キャッシュシステムで正常に実行されているマスター、ワーカー、および FUSE コンポーネント Pod の数、各 Pod のリソース設定など) を表示できます。
[キャッシュシステムメトリクス] セクションでは、キャッシュシステムのサーバー側のメトリクス (キャッシュ使用量、キャッシュヒット率、キャッシュシステムの集約帯域幅、キャッシュシステムが処理するファイルメタデータ操作の QPS など) を表示できます。

[FUSE メトリクス (CSI 経由)] セクションでは、Fluid CSI プラグインと FUSE Pod でマウントされた FUSE ファイルシステム (FS) のクライアント側のメトリクス (各 FUSE Pod のネットワーク I/O、メタデータ操作とデータの読み書き操作のレイテンシーと QPS など) を表示できます。

[FUSE メトリクス (サイドカー経由)] セクションでは、Fluid FUSE サイドカーコンテナでマウントされた FUSE ファイルシステムのクライアント側のメトリクス (メタデータ操作とデータの読み書き操作のレイテンシーと QPS など) を表示できます。

ARMS コンソールでダッシュボードを表示
にログインします。 ARMSコンソールを使用します。
ARMS コンソールにログインします。
ARMS コンソールにログインします。
ARMS コンソールにログインします。
ARMS コンソールにログインします。
ARMS コンソールにログインします。
ARMS コンソールにログインします。
左側のナビゲーションペインで、[統合管理] をクリックします。[コンポーネントタイプ] セクションで Fluid を選択します。右側の [ダッシュボード] タブをクリックし、ページ下部の [Fluid コントロールプレーン] をクリックします。これで、Fluid コントロールプレーンモニタリングダッシュボードの詳細を表示できます。
Fluid コントロールプレーンモニタリングダッシュボードでは、Fluid コントロールプレーンコンポーネントの詳細を表示できます。Managed Service for Prometheus が提供するダッシュボードデータには、Fluid コンポーネントの実行ステータス、Fluid コントローラーの処理レイテンシー、Fluid Webhook の QPS とリクエストレイテンシー、および各コンポーネントのリソース使用量が含まれます。詳細については、「Fluid モニタリングダッシュボードのパラメーター」をご参照ください。
[コンポーネント実行ステータス] セクションでは、準備完了 Pod の数、これまでの再起動回数、および Fluid コントロールプレーンコンポーネントのこれまでの再起動時刻を表示できます。
[Fluid コントローラーの詳細メトリクス] セクションでは、Fluid コントローラーコンポーネントの負荷、処理失敗、および Kubernetes API リクエストを表示できます。
[Fluid Webhook の詳細メトリクス] セクションでは、Fluid Webhook コンポーネントのリソース使用量、処理するリクエスト数、およびリクエストレイテンシーを表示できます。
[リソース使用量] セクションでは、すべての Fluid コントロールプレーンコンポーネントのリソース使用量とネットワークの送受信レートを表示できます。
左側のナビゲーションペインで、[統合管理] をクリックします。[コンポーネントタイプ] セクションで Fluid を選択します。右側の [ダッシュボード] タブをクリックし、ページ下部の [Fluid JindoRuntime ダッシュボード] をクリックします。これで、Fluid JindoRuntime キャッシュシステムモニタリングダッシュボードの詳細を表示できます。
[データセットの概要] セクションでは、ダッシュボードに表示される Fluid データセットの概要 (キャッシュシステムで正常に実行されているマスター、ワーカー、および FUSE コンポーネント Pod の数、各 Pod のリソース設定など) を表示できます。
[キャッシュシステムメトリクス] セクションでは、キャッシュシステムのサーバー側のメトリクス (キャッシュ使用量、キャッシュヒット率、キャッシュシステムの集約帯域幅、キャッシュシステムが処理するファイルメタデータ操作の QPS など) を表示できます。
[FUSE メトリクス (CSI 経由)] セクションでは、Fluid CSI プラグインと FUSE Pod でマウントされた FUSE ファイルシステム (FS) のクライアント側のメトリクス (各 FUSE Pod のネットワーク I/O、メタデータ操作とデータの読み書き操作のレイテンシーと QPS など) を表示できます。
[FUSE メトリクス (サイドカー経由)] セクションでは、Fluid FUSE サイドカーコンテナでマウントされた FUSE ファイルシステムのクライアント側のメトリクス (メタデータ操作とデータの読み書き操作のレイテンシーと QPS など) を表示できます。
監視メトリクス
次の表に、Fluid コントロールプレーンの各コンポーネントが使用するメトリクスを示します。
メトリクス | タイプ | 説明 |
dataset_ufs_total_size | ゲージ | 現在のクラスターで実行中の Dataset オブジェクトがマウントするデータセットのサイズ。 |
dataset_ufs_file_num | ゲージ | 現在のクラスターで実行中の Dataset オブジェクトがマウントするデータセット内のファイル数。 |
runtime_setup_error_total | カウンター | コントローラーのリコンサイルプロセスにおけるランタイム起動操作の失敗回数。 |
runtime_sync_healthcheck_error_total | カウンター | コントローラーのリコンサイルプロセスにおけるランタイムのヘルスチェック操作の失敗回数。 |
controller_runtime_reconcile_time_seconds_bucket | ヒストグラム | コントローラーのリコンサイルプロセスにかかる時間。 |
controller_runtime_reconcile_errors_total | カウンター | コントローラーのリコンサイルプロセスの失敗回数。 |
controller_runtime_reconcile_total | カウンター | コントローラーが完了したリコンサイルプロセスの合計回数。 |
controller_runtime_max_concurrent_reconciles | ゲージ | コントローラーで利用可能なリコンサイル goroutine の最大数。 |
controller_runtime_active_workers | ゲージ | コントローラーで Active 状態のリコンサイル goroutine 数。 |
workqueue_adds_total | カウンター | コントローラーの workqueue が処理した Adds イベント数。 |
workqueue_depth | ゲージ | コントローラーの workqueue の現在のキュー深度。 |
workqueue_queue_duration_seconds_bucket | ヒストグラム | コントローラーの workqueue で、保留中のオブジェクトが待機する時間。 |
workqueue_work_duration_seconds_bucket | ヒストグラム | コントローラーが完了した処理の処理時間分布。 |
workqueue_unfinished_work_seconds | ゲージ | コントローラーの workqueue が処理中で、まだ完了していない各 Job の合計経過時間。 |
workqueue_longest_running_processor_seconds | ゲージ | コントローラーの過去の処理における最大処理時間。 |
rest_client_requests_total | カウンター | ステータスコード、メソッド、ホスト別に集計した HTTP リクエスト数。 |
rest_client_request_duration_seconds_bucket | ヒストグラム | メソッドと URL 別に集計した HTTP リクエストレイテンシー。 |
controller_runtime_webhook_requests_in_flight | ゲージ | webhook が処理中のリクエスト数。 |
controller_runtime_webhook_requests_total | カウンター | webhook が処理したリクエスト数。 |
controller_runtime_webhook_latency_seconds_bucket | ヒストグラム | webhook が処理したリクエストのレイテンシー。 |
process_cpu_seconds_total | カウンター | 総 CPU 使用時間。 |
process_resident_memory_bytes | ゲージ | メモリ使用量。 |
次の表に、Fluid JindoRuntime キャッシュシステムのモニタリングダッシュボードで、JindoCache キャッシュシステムサーバーが公開するメトリクスを示します。
メトリクス | タイプ | 説明 |
jindocache_server_total_stsnodes_num | ゲージ | 分散キャッシュで実行中のワーカーコンポーネントのレプリカ数。 |
jindocache_server_total_disk_cap | ゲージ | 分散キャッシュシステムにおける、tmpfs などの RAM ディスクを含むディスクメディア上のキャッシュ容量の上限。 |
jindocache_server_total_used_disk_cap | ゲージ | 分散キャッシュシステムにおける、tmpfs などの RAM ディスクを含むディスクメディア上の使用済みキャッシュ領域。 |
jindocache_server_total_mem_cap | ゲージ | 分散キャッシュシステムにおける、プロセスメモリ内のキャッシュ容量の上限。 |
jindocache_server_total_used_mem_cap | ゲージ | 分散キャッシュシステムにおける、プロセスメモリ内の使用済みキャッシュ領域。 |
jindocache_server_total_used_rocksdb_cap | ゲージ | 分散キャッシュシステムにおける使用済み RocksDB 領域。 |
jindocache_server_backend_read_bytes_total | ゲージ | バックエンドストレージから読み取ったデータの合計量 (バイト)。要求されたデータが JindoCache 分散キャッシュに存在せず、基盤となるストレージシステムから読み取る必要がある場合に、バックエンドストレージからの読み取りが発生します。 |
jindocache_server_backend_read_time_total | ゲージ | バックエンドストレージからデータを読み取るのに要した合計時間 (マイクロ秒)。 |
jindocache_server_backend_readop_num_total | ゲージ | バックエンドストレージからの読み取り操作の合計回数。これは JindoCache キャッシュ内のブロック数に相当します。 |
jindocache_server_backend_read_bytes_time_total_window | ゲージ | 1 分間にバックエンドストレージからデータを読み取るのに要した時間 (マイクロ秒)。 |
jindocache_server_backend_read_bytes_total_window | ゲージ | 1 分間にバックエンドストレージから読み取ったデータの合計量 (バイト)。 |
jindocache_server_remote_read_bytes_total | ゲージ | 同一クラスター内のリモートキャッシュヒットから読み取ったデータの合計量 (バイト)。要求されたデータが JindoCache 分散キャッシュに存在するものの、キャッシュされたデータとアプリケーションが同一ノード上にない場合に、リモートキャッシュヒットが発生します。 |
jindocache_server_remote_read_time_total | ゲージ | 同一クラスター内のリモートキャッシュヒットからデータを読み取るのに要した合計時間 (マイクロ秒)。 |
jindocache_server_remote_readop_num_total | ゲージ | 同一クラスター内のリモートキャッシュヒットからの読み取り回数の合計。 |
jindocache_server_remote_read_bytes_time_total_window | ゲージ | 1 分間にリモートキャッシュヒットからデータを読み取るのに要した合計時間 (マイクロ秒)。 |
jindocache_server_remote_read_bytes_total_window | ゲージ | 1 分間にリモートキャッシュヒットから読み取ったデータの合計量 (バイト)。 |
jindocache_server_local_read_bytes_total | ゲージ | 同一クラスター内のローカルキャッシュヒットから読み取ったデータの合計量 (バイト)。要求されたデータが JindoCache 分散キャッシュに存在し、キャッシュされたデータとアプリケーションが同一ノード上にある場合に、ローカルキャッシュヒットが発生します。 |
jindocache_server_local_read_time_total | ゲージ | 同一クラスター内のローカルキャッシュヒットからデータを読み取るのに要した合計時間 (マイクロ秒)。 |
jindocache_server_local_readop_num_total | ゲージ | 同一クラスター内のローカルキャッシュヒットからの読み取り回数の合計。 |
jindocache_server_local_read_bytes_time_total_window | ゲージ | 1 分間にローカルキャッシュヒットからデータを読み取るのに要した合計時間 (マイクロ秒)。 |
jindocache_server_local_read_bytes_total_window | ゲージ | 1 分間にローカルキャッシュヒットから読み取ったデータの合計量 (バイト)。 |
jindocache_server_ns_filelet_op_count_total | ゲージ | JindoCache マスターコンポーネントがカウントした、getAttr と listStatus 操作を含むファイルメタデータ操作の合計回数。 |
jindocache_server_ns_filelet_op_time_total | ゲージ | JindoCache マスターコンポーネントがカウントした、getAttr と listStatus 操作を含むファイルメタデータ操作の処理に要した合計時間。 |
jindocache_server_ns_get_attr_op_total | ゲージ | JindoCache マスターコンポーネントがカウントした getAttr 操作の合計回数。 |
jindocache_server_ns_get_attr_time_total | ゲージ | JindoCache マスターコンポーネントがカウントした getAttr 操作の処理に要した合計時間。 |
jindocache_server_ns_get_attr_fallback_op_total | ゲージ | JindoCache マスターコンポーネントが基盤となるストレージシステムからファイルメタデータを読み取った合計回数。 |
jindocache_server_ns_list_status_op_total | ゲージ | JindoCache マスターコンポーネントがカウントした listStatus 操作の合計回数。 |
jindocache_server_ns_list_status_time_total | ゲージ | JindoCache マスターコンポーネントがカウントした listStatus 操作の処理に要した合計時間。 |
jindocache_server_ns_list_status_fallback_op_total | ゲージ | JindoCache マスターコンポーネントが基盤となるストレージシステムからファイルリストを読み取った合計回数。 |
jindocache_server_dist_get_attr_op_num_total | ゲージ | JindoCache クライアントがカウントした getAttr 操作の合計回数。 |
jindocache_server_dist_get_attr_time_total | ゲージ | JindoCache クライアントがカウントした getAttr 操作の処理に要した合計時間。 |
jindocache_server_dist_list_dir_op_num_total | ゲージ | JindoCache クライアントがカウントした list_dir 操作の合計回数。 |
jindocache_server_dist_list_dir_time_total | ゲージ | JindoCache クライアントがカウントした list_dir 操作の処理に要した合計時間。 |
次の表に、Fluid JindoRuntime キャッシュシステムのモニタリングダッシュボードで、JindoCache キャッシュシステムの FUSE クライアントが公開するメトリクスを示します。
メトリクス | タイプ | 説明 |
jindo_fuse_open_count | ゲージ | Jindo FUSE クライアントが実行した open 操作の回数。 |
jindo_fuse_open_latency | ゲージ | Jindo FUSE クライアントが実行した open 操作の P50 レイテンシー。 |
jindo_fuse_open_latency_80 | ゲージ | Jindo FUSE クライアントが実行した open 操作の P80 レイテンシー。 |
jindo_fuse_open_latency_90 | ゲージ | Jindo FUSE クライアントが実行した open 操作の P90 レイテンシー。 |
jindo_fuse_open_latency_99 | ゲージ | Jindo FUSE クライアントが実行した open 操作の P99 レイテンシー。 |
jindo_fuse_open_latency_999 | ゲージ | Jindo FUSE クライアントが実行した open 操作の P99.9 レイテンシー。 |
jindo_fuse_open_latency_9999 | ゲージ | Jindo FUSE クライアントが実行した open 操作の P99.99 レイテンシー。 |
jindo_fuse_getattr_count | ゲージ | Jindo FUSE クライアントが実行した getAttr 操作の回数。 |
jindo_fuse_getattr_latency | ゲージ | Jindo FUSE クライアントが実行した getAttr 操作の P50 レイテンシー。 |
jindo_fuse_getattr_latency_80 | ゲージ | Jindo FUSE クライアントが実行した getAttr 操作の P80 レイテンシー。 |
jindo_fuse_getattr_latency_90 | ゲージ | Jindo FUSE クライアントが実行した getAttr 操作の P90 レイテンシー。 |
jindo_fuse_getattr_latency_99 | ゲージ | Jindo FUSE クライアントが実行した getAttr 操作の P99 レイテンシー。 |
jindo_fuse_getattr_latency_999 | ゲージ | Jindo FUSE クライアントが実行した getAttr 操作の P99.9 レイテンシー。 |
jindo_fuse_getattr_latency_9999 | ゲージ | Jindo FUSE クライアントが実行した getAttr 操作の P99.99 レイテンシー。 |
jindo_fuse_readdir_count | ゲージ | Jindo FUSE クライアントが実行した readDir 操作の回数。 |
jindo_fuse_readdir_latency | ゲージ | Jindo FUSE クライアントが実行した readDir 操作の P50 レイテンシー。 |
jindo_fuse_readdir_latency_80 | ゲージ | Jindo FUSE クライアントが実行した readDir 操作の P80 レイテンシー。 |
jindo_fuse_readdir_latency_90 | ゲージ | Jindo FUSE クライアントが実行した readDir 操作の P90 レイテンシー。 |
jindo_fuse_readdir_latency_99 | ゲージ | Jindo FUSE クライアントが実行した readDir 操作の P99 レイテンシー。 |
jindo_fuse_readdir_latency_999 | ゲージ | Jindo FUSE クライアントが実行した readDir 操作の P99.9 レイテンシー。 |
jindo_fuse_readdir_latency_9999 | ゲージ | Jindo FUSE クライアントが実行した readDir 操作の P99.99 レイテンシー。 |
jindo_fuse_read_count | ゲージ | Jindo FUSE クライアントが実行した read 操作の回数。 |
jindo_fuse_read_latency | ゲージ | Jindo FUSE クライアントが実行した read 操作の P50 レイテンシー。 |
jindo_fuse_read_latency_80 | ゲージ | Jindo FUSE クライアントが実行した read 操作の P80 レイテンシー。 |
jindo_fuse_read_latency_90 | ゲージ | Jindo FUSE クライアントが実行した read 操作の P90 レイテンシー。 |
jindo_fuse_read_latency_99 | ゲージ | Jindo FUSE クライアントが実行した read 操作の P99 レイテンシー。 |
jindo_fuse_read_latency_999 | ゲージ | Jindo FUSE クライアントが実行した read 操作の P99.9 レイテンシー。 |
jindo_fuse_read_latency_9999 | ゲージ | Jindo FUSE クライアントが実行した read 操作の P99.99 レイテンシー。 |
jindo_fuse_write_count | ゲージ | Jindo FUSE クライアントが実行した write 操作の回数。 |
jindo_fuse_write_latency | ゲージ | Jindo FUSE クライアントが実行した write 操作の P50 レイテンシー。 |
jindo_fuse_write_latency_80 | ゲージ | Jindo FUSE クライアントが実行した write 操作の P80 レイテンシー。 |
jindo_fuse_write_latency_90 | ゲージ | Jindo FUSE クライアントが実行した write 操作の P90 レイテンシー。 |
jindo_fuse_write_latency_99 | ゲージ | Jindo FUSE クライアントが実行した write 操作の P99 レイテンシー。 |
jindo_fuse_write_latency_999 | ゲージ | Jindo FUSE クライアントが実行した write 操作の P99.9 レイテンシー。 |
jindo_fuse_write_latency_9999 | ゲージ | Jindo FUSE クライアントが実行した write 操作の P99.99 レイテンシー。 |
リファレンス
Fluid データセットについては、「データセット」をご参照ください。
Fluid モニタリングダッシュボードのパラメーターについては、「Fluid モニタリングダッシュボードのパラメーター」をご参照ください。