Cloud Monitor:インフラ監視とオペレーティングシステム監視

収集とレポート

Cloud Monitor のホストプローブは、1 秒に 1 回データをサンプリングし、15 秒ごとにデータポイントに集計します。各データポイントには、最小値 (min)、最大値 (max)、平均値 (avg) の 3 つの値が含まれます。

メトリック

OS 監視メトリックは 15 秒ごとに収集され、次のように分類されます：

• CPU 関連メトリック

  • Windows

    `ntdll` の `NtQuerySystemInformation` 関数を呼び出して、CPU の各部分が費やした時間を取得します。この関数を間隔をあけて 2 回呼び出すことで、その間隔中に CPU の各部分が費やした時間の割合を計算できます。

  • Linux

    次の表のメトリックは、top コマンドの出力に対応します。

  メトリック名	説明	単位	MetricName	ディメンション	統計	説明 (Linux のみ)
  (エージェント) cpu.idle	アイドル状態の CPU の割合。	%	cpu_idle	userId, instanceId	最大値, 最小値, 平均値	CPU がアイドル状態である時間の割合。
  (エージェント) cpu.system	カーネル空間で費やされた CPU 時間の割合。	%	cpu_system	userId, instanceId	最大値, 最小値, 平均値	システムコンテキストスイッチによるオーバーヘッド。高い値は、プロセスやスレッドが多すぎることを示します。
  (エージェント) cpu.user	ユーザースペースで費やされた CPU 時間の割合。	%	cpu_user	userId, instanceId	最大値, 最小値, 平均値	ユーザープロセスによる CPU 消費。
  (エージェント) cpu.wait	I/O 操作の待機に費やされた CPU 時間の割合。	%	cpu_wait	userId, instanceId	最大値, 最小値, 平均値	高い値は、頻繁な I/O 操作を示します。
  (エージェント) cpu.other	他のタスクに費やされた CPU 時間の割合。	%	cpu_other	userId, instanceId	最大値, 最小値, 平均値	その他の消費 = Nice + SoftIrq + Irq + Stolen。
  (エージェント) cpu.total	消費された CPU の合計割合。	%	cpu_total	userId, instanceId	最大値, 最小値, 平均値	CPU 使用率 = 1 - Host.cpu.idle

  説明

  Cloud Monitor の CPU 使用率メトリックには、iowait (wa) 時間が含まれます。アプリケーションが I/O 操作を待ってブロックされている場合、top や htop では特定の高 CPU プロセスが表示されないかもしれませんが、wa 値が上昇しているため、Cloud Monitor の合計 CPU 使用率は高く表示されます。さらに、Cloud Monitor は監視間隔中に収集された集計値 (最大値または平均値) を表示しますが、top はデフォルトでリアルタイムのスナップショットを表示します。Cloud Monitor の読み取り値と一致する一時的な CPU スパイクをキャプチャするには、top -d 0.5 を実行して更新頻度を上げてください。

• メモリ関連メトリック

  • Windows

    `kernel32.dll` の `GlobalMemoryStatusEx` 関数を呼び出して、32 ビット Windows オペレーティングシステムの物理メモリと仮想メモリの現在の使用状況を取得します。

  • Linux

    次の表のメトリックは、free コマンドの出力に対応します。データソースは /proc/meminfo です。

  メトリック	説明	単位	MetricName	ディメンション	統計	説明 (Linux のみ)
  (エージェント) memory.total.space	合計メモリ。	Byte	memory_totalspace	userId, instanceId	最大値, 最小値, 平均値	サーバー上の合計メモリ量。 これは /proc/meminfo の MemTotal に対応します。
  (エージェント) memory.free.space	空きメモリの量。	Byte	memory_freespace	userId, instanceId	最大値, 最小値, 平均値	システムで使用可能なメモリの量。 これは /proc/meminfo の MemFree に対応します。
  (エージェント) memory.used.space	使用済みメモリの量。	Byte	memory_usedspace	userId, instanceId	最大値, 最小値, 平均値	システムで使用されているメモリの量。 計算方法：total - free。
  (エージェント) memory.actualused.space	ユーザーによって消費されたメモリの量。	Byte	memory_actualusedspace	userId, instanceId	最大値, 最小値, 平均値	計算方法： /proc/meminfo に MemAvailable が存在する場合：total - MemAvailable /proc/meminfo に MemAvailable が存在しない場合：used - buffers - cached 説明 CentOS 7.2 や Ubuntu 16.04 以降など、新しい Linux カーネルを使用するシステムでは、メモリの推定がより正確になります。MemAvailable の具体的な意味については、この コミットをご参照ください。
  (エージェント) memory.free.utilization	空きメモリの割合。	%	memory_freeutilization	userId, instanceId	最大値, 最小値, 平均値	計算方法： /proc/meminfo に MemAvailable が存在する場合：(MemAvailable / total) × 100%。 /proc/meminfo に MemAvailable が存在しない場合：((total - actualused) / total) × 100%。
  (エージェント) memory.used.utilization	メモリ使用量。	%	memory_usedutilization	userId, instanceId	最大値, 最小値, 平均値	計算方法： /proc/meminfo に MemAvailable が存在する場合：((total - MemAvailable) / total) × 100%。 /proc/meminfo に MemAvailable が存在しない場合：((total - free - buffers - cached) / total) × 100%。

  説明

  Cloud Monitor のメモリ使用率メトリック (memory.used.utilization) は、バッファ/キャッシュを除外します。これは、数式 (Total − MemAvailable) / Total × 100% (/proc/meminfo で MemAvailable が利用可能な場合) を使用して計算されます。これにより、レガシーな free コマンドの出力 (「Used」の値にシステムキャッシュが含まれる) と比較して、真に利用可能なメモリをより正確に反映します。Cloud Monitor のメモリ使用量と free コマンドの出力との間に不一致が見られる場合、これは想定された動作です。

  説明

  Cloud Monitor には現在、SWAP (スワップ領域) の使用量メトリックは含まれていません。SWAP のモニタリングが必要な場合は、次の代替案を検討してください：

  • 物理メモリ使用量の監視 (memory.used.utilization)：SWAP は通常、物理メモリが不足している場合にのみ多用されます。物理メモリの使用量を監視することで、通常はメモリプレッシャーを検出するのに十分です。

  • Simple Log Service (SLS) によるカスタム SWAP 監視：Simple Log Service (SLS) のホストログローカル収集機能を使用して、インスタンスから SWAP 使用量情報を収集および集計します。

• システム平均負荷メトリック

  • Windows

    この監視メトリックは存在しません。

  • Linux

    次の表のメトリックは、top コマンドの出力に対応します。値が高いほど、システムがビジーであることを示します。

  メトリック名	説明	単位	MetricName	ディメンション	統計
  (エージェント) load.1m	過去 1 分間の平均システム負荷。	なし	load_1m	userId, instanceId	最大値, 最小値, 平均値
  (エージェント) load.5m	過去 5 分間の平均システム負荷。	なし	load_5m	userId, instanceId	最大値, 最小値, 平均値
  (エージェント) load.15m	過去 15 分間の平均システム負荷。	なし	load_15m	userId, instanceId	最大値, 最小値, 平均値
  (エージェント) load.1m.percore	過去 1 分間の CPU コアあたりの平均システム負荷。	なし	load_per_core_1m	userId, instanceId	最大値, 最小値, 平均値
  (エージェント) load.5m.percore	過去 5 分間の CPU コアあたりの平均システム負荷。	なし	load_per_core_5m	userId, instanceId	最大値, 最小値, 平均値
  (エージェント) load.15m.percore	過去 15 分間の CPU コアあたりの平均システム負荷。	なし	load_per_core_15m	userId, instanceId	最大値, 最小値, 平均値

• ディスク関連メトリック

  • Windows

    まず、`Kernel32.dll` の `GetDiskFreeSpaceExA` 関数を呼び出して、利用可能なディスク領域を取得します。これにより、使用済みストレージ領域、ディスク使用率、空きストレージ領域、およびディスクの合計ストレージ領域が提供されます。次に、`RegConnectRegistryA` 関数を呼び出して `HKEY_PERFORMANCE_DATA` レジストリに接続します。最後に、`RegQueryValueExA` 関数を呼び出して、`HKEY_PERFORMANCE_DATA` レジストリからディスク関連のプロパティをクエリします。これらのプロパティには、読み取り回数、書き込み回数、書き込みバイト数、読み取りバイト数、読み取りにかかった時間、書き込みにかかった時間、およびディスク使用時間が含まれます。

  • Linux

    ディスク使用率と inode メトリックは df コマンドの出力に対応します。ディスクの読み取り/書き込みメトリックは iostat コマンドの出力に対応します。

  メトリック	説明	単位	MetricName	ディメンション	統計
  Host.diskusage.used	使用済みディスクストレージ領域。	Byte	diskusage_used	userId, instanceId, device	最大値, 最小値, 平均値
  Host.diskusage.utilization	一般ユーザのディスク使用率。	%	diskusage_utilization	userId, instanceId, device	最大値, 最小値, 平均値
  Host.diskusage.free	一般ユーザとスーパーユーザの空きディスクストレージ領域。	Byte	diskusage_free	userId, instanceId, device	最大値, 最小値, 平均値
  (エージェント) disk.usage.avail_device	一般ユーザの空きディスクストレージ領域。	Byte	diskusage_avail	userId, instanceId, device	最大値, 最小値, 平均値
  Host.diskusage.total	合計ディスクストレージ領域。	Byte	diskusage_total	userId, instanceId, device	最大値, 最小値, 平均値
  (エージェント) disk.read.bps_device	ディスクから 1 秒あたりに読み取られるバイト数。	Byte/s	disk_readbytes	userId, instanceId, device	最大値, 最小値, 平均値
  (エージェント) disk.write.bps_device	ディスクに 1 秒あたりに書き込まれるバイト数。	Byte/s	disk_writebytes	userId, instanceId, device	最大値, 最小値, 平均値
  (エージェント) disk.read.iops_device	ディスクへの 1 秒あたりの読み取りリクエスト数。	counts/s	disk_readiops	userId, instanceId, device	最大値, 最小値, 平均値
  (エージェント) disk.write.iops_device	ディスクへの 1 秒あたりの書き込みリクエスト数。	counts/s	disk_writeiops	userId, instanceId, device	最大値, 最小値, 平均値

• ファイルシステムメトリック

  • Windows

    指定された監視メトリックは存在しません。

  • Linux

    次の表のメトリックは、df コマンドの出力に対応します。

  監視メトリック名	説明	単位	MetricName	ディメンション	統計	説明 (Linux のみ)
  (エージェント) fs.inode.utilization_device	inode 使用率。	%	fs_inodeutilization	userId, instanceId, device	最大値, 最小値, 平均値	Linux は inode 番号でファイルを追跡します。すべての inode が割り当てられると、ディスク領域が残っていても新しいファイルを作成できません。多数の小さなファイルが inode を使い果たす可能性があります。

  説明

  ホストモニタリングの「利用可能なディスク領域」メトリック (diskusage_free) には、ファイルシステムの予約ブロック領域 (Reserved block count) が含まれます。その結果、OS 内の df などのコマンドで表示される利用可能な領域とは値が異なる場合があります。これは想定された動作です。特定のデバイスの予約領域のサイズを調べるには、次のコマンドを実行します：

  tune2fs -l <device>

• ネットワーク関連メトリック

  • Windows

    まず、`iphlpapi.dll` の `GetAdaptersAddresses` 関数を呼び出して、ローカルマシン上のアダプタアドレスを取得します。次に、`GetIfTable` 関数を呼び出して、各インターフェイスのネットワークメトリックを取得します。これらのメトリックには、1 秒あたりの受信ビット数、1 秒あたりの送信ビット数、1 秒あたりの受信パケット数、1 秒あたりの送信パケット数、受信エラーパケット数、および送信エラーパケット数が含まれます。

  • Linux

    • TCP 接続数は ss コマンドの出力に対応します。

      説明

      TCP 接続数には、ECS ホスト上のすべての TCP 接続が含まれます。

      デフォルトでは、TCP_TOTAL (合計接続数)、ESTABLISHED (確立状態の接続)、および NON_ESTABLISHED (非確立状態の接続、ESTABLISHED 以外のすべての状態を含む) の TCP 接続状態が収集されます。

    • 次の表のネットワークトラフィックメトリックは、iftop コマンドの出力に対応します。

  メトリック名	説明	単位	MetricName	ディメンション	統計
  (エージェント) network.in.rate_device	インバウンド NIC 帯域幅 (1 秒あたりの受信ビット数)。	bit/s	networkin_rate	userId, instanceId, device	最大値, 最小値, 平均値
  (エージェント) network.out.rate_device	アウトバウンド NIC 帯域幅 (1 秒あたりの送信ビット数)。	bit/s	networkout_rate	userId, instanceId, device	最大値, 最小値, 平均値
  (エージェント) network.in.packages_device	NIC が 1 秒あたりに受信したパケット数。	packets/s	networkin_packages	userId, instanceId, device	最大値, 最小値, 平均値
  (エージェント) network.out.packages_device	NIC が 1 秒あたりに送信したパケット数。	packets/s	networkout_packages	userId, instanceId, device	最大値, 最小値, 平均値
  (エージェント) network.in.errorpackages_device	デバイスドライバによって検出された受信エラーパケット数。	packets/s	networkin_errorpackages	userId, instanceId, device	最大値, 最小値, 平均値
  (エージェント) network.out.errorpackages_device	デバイスドライバによって検出された送信エラーパケット数。	packets/s	networkout_errorpackages	userId, instanceId, device	最大値, 最小値, 平均値
  (エージェント) network.tcp.connection_state	さまざまな状態の TCP 接続数。LISTEN、SYN_SENT、ESTABLISHED、SYN_RECV、FIN_WAIT1、CLOSE_WAIT、FIN_WAIT2、LAST_ACK、TIME_WAIT、CLOSING、および CLOSED を含みます。	カウント	net_tcpconnection	userId, instanceId, state	最大値, 最小値, 平均値

• 上位 5 つのプロセス関連メトリック

  • Windows

    • クエリ

      まず、`Kernel32.dll` の `OpenProcess` 関数を呼び出してプロセスにアクセスします。`GetProcessTimes` 関数を間隔をあけて 2 回呼び出して、CPU 使用率を計算します。次に、`RegConnectRegistryA` 関数を呼び出して `HKEY_PERFORMANCE_DATA` レジストリに接続します。最後に、`RegQueryValueExA` 関数を呼び出して、レジストリからプロセスプロパティをクエリします。これらのプロパティには、プロセス ID、親プロセス ID、優先度、仮想メモリ、常駐メモリ、共有メモリ、プロセス名、オープンファイル数、スレッド数、ページフォールト、読み取りバイト数、および書き込みバイト数が含まれます。

    • プロセス数 (Host.process.number)

      • `OpenProcess` 関数を呼び出してターゲットプロセスを開きます。`NTDLL` の `NtQueryInformationProcess` 関数を呼び出して `RTL_USER_PROCESS_PARAMETERS` 情報を取得します。`ReadProcessMemory` 関数を呼び出してプロセスのコマンドラインを取得します。このアクションにより、プロセスの引数 (args) とそのルート実行パス (現在の作業ディレクトリ) が取得されます。

      • `OpenProcessToken` 関数を呼び出してアクセストークンハンドルを取得します。`GetTokenInformation` 関数を呼び出してトークン情報を取得します。`LookupAccountSid` 関数を呼び出して、プロセスのユーザー名とユーザーグループを取得します。

      • 各プロセスについて、その引数 (args)、ルート実行パス、ユーザー名、およびユーザーグループがキーワードと照合されます。一致が見つかった場合、カウンターが 1 ずつインクリメントされます。

  • Linux

    • プロセスの CPU とメモリのメトリックは、top コマンドの出力に対応します。CPU 使用率はマルチコアの使用率を反映します。

    • Host.process.openfile は lsof コマンドの出力に対応します。

    • Host.process.number は ps aux | grep '<keyword>' コマンドの出力に対応します。

  メトリック	説明	単位	MetricName	ディメンション	統計	注意
  (エージェント) process.cpu_pid	特定のプロセスによって消費された CPU の割合。	%	process.cpu	userId, instanceId, name, pid	平均値	アラート機能はサポートされていません。
  (エージェント) process.memory_pid	特定のプロセスによって消費されたメモリの割合。	%	process.memory	userId, instanceId, name, pid	平均値	アラート機能はサポートされていません。
  (エージェント) process.openfile_pid	現在のプロセスによって開かれたファイル数。	単位	process.openfile	userId, instanceId, name, pid	平均値	アラート機能はサポートされていません。
  (エージェント) process.count_processname	指定されたキーワードを持つプロセス数。	単位	process.number	userId, instanceId, processName	平均値	アラート機能はサポートされていません。

オペレーティングシステム監視データの表示

1. Cloud Monitor コンソールにログインします。

2. 左側のナビゲーションウィンドウで、[クラウドリソースのモニタリング] > [ホストモニタリング] を選択します。

3. ホストのモニタリング ページで、ターゲットインスタンスの名前をクリックするか、操作 列の モニタリングチャート をクリックします。

   [OS 監視] タブで、OS 監視データを表示します。ホストのアラートルールを作成したり、アラートを表示したりすることもできます。