ストレージの概要は、前日 (T-1) 時点のデータを表示します。ストレージ使用量の推移、ストレージクラスのディストリビューション、テーブルフォーマットのディストリビューション、ファイルサイズのディストリビューションなど、ご利用のストレージとメタデータに関する主要な情報を提供します。これらの情報により、現在のストレージ使用量を迅速に評価し、潜在的な問題を特定し、リソースを最適化することができます。
前提条件
-
Object Storage Service (OSS) が有効化されていること。
-
ロケーションホスティングが Data Lake Formation (DLF) で設定済みであること。
ストレージの概要の有効化
-
DLF コンソールにログインします。
-
左側のナビゲーションウィンドウで、 を選択し、[今すぐ有効化] をクリックしてこの機能を有効化します。
-
ストレージの概要を有効にすると、統計情報が対応する OSS バケットに書き込まれます。この操作により、わずかなストレージコストが発生します。
-
有効化した初日はデータを利用できません。統計情報は翌日に生成され、利用可能になります。
機能
メタデータ分析
総リソース
-
総ストレージ容量と月次/日次変動：メタデータで管理されているすべてのテーブルの総ストレージ容量です。これには OSS 上のストレージのみが含まれ、Hadoop 分散ファイルシステム (HDFS) のストレージは除外されます。
-
テーブル総数と月次/日次変動：メタデータで管理されているすべてのテーブルの総数です。
-
データベース総数と月次/日次変動：メタデータで管理されているすべてのデータベースの総数です。
-
API の月次/日次アクセス量：現在の暦月における API 呼び出しの数です。
トレンドの変化
ストレージ容量、テーブル数、データベース数、API 呼び出しの推移チャートを表示します。特定の期間を選択して分析できます。
テーブルとデータベースのストレージランキング
OSS ストレージ使用量に基づいてテーブルとデータベースをランク付けします。この情報を使用して、ビジネスニーズに基づいて最もストレージを消費しているものを特定し、最適化してください。
左側の [テーブルストレージランキング] パネルには、ランク、テーブル名、テーブルのストレージサイズが表示されます。右側の [データベースストレージランキング] パネルには、ランク、データベース名、データベースのストレージサイズが表示されます。テーブル名またはデータベース名をクリックすると、その詳細が表示されます。
ストレージクラスのディストリビューション
データが、標準 (Standard)、低頻度アクセス (IA)、アーカイブ (Archive)、コールドアーカイブ (Cold Archive) などのさまざまな OSS ストレージクラスにどのように分散されているかを示します。この情報を使用して、データに適したストレージクラスを選択し、コストを最適化してください。
ストレージフォーマットのディストリビューション
分析対象テーブルのストレージフォーマットのディストリビューションを表示します。
ファイルサイズのディストリビューションと小容量ファイルランキング
ファイルサイズのディストリビューションを分析し、小容量ファイル数に基づいてテーブルをランク付けします。このランキングを使用して、多数の小容量ファイルを含むテーブルを特定および最適化し、クエリパフォーマンスを向上させることができます。
ロケーション分析
ストレージとリクエストの推移分析、およびロケーションのストレージランキングを提供します。結果はOSS バケットと期間でフィルターできます。
ロケーションストレージの推移
ロケーションリクエストの推移
ロケーションストレージランキング
[ロケーションストレージランキング] テーブルには、[ランク]、[OSS バケット]、[ストレージサイズ]、[ファイル総数] の 4 つの列が含まれます。各バケットのストレージ使用量とファイル数が、ストレージサイズの降順で一覧表示されます。