Simple Log Service (SLS) は、デフォルトで各データ変換ジョブのダッシュボードを作成します。このダッシュボードを使用して、各ジョブの実行メトリクスを表示できます。
ダッシュボードの表示
データ変換ジョブを作成した後、データ変換概要ページでジョブのダッシュボードを表示できます。
Log Serviceコンソールにログインします。
[プロジェクト] セクションで、管理するプロジェクトをクリックします。
左側のナビゲーションウィンドウで、 を選択します。
ダッシュボードパネルは [実行ステータス] セクションに表示されます。ダッシュボードには、概要メトリクス、処理レート、シャードの消費レイテンシーと消費レート、アクティブなシャード、エラー詳細のパネルが含まれます。
概要メトリクス
概要メトリクスは、データ変換ジョブの開始以降、ソース LogStore のすべてのシャードにわたる累積カウントを追跡します。これらの合計値は、ジョブの全体的な進捗と配信の成功を評価するのに役立ちます。
読み取りログ総数 ：ソース LogStore のすべてのシャードから読み取られたログの総数。
配信ログ総数 ：ソース LogStore のすべてのシャードから読み取られ、送信先 LogStore に正常に書き込まれたログの総数。
失敗ログ総数 ：ソース LogStore のすべてのシャードから読み取られ、データ変換中に失敗したログの総数。
配信成功率 ：ソース LogStore から読み取られたログのうち、送信先 LogStore に正常に配信されたログの割合。
処理レート
処理レートは、データ変換が 1 分間のウィンドウ内で処理するログの数を示します。累積合計を示す概要メトリクスとは異なり、処理レートのメトリクスは 1 分あたりのログ結果の内訳を示します。これにより、スループットの変化や一時的な問題を時系列で特定できます。
accept ：ソース LogStore のすべてのシャードから読み取られたログの数。
dropped ：ソース LogStore のすべてのシャードから読み取られ、ルールスクリプトによって想定どおりに破棄されたログの数。
delivered ：ソース LogStore のすべてのシャードから読み取られ、送信先 LogStore に正常に書き込まれたログの数。
failed ：ソース LogStore のすべてのシャードから読み取られ、データ変換中に失敗したログの数。
シャードの消費レイテンシーと消費レート
これらのメトリクスは、データ変換ジョブがソース LogStore からデータを読み取る際に、1 分間のウィンドウ内で収集されるシャードごとのメトリクスです。
消費レイテンシー ：シャード内のすべてのログが消費された時刻と、シャード内の最新のログが生成された時刻の差。どちらの時刻も、シャードデータがサーバー側に到着した時刻 (サーバー受信時刻) から計算されます。
消費レート ：1 分間のウィンドウ内で、シャードから 1 秒あたりに読み取られるログの平均数。
リアルタイムログを処理する場合、消費レイテンシーは GDS 1 秒です。履歴ログデータを処理する場合、ジョブの開始時に消費レイテンシーが高くなることがあります。データ変換が進むにつれて、消費の進捗が追いつき、レイテンシーは低いレベルまで低下します。
アクティブなシャード
アクティブなシャードセクションには、各シャードが 1 秒あたりに処理するログエントリの数が、accept、dropped、delivered、failed のカテゴリ別に表示されます。アクティブなシャードパネルは、これらのデータスループットメトリクスを次の列を持つテーブルに表示します：
project ：シャードが属するプロジェクト。
LogStore ：シャードが属する LogStore。
shard ：シャード ID。
accept lines/s ：1 秒あたりに accept されたログ数。
dropped lines/s ：1 秒あたりに drop されたログ数。
delivered lines/s ：1 秒あたりに deliver されたログ数。
failed lines/s ：1 秒あたりに fail したログ数。
エラー詳細
reason フィールドを使用して、エラーの原因となっている可能性のあるルールスクリプトを特定できます。
エラー詳細ページには、ETL データ変換ジョブのエラーログがテーブル形式で表示されます。テーブルには、time、level、event、logging、etl_context、reason の列が含まれます。
以下に一般的なエラーレコードの例を示します：
イベント
transform_data:init:failと理由ETL config doesn't pass security check, detail: invalid type detected: <class "_ast.Import">。イベント
transform_data:process:batch_failedと理由InternalServerError/sync send error。
現在のプロジェクトの internal-etl-log Logstore でキーワード ERROR または WARNING を検索し、完全なエラーログを表示することもできます。