CSV フォーマット：パラメーターとファイルパス - Simple Log Service

Log Service は、ログを OSS に CSV フォーマットで転送できます。デリミタ、エスケープ文字、フィールドマッピングを設定可能です。

重要

ログを OSS に転送する旧バージョンは廃止されました。新バージョンをご参照ください。

パラメーター

転送ルールを設定する際は、ストレージフォーマットを csv に設定し、以下のパラメーターを構成します。

このフォーマットは、CSV 仕様 (RFC 4180) および PostgreSQL CSV ドキュメントに準拠しています。

パラメーター	説明
CSV フィールド	OSS に転送するログフィールドのキーです。キーの順序が CSV の列順になります。生ログタブでフィールドキーを確認できます。また、__time__、__topic__、__source__ などの予約済みフィールドも含めることができます。説明各キーは CSV フィールドに一度のみ指定できます。ログに重複するフィールド名（例：2 つの request_time フィールド）が含まれる場合、Log Service はコンソール上で一方を request_time_0 として表示することがあります。ただし、内部で保存されている実際の名前は request_time のままです。転送ルールを設定する際は、元のフィールド名 request_time を使用してください。フィールド名が重複している場合、システムはランダムにいずれか 1 つの値のみを転送します。結果を確実に予測できるようにするため、フィールド名の重複は避けてください。
デリミタ	フィールドを区切る文字です。サポートされる文字：カンマ (,)、縦棒 (\|)、スペース、タブ。
エスケープ文字	デリミタを含むフィールド値を囲んで、解析エラーを防ぎます。
無効なフィールド	ログエントリ内に CSV フィールドで指定したキーが存在しない場合に使用されるプレースホルダー値です。
出荷済みフィールド	[出荷済みフィールド] スイッチが有効になっている場合、フィールド名が CSV ファイルに含まれます。

OSS ファイルパス

OSS に転送されたログファイルは、以下のパス構造を使用します。

圧縮タイプ	ファイル拡張子	OSS ファイルパスの例	説明
非圧縮	.csv	oss://oss-shipper-shenzhen/ecs_test/2016/01/26/20/54_1453812893059571256_937.csv	任意のテキストエディターで直接ダウンロードして開くことができます。
Snappy	.snappy.csv	oss://oss-shipper-shenzhen/ecs_test/2016/01/26/20/54_1453812893059571256_937.snappy.csv	表示前に解凍する必要があります。Snappy 圧縮ファイルを開く方法をご参照ください。