Simple Log Service:データ解析プラグイン

生ログ

解析プラグインなし

正規表現解析プラグインあり

127.0.0.1 - - [16/Aug/2024:14:37:52 +0800] "GET /wp-admin/admin-ajax.php?action=rest-nonce HTTP/1.1" 200 41 "http://www.example.com/wp-admin/post-new.php?post_type=page" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/127.0.0.0 Safari/537.36 Edg/127.0.0.0"

Content: "127.0.0.1 - - [16/Aug/2024:14:37:52 +0800] "GET /wp-admin/admin-ajax.php?action=rest-nonce HTTP/1.1" 200 41 "http://www.example.com/wp-admin/post-new.php?post_type=page" "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/127.0.0.0 Safari/537.36 Edg/127.0.0.0""

正規表現: (\S+)\s-\s(\S+)\s\[([^]]+)]\s"(\w+)\s(\S+)\s([^"]+)"\s(\d+)\s(\d+)\s"([^"]+)"\s"([^"]+).*.

body_bytes_sent: 41
http_referer: http://www.example.com/wp-admin/post-new.php?post_type=page
http_user_agent: Mozilla/5.0 (Windows NT 10.0; Win64; ×64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/127.0.0.0 Safari/537.36 Edg/127.0.0.0
remote_addr: 127.0.0.1
remote_user: -
request_method: GET
request_protocol: HTTP/1.1
request_uri: /wp-admin/admin-ajax.php?action=rest-nonce
status: 200
time_local: 16/Aug/2024:14:37:52 +0800

プラグイン

タイプ

説明

正規表現解析

ネイティブ

正規表現を使用してフィールドを抽出し、キーと値のペアに変換します。

JSON 解析

ネイティブ

JSON 形式のログをキーと値のペアに解析します。

区切り文字ベースの解析

ネイティブ

区切り文字に基づいてログを構造化します。

Nginx モード解析

ネイティブ

Nginx アクセスログを解析します。

Apache モード解析

ネイティブ

Apache アクセスログを解析します。

IIS モード解析

ネイティブ

IIS アクセスログを解析します。

パラメーター

説明

ソースフィールド

解析前のログコンテンツを含むソースフィールド。デフォルト値は content です。

正規表現

ログに一致させるために使用される正規表現。

• 処理構成でログサンプルを構成した場合、ログサンプルは正規表現解析プラグイン設定に表示されます。その後、正規表現を自動または手動で生成できます。

  • [正規表現を自動生成] をクリックします。[ログサンプル] テキストボックスで、抽出するログコンテンツを選択し、[正規表現を生成] をクリックします。Simple Log Service は、選択に基づいて正規表現を生成します。

  • [正規表現を手動で入力] をクリックして正規表現を入力します。構成が完了したら、[テスト] をクリックして、正規表現がターゲットログコンテンツを解析および抽出できるかどうかを確認します。詳細については、「正規表現をテストする方法」をご参照ください。

• ログサンプルを構成していない場合は、正規表現を手動で入力する必要があります。

抽出されたログフィールド

抽出された各ログ値にキーを設定します。

解析失敗時にソースフィールドを保持

[解析失敗時にソースフィールドを保持] を選択すると、解析が失敗した場合でもソースフィールドは保持されます。

解析成功時にソースフィールドを保持

[解析成功時にソースフィールドを保持] を選択すると、解析が成功したときにソースフィールドは保持されます。

名前変更されたソースフィールド

[解析失敗時にソースフィールドを保持] または [解析成功時にソースフィールドを保持] を選択した後、ソースフィールドの名前を変更できます。

パラメーター

説明

NGINX ログ構成

Nginx 構成ファイルのログ構成セクション。[log_format] で始まります。例:

log_format main  '$remote_addr - $remote_user [$time_local] "$request" '
                 '$request_time $request_length '
                 '$status $body_bytes_sent "$http_referer" '
                 '"$http_user_agent"';

ソースフィールド

解析前のログコンテンツを含むソースフィールド。デフォルト値は content です。

抽出されたログフィールド

ログキーは、[NGINX ログ構成] に基づいて自動的に抽出されます。

解析失敗時にソースフィールドを保持

[解析失敗時にソースフィールドを保持] を選択すると、解析が失敗した場合にソースフィールドは保持されます。

解析成功時にソースフィールドを保持

[解析成功時にソースフィールドを保持] を選択すると、解析が成功したときにソースフィールドは保持されます。

名前変更されたソースフィールド

[解析失敗時にソースフィールドを保持] または [解析成功時にソースフィールドを保持] を選択した後、ソースフィールドの名前を変更できます。

パラメーター

説明

ログ形式

Apache ログ構成ファイルで定義されているログ形式。オプションには、common、combined、custom があります。

APACHE 構成フィールド

Apache 構成ファイルのログ構成セクション。通常は LogFormat で始まります。

• [ログ形式] を [common] または [combined] に設定すると、対応する構成フィールドが自動的に入力されます。Apache 構成ファイルで定義されている形式と一致することを確認する必要があります。

• [ログ形式] を [カスタム] に設定する場合は、形式を入力する必要があります。例: LogFormat "%h %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\" %D %f %k %p %q %R %T %I %O" customized。

ソースフィールド

解析前のログコンテンツを含むソースフィールド。デフォルト値は content です。

正規表現

Apache ログを抽出するために使用される正規表現です。Simple Log Service は、[APACHE 設定フィールド] のコンテンツに基づいてこの正規表現を自動的に生成します。

抽出されたログフィールド

ログキーは、[APACHE 構成フィールド] の内容に基づいて自動的に生成されます。

解析失敗時にソースフィールドを保持

[解析失敗時にソースフィールドを保持] を選択すると、解析が失敗した場合にソースフィールドは保持されます。

解析成功時にソースフィールドを保持

[解析成功時にソースフィールドを保持] を選択すると、解析が成功したときにソースフィールドは保持されます。

名前変更されたソースフィールド

[解析失敗時にソースフィールドを保持] または [解析成功時にソースフィールドを保持] を選択した後、ソースフィールドの名前を変更できます。

パラメーター

説明

ログ形式

IIS サーバーで使用されるログ形式。

• IIS: Microsoft IIS ログファイル形式。

• NCSA: NCSA 共通ログファイル形式。

• W3C: W3C 拡張ログファイル形式。

IIS 構成フィールド

IIS 構成フィールド。

• ログ形式が IIS または NCSA の場合、Simple Log Service はデフォルトで IIS 構成フィールドを設定します。

• ログ形式が W3C の場合、このパラメーターを IIS 構成ファイルの logExtFileFlags パラメーターの内容に設定します。例:

  logExtFileFlags="Date, Time, ClientIP, UserName, SiteName, ComputerName, ServerIP, Method, UriStem, UriQuery, HttpStatus, Win32Status, BytesSent, BytesRecv, TimeTaken, ServerPort, UserAgent, Cookie, Referer, ProtocolVersion, Host, HttpSubStatus"

  • IIS 5 構成ファイルのデフォルトパス: C:\WINNT\system32\inetsrv\MetaBase.bin。

  • IIS 6 構成ファイルのデフォルトパス: C:\WINDOWS\system32\inetsrv\MetaBase.xml。

  • IIS 7 構成ファイルのデフォルトパス: C:\Windows\System32\inetsrv\config\applicationHost.config。

ソースフィールド

解析前のログコンテンツを含むソースフィールド。デフォルト値は content です。

正規表現

IIS ログを抽出するために使用される正規表現。Simple Log Service は、[IIS 構成フィールド] の内容に基づいてこの正規表現を自動的に生成します。

抽出されたログフィールド

ログキーは、[IIS 構成フィールド] の内容に基づいて自動的に生成されます。

解析失敗時にソースフィールドを保持

[解析失敗時にソースフィールドを保持] を選択すると、解析が失敗したときにソースフィールドは保持されます。

解析成功時にソースフィールドを保持

[解析成功時にソースフィールドを保持] を選択すると、解析が成功した後にソースフィールドは保持されます。

名前変更されたソースフィールド

[解析失敗時にソースフィールドを保持] または [解析成功時にソースフィールドを保持] を選択した後、ソースフィールドの名前を変更できます。