|
パラメーター |
タイプ |
説明 |
例 |
|---|---|---|---|
|
object |
S3 インジェスション構成 |
||
| awsRegion |
string |
Amazon S3 リージョン |
ap-northeast-1 |
| awsAccessKey |
string |
Amazon Web Services (AWS) AccessKey ID |
AKIxxxxxxxxxxYJE |
| awsAccessKeySecret |
string |
Amazon Web Services (AWS) シークレットアクセスキー |
123xxxxxxxxxxfjf |
| bucket |
string |
Amazon S3 バケット名 |
s3bucket |
| compressionCodec |
string |
圧縮コーデック。有効な値：none、snappy、gzip |
none |
| encoding |
string |
文字エンコーディング |
UTF-8 |
| interval |
string |
新規ファイルのポーリング間隔 |
30m |
| pattern |
string |
ファイルパスをフィルターする正規表現 |
.* |
| prefix |
string |
ファイルパスをフィルターするプレフィックス |
prefix |
| awsUseSQS |
boolean |
SQS を使用するかどうかを指定します。 |
false |
| awsSQSQueueUrl |
string |
Amazon SQS キュー URL |
https://sqs.ap-northeast-1.amazonaws.com/123456788/chifan |
| useAwsSQSOnly |
boolean |
Amazon SQS のみを使用して新規ファイルを検出します。 |
false |
| tagPackId |
boolean |
コンテキストブラウジングを有効化します。 |
false |
| startTime |
integer |
この UNIX タイムスタンプ以降に変更されたファイルのみを含めます。 |
1714274081 |
| endTime |
integer |
この UNIX タイムスタンプ以前に変更されたファイルのみを含めます。 |
1714360481 |
| timeField |
string |
イベントタイムスタンプを含むフィールドの名前 |
__time__ |
| timeFormat |
string |
タイムフィールド内のタイムスタンプフォーマット |
yyyy-MM-dd HH:mm:ss |
| timePattern |
string |
ファイル名またはコンテンツからタイムスタンプを抽出するための正規表現 |
[0-9]{0,2}\/[0-9a-zA-Z]+\/[0-9:,]+ |
| timeZone |
string |
タイムフィールドのタイムゾーン |
GMT+08:00 |
| processorId |
string |
インジェストプロセッサ ID |
ingest-processor-1756802123-953901 |
| endpoint |
string |
Amazon S3 エンドポイント |
s3.us-east-1.amazonaws.com |
| cloudFrontEndpoint |
string |
CloudFront ディストリビューションのエンドポイント。 |
dtfsb7voqy76q.cloudfront.net |
| cloudFrontToken |
string |
CloudFront エンドポイントへのアクセスに使用する認証トークン。 |
@test-s3-access/ABS |
| useCloudFront |
boolean |
S3 へのアクセスに CloudFront ディストリビューションを使用するかどうかを指定します。 |
|
| format |
object |
フォーマット |
|
|
any |
フォーマット |
{"type": "line"} |
|
| advancedParameters |
object |
||
|
any |