|
Parâmetro |
Tipo |
Descrição |
Exemplo |
|---|---|---|---|
|
object |
Configuração de ingestão do S3 |
||
| awsRegion |
string |
Região do Amazon S3 |
ap-northeast-1 |
| awsAccessKey |
string |
ID da chave de acesso do Amazon Web Services (AWS) |
AKIxxxxxxxxxxYJE |
| awsAccessKeySecret |
string |
Chave de acesso secreta do Amazon Web Services (AWS) |
123xxxxxxxxxxfjf |
| bucket |
string |
Nome do bucket do Amazon S3 |
s3bucket |
| compressionCodec |
string |
Codec de compactação. Valores válidos: none, snappy, gzip. |
none |
| encoding |
string |
Codificação de caracteres. |
UTF-8 |
| interval |
string |
Intervalo de polling para novos arquivos. |
30m |
| pattern |
string |
Expressão regular para filtrar caminhos de arquivos. |
.* |
| prefix |
string |
Prefixo para filtrar caminhos de arquivos. |
prefix |
| awsUseSQS |
boolean |
Especifica se deve usar o SQS. |
false |
| awsSQSQueueUrl |
string |
URL da fila do Amazon SQS. |
https://sqs.ap-northeast-1.amazonaws.com/123456788/chifan |
| useAwsSQSOnly |
boolean |
Utiliza apenas o Amazon SQS para detectar novos arquivos. |
false |
| tagPackId |
boolean |
Ativa a navegação de contexto. |
false |
| startTime |
integer |
Inclui apenas arquivos modificados após este timestamp Unix. |
1714274081 |
| endTime |
integer |
Inclui apenas arquivos modificados antes deste timestamp Unix. |
1714360481 |
| timeField |
string |
Nome do campo que contém os timestamps dos eventos. |
__time__ |
| timeFormat |
string |
Formato do timestamp no campo de tempo. |
yyyy-MM-dd HH:mm:ss |
| timePattern |
string |
Expressão regular para extrair timestamps de nomes de arquivos ou conteúdo. |
[0-9]{0,2}\/[0-9a-zA-Z]+\/[0-9:,]+ |
| timeZone |
string |
Fuso horário para o campo de tempo. |
GMT+08:00 |
| processorId |
string |
ID do processador de ingestão. |
ingest-processor-1756802123-953901 |
| endpoint |
string |
Endpoint do Amazon S3 |
s3.us-east-1.amazonaws.com |
| cloudFrontEndpoint |
string |
O endpoint para a distribuição do CloudFront. |
dtfsb7voqy76q.cloudfront.net |
| cloudFrontToken |
string |
O token de autenticação para acessar o endpoint do CloudFront. |
@test-s3-access/ABS |
| useCloudFront |
boolean |
Especifica se deve acessar o S3 por meio de uma distribuição do CloudFront. |
|
| format |
object |
Formato. |
|
|
any |
Formato. |
{"type": "line"} |
|
| advancedParameters |
object |
||
|
any |