|
Paramètre |
Type |
Description |
Exemple |
|---|---|---|---|
|
object |
Configuration de l'importation S3. |
||
| advancedParameters |
object |
||
|
any |
|||
| awsAccessKey |
string |
Clé d'accès AWS. |
AKIxxxxxxxxxxYJE |
| awsAccessKeySecret |
string |
Clé secrète d'accès AWS. |
123xxxxxxxxxxfjf |
| awsRegion |
string |
Région S3. |
ap-northeast-1 |
| awsSQSQueueUrl |
string |
URL de la file d'attente SQS. |
https://sqs.ap-northeast-1.amazonaws.com/123456788/chifan |
| awsUseSQS |
boolean |
Indique si SQS doit être utilisé. |
false |
| bucket |
string |
Bucket S3. |
s3bucket |
| cloudFrontEndpoint |
string |
Point de terminaison CloudFront. |
dtfsb7voqy76q.cloudfront.net |
| cloudFrontToken |
string |
Jeton. |
@test-s3-access/ABS |
| compressionCodec |
string |
Le type de compression. Valeurs valides : none, snappy, gzip. |
none |
| encoding |
string |
Le type d'encodage. |
UTF-8 |
| endTime |
integer |
Les fichiers modifiés avant un instant spécifié. |
1714360481 |
| endpoint |
string |
Point de terminaison S3. |
s3.us-east-1.amazonaws.com |
| format |
object |
Le format. |
|
|
any |
Le format. |
{"type": "line"} |
|
| interval |
string |
L'intervalle de vérification des nouveaux fichiers. |
30m |
| pattern |
string |
L'expression régulière utilisée pour filtrer les chemins d'accès aux fichiers. |
.* |
| prefix |
string |
Le préfixe utilisé pour filtrer les chemins d'accès aux fichiers. |
prefix |
| processorId |
string |
L'identifiant du processeur d'écriture. |
ingest-processor-1756802123-953901 |
| startTime |
integer |
Les fichiers modifiés après un instant spécifié. |
1714274081 |
| tagPackId |
boolean |
Indique si la navigation contextuelle doit être prise en charge. |
false |
| timeField |
string |
Le champ de temps à extraire. |
__time__ |
| timeFormat |
string |
Le format du champ de temps. |
yyyy-MM-dd HH:mm:ss |
| timePattern |
string |
L'expression régulière utilisée pour extraire l'heure. |
[0-9]{0,2}\/[0-9a-zA-Z]+\/[0-9:,]+ |
| timeZone |
string |
Le fuseau horaire du champ de temps. |
GMT+08:00 |
| useAwsSQSOnly |
boolean |
Indique si seul SQS doit être utilisé pour récupérer les nouveaux fichiers. |
false |
| useCloudFront |
boolean |
Indique si CloudFront doit être utilisé. |