OpenSearch:DataSource

{
  "tableName": "news",
  "type": "rds",
  "fields": [
    { "id": "id" },
    { "caption": "caption" },
    { "content": "content" },
    { "categoryId": "category_id" }
  ],
  "plugins": {
    "caption": {
      "name": "HTMLTagRemover",
      "parameters": {}
    },
    "content": {
      "name": "HTMLTagRemover",
      "parameters": {}
    }
  },
  "keyField": "id",
  "parameters": {
    "filter": "",
    "instanceId": "rm-abc",
    "dbName": "my_db",
    "dbTableName": "my_table",
    "dbUser": "my_user",
    "dbPassword": "my-password",
    "autoSync": true
  }
}

{
  "name": "HTMLTagRemover",
  "parameters": {}
}

JsonKeyValueExtractor

Extrait la valeur d'une clé spécifiée depuis un champ source contenant du JSON. La valeur extraite est écrite dans le champ de destination. Une seule clé peut être extraite par instance de plug-in.

{
  "key": "my_field"
}

MultiValueSpliter

Divise la valeur d'un champ source en plusieurs valeurs à l'aide d'un délimiteur. Les valeurs résultantes sont écrites sous forme d'éléments de tableau dans le champ de destination.

Le champ de destination doit être de type ARRAY . Pour utiliser un caractère non imprimable comme délimiteur, spécifiez-le sous forme de séquence d'échappement Unicode (par exemple, \u001D ).

{
  "seperator": "|"
}

KeyValueExtractor

Extrait la valeur d'une clé spécifiée depuis un champ source contenant des paires clé-valeur. La valeur extraite est écrite dans le champ de destination. Les délimiteurs sont facultatifs.

{
  "key": "my_field",
  "fieldSep": ";",
  "kvSep": ":"
}

StringCatenateExtractor

Concatène les valeurs de plusieurs champs de destination en une seule chaîne à l'aide d'un connecteur spécifié, et écrit le résultat dans le champ cible.

Ce plug-in ne peut pas concaténer des champs de types entiers. Nous vous recommandons d'utiliser des champs de types littéraux. Tous les champs répertoriés dans sources doivent être des champs de destination.

{
  "connector": "-",
  "sources": "id,title"
}

HTMLTagRemover

Supprime les balises HTML de la valeur d'un champ source et écrit le résultat en texte brut dans le champ de destination. Aucun paramètre supplémentaire n'est requis.

rds

Se connecte à une instance ApsaraDB RDS.

{
  "instanceId": "rds-instance-id",
  "dbName": "my_db",
  "dbTableName": "my_table",
  "dbUser": "my_user",
  "dbPassword": "my_passwd",
  "filter": "",
  "autoSync": true
}

odps

Se connecte à une table MaxCompute (ODPS).

{
  "projectName": "my_project",
  "tableName": "my_table",
  "partition": "",
  "done": "no",
  "donePrefix": "",
  "timestamp": ""
}

opensearch

Utilise une autre application Open Search comme source de données.

{
  "appId": "12345678",
  "tableName": "my_table",
  "appType": "standard",
  "filter": ""
}

polardb

Se connecte à un cluster PolarDB.

{
  "clusterId": "my_cluster_id",
  "dbName": "my_db",
  "dbTableName": "my_table",
  "aliyunUserId": "123455789",
  "dbUser": "my_user",
  "dbPassword": "my_passwd",
  "autoSync": true,
  "filter": "id>100"
}