Elasticsearch:Reindex API を使用したデータ移行

制限事項

• 両方のクラスターが同じリージョンおよびアベイラビリティゾーンにある必要があります。

• 管理およびデプロイモード：v2 クラスターから v3 クラスターへ、2 つの v2 クラスター間、または 2 つの v3 クラスター間でデータを移行できます。

  クラスターには、クラウドネイティブ新管理 (v3) と基本管理 (v2) の 2 つの管理およびデプロイモードがあります。クラスターの管理およびデプロイモードは、コンソール上の情報ページで確認できます。

• クラスターバージョン：データ移行は、同じメジャーバージョンのクラスター間でサポートされます (例：下位のマイナーバージョンから上位のマイナーバージョンへ)。7.7.1 から 8.15.1 のように、メジャーバージョンをまたいだデータ移行は推奨されません。

前提条件

この例では、Reindex API を使用して ES_2 から ES_1 にデータを移行します。開始する前に、次の準備を完了してください。

Reindex API の呼び出し

1. ES_1 の Kibana コンソールにログインします。

2. [Dev Tools] > [コンソール]で、Reindex API を呼び出してデータを移行します。

   POST _reindex
   {
     "source": {
       "remote": {
         "host": "http://ep-bp1bp1****************.epsrv-bp1****************.cn-hangzhou.privatelink.aliyuncs.com:9200",
         "username": "elastic",
         "password": "xxx-xxxx123!"
       },
       "index": "product_info",
       "query": {
         "match": {
           "productName": "Financial Product"
         }
       }
     },
     "dest": {
       "index": "dest"
     }
   }

   カテゴリ	パラメーター	説明
   source	remote	リモートクラスター。この例では ES_2 です。
   	host	ES_2 クラスターのアクセスアドレス。以下を含みます： プロトコル。これはクラスターの 基本情報 ページで確認できます。 重要 セキュリティのため、クラスターに接続する際にパスワードがプレーンテキストで送信されるのを防ぐには、HTTPS プロトコルを使用します。HTTPS プロトコルを有効にするには、「HTTPS プロトコル」をご参照ください。 ドメイン名：ES_2 クラスターのプライベート接続アドレス。これは Reindex ホワイトリストで設定したドメイン名と同じでなければなりません。 ポート：9200 に固定されています。
   	username	クラスターのデフォルトのユーザー名は `elastic` です。
   	password	指定されたユーザーのパスワード。 パスワードはクラスター作成時に設定しました。忘れた場合は、パスワードをリセットできます。
   	index	リモートクラスターのソースインデックス。
   	query	移行するドキュメントを指定するクエリ。 この例では、`productName` フィールドに「Financial Product」が含まれるドキュメントが、ES_2 クラスターのインデックスから ES_1 クラスターに移行されます。
   dest	index	移行されたデータの送信先となるターゲットクラスター内のインデックス。

   リクエストが成功すると、次の結果が返されます：

   {
     "took": 211,
     "timed_out": false,
     "total": 6,
     "updated": 6,
     "created": 0,
     "deleted": 0,
     "batches": 1,
     "version_conflicts": 0,
     "noops": 0,
     "retries": {
       "bulk": 0,
       "search": 0
     },
     "throttled_millis": 0,
     "requests_per_second": -1,
     "throttled_until_millis": 0,
     "failures": []
   }

3. _search API を呼び出して移行結果を表示します。

   GET dest/_search

   期待される結果：

   {
     "took": 6,
     "timed_out": false,
     "_shards": {
       "total": 5,
       "successful": 5,
       "skipped": 0,
       "failed": 0
     },
     "hits": {
       "total": {
         "value": 6,
         "relation": "eq"
       },
       "max_score": 1,
       "hits": [
         {
           "_index": "dest",
           "_id": "n9kyqpcBCRuDZhswJCpH",
           "_score": 1,
           "_source": {
             "productName": "Financial Product D",
             "annual_rate": "3.1200%",
             "describe": "A 90-day regular investment product with a minimum investment of 12,000. Daily profit notifications are sent."
           }
         },
         {
           "_index": "dest",
           "_id": "nNkyqpcBCRuDZhswJCpG",
           "_score": 1,
           "_source": {
             "productName": "Financial Product A",
             "annual_rate": "3.2200%",
             "describe": "A 180-day fixed-term product with a minimum investment of 20,000. Stable returns with optional message notifications."
           }
         },
         {
           "_index": "dest",
           "_id": "ndkyqpcBCRuDZhswJCpG",
           "_score": 1,
           "_source": {
             "productName": "Financial Product B",
             "annual_rate": "3.1100%",
             "describe": "A 90-day regular investment product with a minimum investment of 10,000. Daily profit notifications are sent."
           }
         },
         {
           "_index": "dest",
           "_id": "ntkyqpcBCRuDZhswJCpH",
           "_score": 1,
           "_source": {
             "productName": "Financial Product C",
             "annual_rate": "3.3500%",
             "describe": "A 270-day regular investment product with a minimum investment of 40,000. Daily profit notifications are sent."
           }
         },
         {
           "_index": "dest",
           "_id": "oNkyqpcBCRuDZhswJCpH",
           "_score": 1,
           "_source": {
             "productName": "Financial Product E",
             "annual_rate": "3.0100%",
             "describe": "A recommended 30-day regular investment product with a minimum investment of 8,000. Daily profit notifications are sent."
           }
         },
         {
           "_index": "dest",
           "_id": "odkyqpcBCRuDZhswJCpH",
           "_score": 1,
           "_source": {
             "productName": "Financial Product F",
             "annual_rate": "2.7500%",
             "describe": "A popular 3-day short-term product with no fees and a minimum investment of 500. Profit notifications are sent via SMS."
           }
         }
       ]
     }
   }

よくある質問