Elasticsearch:elasticsearch-dump を使用したデータの移行

前提条件

• Alibaba Cloud Elasticsearch クラスタが作成されている。詳細については、Alibaba Cloud Elasticsearch クラスタの作成をご参照ください。

• 宛先の Alibaba Cloud Elasticsearch クラスタで自動インデックス作成機能が有効になっているか、Alibaba Cloud Elasticsearch クラスタにインデックスが作成されている。自動インデックス作成機能の有効化方法の詳細については、YML ファイルの設定をご参照ください。

• Elastic Compute Service (ECS) インスタンスが作成されている。ECS インスタンスは、elasticsearch-dump のインストールに使用されます。詳細については、ウィザードを使用したインスタンスの作成をご参照ください。

ユースケース

elasticsearch-dump は、インデックス数が少ないシナリオで少量のデータを移行するために使用されます。

elasticsearch-dump のインストール

1. ECS インスタンスに接続します。

   詳細については、パスワードまたはキーを使用した Linux インスタンスへの接続をご参照ください。

2. Node.js をインストールします。

   1. インストール パッケージをダウンロードします。

      wget https://nodejs.org/dist/v16.18.0/node-v16.18.0-linux-x64.tar.xz

   2. パッケージを解凍します。

      tar -xf node-v16.18.0-linux-x64.tar.xz

   3. 環境変数を設定します。

      • 環境変数を一時的に有効にする場合は、次のコマンドを実行します。

        export PATH=$PATH:/root/node-v16.18.0-linux-x64/bin/

      • 環境変数を永続的に有効にする場合は、次のコマンドを実行します。

        vim ~/.bash_profile
        export PATH=$PATH:/root/node-v16.18.0-linux-x64/bin/
        source ~/.bash_profile

3. elasticsearch-dump をインストールします。

   npm install elasticdump -g

例

Alibaba Cloud Elasticsearch クラスタへのデータの移行

• インデックスの設定を移行する

  elasticdump --input=http://"<UserName>:<YourPassword>"@<YourEsHost>/<YourEsIndex> --output=http://"<OtherName>:<OtherPassword>"@<OtherEsHost>/<OtherEsIndex> --type=settings

• インデックスのマッピングを移行する

  elasticdump --input=http://"<UserName>:<YourPassword>"@<YourEsHost>/<YourEsIndex> --output=http://"<OtherName>:<OtherPassword>"@<OtherEsHost>/<OtherEsIndex> --type=mapping

• インデックスのドキュメントを移行する

  elasticdump --input=http://"<UserName>:<YourPassword>"@<YourEsHost>/<YourEsIndex> --output=http://"<OtherName>:<OtherPassword>"@<OtherEsHost>/<OtherEsIndex> --type=data

オンプレミス マシンへのデータの移行

• インデックスの設定を移行する

  elasticdump --input=http://"<UserName>:<YourPassword>"@<YourEsHost>/<YourEsIndex> --output=<YourLocalFile> --type=settings

• インデックスのマッピングを移行する

  elasticdump --input=http://"<UserName>:<YourPassword>"@<YourEsHost>/<YourEsIndex> --output=<YourLocalFile> --type=mapping

• インデックスのドキュメントを移行する

  elasticdump --input=http://"<UserName>:<YourPassword>"@<YourEsHost>/<YourEsIndex> --output=<YourLocalFile> --type=data

• クエリに基づいてデータを移行する

  elasticdump --input=http://"<UserName>:<YourPassword>"@<YourEsHost>/<YourEsIndex> --output=<YourLocalFile> ----searchBody="<YourQuery>"

オンプレミス マシンから Alibaba Cloud Elasticsearch クラスタへのデータの復元

elasticdump --input=<YourLocalFile> --output=http://"<UserName>:<YourPassword>"@<YourEsHost>/<YourEsIndex> --type=data

その他のデータ移行シナリオの詳細については、elasticsearch-dump の公式ドキュメントをご参照ください。

FAQ