Elasticsearch:クロスリージョン ES データレプリケーション

ステップ 1：クロスリージョン VPC の接続

CEN を使用して、リーダークラスターおよびフォロワークラスターが配置されている VPC を接続します。詳細な手順については、「クロスリージョンでの VPC 接続」をご参照ください。

ステップ 2：リーダークラスターのプライベート IP の取得

1. Alibaba Cloud Elasticsearch コンソールにログインします。

2. リーダークラスターの基本情報ページで、内部エンドポイントフィールドを見つけ、そのドメイン名をコピーします。

3. 同一 VPC 内の ECS インスタンスで、次のコマンドを実行してリーダークラスターのプライベート IP アドレスを解決します。

   ping <private_domain_of_the_leader_cluster>

   解決された IP アドレスを後ほど使用するために記録しておきます。

ステップ 3：NLB およびサーバーグループの作成

フォロワークラスターの VPC 内に NLB インスタンスを作成し、リーダークラスターへのトラフィックを転送します。

1. Network Load Balancer (NLB) コンソールにログインします。

2. サーバーグループを作成します。

   1. 左側のナビゲーションウィンドウで、[サーバーグループ] をクリックします。

   2. [サーバーグループの作成] をクリックし、次のパラメーターを設定します。

      パラメーター	説明
      [サーバーグループタイプ]	[IP] を選択します。
      ポート転送	[すべてのポートを転送] を有効にします。
      ヘルスチェック	ポートを 9300 に設定します。

   3. 作成したサーバーグループで、[バックエンドサーバーの追加] をクリックし、ステップ 2 で取得したリーダークラスターのプライベート IP アドレスを追加します。ポートはデフォルト値のままにしてください。

3. NLB インスタンスおよびリスナーを作成します。

   すでに NLB インスタンスがある場合は、直接リスナーを作成できます。そうでない場合は、NLB インスタンスを作成し、リスナーの構成はスキップしてください。

   1. 左側のナビゲーションウィンドウで、[インスタンス] をクリックします。NLB インスタンスを選択するか、新規作成します。

   2. インスタンスの詳細ページで、[リスナー] タブをクリックし、[リスナーの作成] をクリックします。

   3. [すべてのポート] 機能を有効にし、リスナーポート範囲を 9200-9300 に設定します。

   4. [サーバーグループ] では、[IP] および前のステップで作成したサーバーグループを選択します。

ステップ 4：PrivateLink の構成

PrivateLink を使用して、フォロワークラスターの管理 VPC からリーダークラスターへのネットワーク接続を確立します。

1. PrivateLink コンソールにログインします。

2. エンドポイントサービスを作成します。

   1. 左側のナビゲーションウィンドウで、[エンドポイントサービス] をクリックします。

   2. [エンドポイントサービスの作成] をクリックし、次のパラメーターを設定します。

      パラメーター	説明
      サービスリソースタイプ	[NLB] を選択します。
      サービス リソース	ステップ 3 で作成または使用した NLB インスタンスを選択します。
      可用性ゾーン	NLB インスタンスが配置されている可用性ゾーンを選択します。
      [エンドポイント接続を自動承諾]	[はい] を選択します。

3. フォロワークラスターのプライベート接続を追加します。

   1. Alibaba Cloud Elasticsearch コンソールにログインし、フォロワークラスターインスタンスの詳細ページに移動します。

   2. 左側のナビゲーションウィンドウで、設定と管理 ＞ セキュリティ設定 を選択します。

   3. クラスターネットワーク設定 セクションで、プライベート接続の設定 をクリックします。

   4. プライベート接続の追加 をクリックし、作成したエンドポイントサービスを選択します。

   5. 接続ステータスが 接続済み に変化するまで待ちます。

4. PrivateLink ドメイン名を取得します。

   接続が確立されたら、PrivateLink コンソールに戻ります。エンドポイントサービスの エンドポイントの接続ステータス タブで、自動的に作成されたエンドポイント接続を見つけます。この接続のドメイン名が、後ほどリモートクラスターを構成する際に使用する PrivateLink ドメイン名です。

ステップ 5：クラスター間レプリケーション (CCR) の構成

1. フォロワークラスターの Kibana コンソールにアクセスします。詳細については、「インターネット経由での Kibana コンソールへのログイン (v2 または v3 アーキテクチャのインスタンス向け)」をご参照ください。

   フォロワークラスターのインスタンス詳細ページで、左側のナビゲーションウィンドウの [可視化コントロール] をクリックし、[Kibana にアクセス] をクリックします。

2. リモートクラスターを追加します。

   1. Kibana の左側のナビゲーションウィンドウで、[スタック管理] をクリックします。

   2. [データ] セクションで、[リモートクラスター] をクリックします。

   3. [リモートクラスターの追加] をクリックし、以下のパラメーターを設定します。

      パラメーター	説明
      [名前]	リーダークラスターのインスタンス ID を入力します。
      プロキシモード	プロキシモードを有効にします。
      [プロキシアドレス]	ステップ 4 で取得した PrivateLink ドメイン名を入力します。形式は <domain_name>:9300 です。

   4. [保存] をクリックし、接続ステータスが [接続済み] であることを確認します。

3. CCR レプリケーションモードを構成します。

   CCR は次の 2 種類のレプリケーションモードをサポートしています。

   モード	説明
   フォロワーインデックス	指定された単一のインデックスをレプリケートします。
   オートフォローパターン	指定されたインデックス名パターンに一致するインデックスを自動的にレプリケートします。このモードはバッチ同期に適しています。 オートフォローパターンを作成すると、リーダークラスター内の新しいインデックスが自動的にフォロワークラスターにレプリケートされます。既存のインデックスは自動的にレプリケートされません。既存のインデックスをレプリケートするには、手動でそのインデックスのフォロワーインデックスを作成する必要があります。

   以下の手順では、オートフォローパターンの構成方法を示します。

   1. [スタック管理] で、[クラスター間レプリケーション] をクリックします。

   2. [オートフォローパターン] タブをクリックし、[オートフォローパターンの作成] をクリックします。

   3. [リモートクラスター] では、直前に追加したリモートクラスターを選択します。[インデックスパターン] には、すべてのインデックスをレプリケートする場合は * を入力します。特定のインデックスをレプリケートする場合は、logs-* のような名前パターンを入力します。

   4. [作成] をクリックします。

ステップ 6：データレプリケーションの検証

1. 既存データのレプリケーションを検証します。

   フォロワークラスターの Kibana コンソールで、次のコマンドを実行してレプリケートされたインデックスをクエリします。

   GET /<index_name>/_search

   返された結果がリーダークラスターのデータと一致する場合、既存データのレプリケーションは成功しています。

2. 増分データのレプリケーションを検証します。

   1. リーダークラスターの Kibana コンソールで、新しいインデックスを作成し、ドキュメントを書き込みます。

      PUT /test-increment-index
      
      POST /test-increment-index/_doc
      {
          "title": "increment test",
          "content": "This is a test document for CCR incremental sync."
      }

   2. フォロワークラスターの Kibana コンソールで、新しいインデックスをクエリします。

      GET /test-increment-index/_search

      返されたドキュメントの内容が書き込んだドキュメントと同じである場合、増分データがニアリアルタイムでレプリケートされています。