Elasticsearch：Gunakan fitur CCR dalam skenario pemulihan bencana

Langkah 1: Hubungkan kluster jarak jauh ke kluster lokal

1. Login ke konsol Kibana kluster lokal. Untuk informasi selengkapnya, lihat Login ke konsol Kibana.

2. Pada halaman yang muncul, klik ikon di pojok kiri atas dan pilih Management > Stack Management.

3. Pada panel navigasi kiri halaman Management, klik Remote Clusters.

4. Klik Add A Remote Cluster.

5. Pada halaman yang muncul, tentukan informasi tentang kluster jarak jauh.

   • Name: nama kluster jarak jauh. Nama harus unik.

   • Connection Mode: Aktifkan Use Proxy Mode.

   • Proxy Address: alamat server proxy. Alamat harus dalam format Nama domain titik akhir:9300. Nama domain titik akhir adalah nama domain dari titik akhir yang sesuai dengan layanan titik akhir PrivateLink Anda.

     Catatan

     Saat CCR, Kibana menggunakan alamat IP node data untuk mengakses kluster melalui port TCP 9300. Port HTTP 9200 tidak didukung.

6. Klik Save.

   Setelah disimpan, sistem secara otomatis terhubung ke kluster Leader. Setelah koneksi berhasil, status koneksi menampilkan Connected (Connected).

Contoh penggunaan API

PUT /_cluster/settings 
{
	"persistent": {
		"cluster": {
			"remote": {
				"<remote_cluster>": {
					"mode": "PROXY",
					"proxy_address": "Nama domain titik akhir:9300"
				}
			}
		}
	}
}

Langkah 2: Konfigurasi CCR

1. Buka halaman Management di konsol Kibana kluster lokal. Pada panel navigasi kiri, klik Cross-Cluster Replication.

2. Klik Create A Follower Index.

3. Konfigurasi CCR.

   Parameter	Deskripsi
   Remote Cluster	Kluster jarak jauh yang terhubung ke kluster lokal.
   Leader Index	Indeks yang akan dimigrasikan.
   Follower Index	Indeks tempat Anda ingin mencadangkan data. Anda harus menentukan nama indeks yang unik.

4. Klik Create.

   Setelah indeks pengikut dibuat, indeks tersebut berada dalam status Active.

Contoh penggunaan API

Saat membuat indeks pengikut, Anda harus mereferensikan kluster jarak jauh dan indeks pemimpin yang dibuat dalam kluster jarak jauh.

# Contoh: leader-new-copy adalah nama indeks pengikut yang dibuat dalam kluster lokal untuk menerima data yang direplikasi dari indeks pemimpin dalam kluster jarak jauh.
PUT /leader-new-copy/_ccr/follow
{
  "remote_cluster": "es-leader",
  "leader_index": "leader-old"
}

Langkah 3: Verifikasi hasil pencadangan data

1. Dalam konsol Kibana kluster jarak jauh, jalankan perintah berikut untuk memasukkan data ke dalam indeks pemimpin:

   POST leader-new/_doc/
   {
     "name":"Jack",
     "age":40
   }

2. Dalam konsol Kibana kluster lokal, jalankan perintah berikut untuk memeriksa apakah data yang dimasukkan telah dicadangkan ke indeks pengikut:

   GET leader-new-copy/_search

   Hasil yang ditunjukkan pada gambar berikut dikembalikan. Hasil ini menunjukkan bahwa data dalam indeks pemimpin leader-new kluster jarak jauh telah dicadangkan ke indeks pengikut leader-new-copy kluster lokal.

3. Masukkan dokumen ke dalam indeks pemimpin.

   POST leader-new/_doc/
   {
     "name":"Pony",
     "age":50
   }

4. Jalankan perintah berikut pada kluster lokal untuk memeriksa apakah data inkremental dapat dicadangkan ke indeks pengikut secara real-time:

   GET leader-new-copy/_search

   Keluaran perintah menunjukkan bahwa data inkremental telah dicadangkan ke indeks pengikut.

Langkah 1: Hubungkan kluster jarak jauh ke kluster lokal

1. Login ke konsol Kibana kluster lokal. Untuk informasi selengkapnya, lihat Login ke konsol Kibana.

2. Pada halaman yang muncul, klik ikon di pojok kiri atas dan pilih Management > Stack Management.

3. Pada panel navigasi kiri halaman Management, klik Remote Clusters.

4. Klik Add A Remote Cluster.

5. Pada halaman yang muncul, tentukan informasi tentang kluster jarak jauh.

   • Name: nama kluster jarak jauh. Nama harus unik.

   • Connection Mode: Aktifkan Use Proxy Mode.

   • Proxy Address: alamat server proxy. Alamat harus dalam format Nama domain titik akhir:9300. Nama domain titik akhir adalah nama domain dari titik akhir yang sesuai dengan layanan titik akhir PrivateLink Anda.

     Catatan

     Saat CCR, Kibana menggunakan alamat IP node data untuk mengakses kluster melalui port TCP 9300. Port HTTP 9200 tidak didukung.

6. Klik Save.

   Setelah disimpan, sistem secara otomatis terhubung ke kluster Leader. Setelah koneksi berhasil, status koneksi menampilkan Connected (Connected).

Contoh penggunaan API

PUT /_cluster/settings 
{
	"persistent": {
		"cluster": {
			"remote": {
				"<remote_cluster>": {
					"mode": "PROXY",
					"proxy_address": "Nama domain titik akhir:9300"
				}
			}
		}
	}
}

Langkah 2: Konfigurasi CCR

1. Buka halaman Management di konsol Kibana kluster lokal. Pada panel navigasi kiri, klik Cross-Cluster Replication.

2. Klik Auto-follow Patterns.

3. Klik Create Auto-follow Pattern.

   Konfigurasi CCR. Tabel berikut menjelaskan parameter utama.

   Parameter	Deskripsi
   Remote Cluster	Kluster jarak jauh yang terhubung ke kluster lokal.
   Index Patterns	Pola indeks yang datanya ingin Anda cadangkan. Catatan Pola indeks adalah aturan atau templat yang digunakan untuk mencocokkan sekumpulan nama indeks (misalnya, leader-*). Pola ini biasanya didefinisikan menggunakan wildcard atau ekspresi reguler. Indeks yang cocok dengan pola tersebut akan secara otomatis direplikasi ke kluster lokal.

Contoh penggunaan API

PUT /_ccr/auto_follow/beats 
{
	"remote_cluster": "es-leader",
	"leader_index_patterns": 
	[
		"leader-*"
	],
	"follow_index_pattern": "{{leader_index}}-copy"
}

Langkah 3: Verifikasi hasil pencadangan data

1. Dalam konsol Kibana kluster jarak jauh, jalankan perintah berikut untuk menambahkan indeks:

   PUT /leader-new
   {
     "settings": {
       "number_of_shards": 1,
       "number_of_replicas": 0
     },
     "mappings": {
       "properties": {
         "name": {
           "type": "text"
         },
         "age": {
           "type": "integer"
         }
       }
     }
   }

2. Dalam konsol Kibana kluster lokal, jalankan perintah berikut untuk memeriksa apakah data dalam indeks yang ditambahkan telah dicadangkan ke kluster lokal:

   get _cat/indices?v

   

Persiapan

1. Buat dua kluster Alibaba Cloud Elasticsearch dengan versi yang sama (6.7 atau lebih baru). Pastikan kedua kluster diterapkan dalam VPC yang sama dan termasuk dalam vSwitch yang sama.

   Catatan

   • Kedua kluster digunakan sebagai berikut:

     • Salah satu digunakan sebagai kluster jarak jauh dan menyediakan data sumber.

     • Yang lain digunakan sebagai kluster lokal dan mereplikasi data dari satu atau beberapa indeks dalam kluster jarak jauh.

   • Jika Anda telah mengunggah file sinonim ke kluster jarak jauh, Anda harus mengunggah file sinonim tersebut ke kluster lokal.

2. Konfigurasikan kluster jarak jauh untuk menghubungkannya ke kluster lokal. Untuk informasi selengkapnya, lihat Hubungkan kluster Elasticsearch untuk mengaktifkan pencarian lintas klaster.

3. Buat indeks (indeks pemimpin) dalam kluster jarak jauh.

   1. Login ke konsol Kibana kluster jarak jauh. Untuk informasi selengkapnya, lihat Login ke konsol Kibana.

   2. Pada halaman yang muncul, klik ikon di pojok kiri atas dan pilih Management > Dev Tools).

   3. Jalankan perintah berikut untuk membuat indeks pemimpin dalam kluster jarak jauh:

      PUT myindex
      {
        "settings": {
          "index.soft_deletes.retention.operations": 1024,
          "index.soft_deletes.enabled": true
        }
      }

      Catatan

      • Jika Anda membuat indeks dalam kluster Elasticsearch versi V7.0 atau lebih lama, Anda harus mengaktifkan atribut soft_deletes untuk indeks tersebut. Jika tidak, akan muncul error. Anda dapat menjalankan perintah GET /<yourIndexName>/_settings?pretty untuk memeriksa apakah atribut soft_deletes telah diaktifkan. Jika atribut soft_deletes diaktifkan, konfigurasi atribut soft_deletes akan ditampilkan dalam keluaran perintah.

      • Jika Anda ingin mencadangkan data dalam indeks yang sudah ada, Anda dapat memanggil API reindex untuk mengaktifkan atribut soft_deletes.

4. Nonaktifkan fitur replikasi fisik untuk indeks pemimpin.

   Catatan

   Fitur replikasi fisik diaktifkan secara otomatis untuk indeks dalam kluster Elasticsearch V6.7.0. Sebelum menggunakan CCR, Anda harus menonaktifkan fitur replikasi fisik.

   1. Nonaktifkan indeks.

      POST myindex/_close

   2. Perbarui konfigurasi pengaturan indeks untuk menonaktifkan fitur replikasi fisik.

      PUT myindex/_settings
      {
      "index.replication.type" : null
      }

   3. Aktifkan indeks.

      POST myindex/_open

Langkah 1: Hubungkan kluster jarak jauh ke kluster lokal

1. Login ke konsol Kibana kluster lokal. Untuk informasi selengkapnya, lihat Login ke konsol Kibana.

2. Pada halaman yang muncul, klik ikon di pojok kiri atas dan pilih Management > Stack Management.

3. Pada panel navigasi kiri halaman Management, klik Remote Clusters.

4. Klik Add A Remote Cluster.

5. Pada halaman yang muncul, tentukan informasi tentang kluster jarak jauh.

   • Name: nama kluster jarak jauh. Nama harus unik.

   • Proxy Address: Alamat harus dalam format Alamat IP node dalam kluster jarak jauh:9300. Untuk mendapatkan alamat IP node, login ke konsol Kibana kluster jarak jauh dan jalankan perintah GET /_cat/nodes?v pada tab Console halaman Dev Tools. Node yang Anda tentukan harus mencakup node master khusus kluster jarak jauh. Kami menyarankan agar Anda menentukan beberapa node. Hal ini memastikan Anda tetap dapat menggunakan CCR jika node master khusus yang ditentukan mengalami kegagalan.

     Catatan

     Saat CCR, Kibana menggunakan alamat IP node data untuk mengakses kluster melalui port TCP 9300. Port HTTP 9200 tidak didukung.

6. Klik Save.

   Setelah Anda menyimpan pengaturan, sistem secara otomatis terhubung ke kluster jarak jauh. Saat koneksi berhasil, status koneksi menampilkan Connected (Connected).

Langkah 2: Konfigurasi CCR

1. Buka halaman Management di konsol Kibana kluster lokal. Pada panel navigasi kiri, klik Cross-Cluster Replication.

2. Klik Create A Follower Index.

3. Konfigurasi CCR.

   Parameter	Deskripsi
   Remote cluster	Kluster jarak jauh yang terhubung ke kluster lokal.
   Leader index	Indeks yang datanya ingin Anda cadangkan. Dalam contoh ini, indeks myindex yang dibuat dalam Persiapan digunakan.
   Follower index	Indeks tempat Anda ingin mencadangkan data. Anda harus menentukan nama indeks yang unik.

4. Klik Create.

   Setelah indeks pengikut dibuat, indeks tersebut berada dalam status Active.

Langkah 3: Verifikasi hasil pencadangan data

1. Dalam konsol Kibana kluster jarak jauh, jalankan perintah berikut untuk memasukkan data ke dalam kluster jarak jauh:

   POST myindex/_doc/
   {
     "name":"Jack",
     "age":40
   }

2. Dalam konsol Kibana kluster lokal, jalankan perintah berikut untuk memeriksa apakah data yang dimasukkan telah dicadangkan ke kluster lokal:

   GET myindex_follow/_search

   Hasil yang ditunjukkan pada gambar berikut dikembalikan. Hasil ini menunjukkan bahwa data dalam indeks pemimpin myindex kluster jarak jauh telah dicadangkan ke indeks pengikut myindex_follow kluster lokal.

   Catatan

   Indeks pengikut myindex_follow bersifat read-only. Jika Anda ingin menulis data ke indeks pengikut, ubah terlebih dahulu indeks pengikut menjadi indeks umum. Untuk informasi selengkapnya, lihat Gunakan Elasticsearch CCR untuk memigrasikan data lintas pusat data.

3. Dalam kluster jarak jauh, masukkan catatan data baru untuk memverifikasi apakah data inkremental disinkronkan.

   POST myindex/_doc/
   {
     "name":"Pony",
     "age":50
   }

4. Kueri dokumen yang dimasukkan dalam kluster lokal. Gambar berikut menunjukkan dokumen tersebut.

   Gambar di atas menunjukkan bahwa fitur CCR dapat menerapkan pencadangan data inkremental.

   Catatan

   Anda juga dapat memanggil API untuk fitur CCR guna melakukan operasi replikasi antar kluster. Untuk informasi selengkapnya, lihat Cross-cluster replication APIs.