Hologres：Multi-cluster dan Penyesuaian Skala Otomatis (Beta)

Multi-cluster

• Kasus penggunaan ideal: Permintaan konkurensi tinggi dengan kueri kecil hingga sedang. Multi-cluster unggul dalam memanfaatkan isolasi klaster dan penyeimbangan beban FE Node, mendukung lebih banyak permintaan konkuren serta mengisolasi beban kerja secara otomatis untuk performa yang lebih baik.

• Tidak cocok untuk: Tugas besar dengan konkurensi rendah. Skenario seperti ingest data batch berskala besar (gudang data virtual 2 di Cara Kerjanya) lebih cocok untuk kemampuan skalabilitas vertikal. Pertimbangkan penjadwalan penskalaan manual atau terjadwal untuk mengalokasikan lebih banyak sumber daya ke satu klaster yang kuat.

Penyesuaian Skala Otomatis

Kasus penggunaan ideal:

• Permintaan konkurensi tinggi dengan kueri kecil hingga sedang: Lihat kasus penggunaan ideal Multi-cluster.

• Puncak beban kerja yang tidak dapat diprediksi: Permintaan ini tidak dapat dikelola secara efektif dengan penambahan klaster manual atau penjadwalan penskalaan.

Prosedur

1. Masuk ke Konsol Manajemen Hologres. Di bilah menu atas, pilih wilayah.

2. Di menu kiri, pilih Instances. Klik ID instans target Anda untuk masuk ke halaman detail.

3. Di submenu kiri, klik Virtual Warehouse Management. Pada halaman yang muncul, klik tab Auto-scaling.

4. Aktifkan Enable Auto Scaling. Atur Maximum Clusters dan klik Save.

Contoh

Setelah mengaktifkan Penyesuaian Skala Otomatis seperti yang ditunjukkan di atas (dengan spesifikasi satu klaster sebesar 32 CU, 1 klaster tersedia, dan maksimal 4 klaster), verifikasi fungsinya sebagai berikut. Contoh ini menggunakan pgbench, alat uji stres performa asli untuk PostgreSQL.

1. Buat tabel uji di Hologres dan muat data.

   CREATE TABLE tbl_1 (col1 int, col2 int, col3 text);
   CREATE TABLE tbl_2 (col1 int, col2 int, col3 text);
   INSERT INTO tbl_1 SELECT i, i+1, md5(random()::text) FROM generate_series (0, 500000) AS i;
   INSERT INTO tbl_2 SELECT i, i+1, md5(random()::text) FROM generate_series (0, 500000) AS i;

2. Di server uji stres, buat file SQL bernama select.sql dan tambahkan pernyataan SQL berikut:

   EXPLAIN ANALYZE SELECT * FROM tbl_1 LEFT JOIN tbl_2 ON tbl_1.col3 = tbl_2.col3 ORDER BY 1;

3. Di server uji stres, atur kata sandi sebagai variabel lingkungan.

   export PGPASSWORD='<AccessKey_Secret>'

4. Jalankan perintah uji stres berikut. Untuk detailnya, lihat Hubungkan ke Instans Hologres untuk Pengembangan Data.

   pgbench
   -c 30 \
   -j 30 \
   -f select.sql \
   -d <Database> \
   -U <AccessKey_ID> \
   -h <Endpoint> \
   -p <Port> \
   -T 1800

   Selama uji stres, metrik pemantauan untuk gudang data virtual adalah sebagai berikut:

   • Penggunaan CPU klaster:

     • Beban pada klaster tersedia tetap tinggi, memicu Penyesuaian Skala Otomatis (Titik 1) untuk menambah klaster baru.

     • Setelah pengujian selesai, beban pada kedua klaster menjadi rendah, memicu Penyesuaian Skala Otomatis (Titik 2) untuk menghapus satu klaster.

   • Penggunaan CPU gudang data virtual:

     • Sebelum Penyesuaian Skala Otomatis menambah klaster baru, penggunaan CPU gudang data virtual secara konsisten melebihi 85%.

     • Setelah klaster baru ditambahkan, penggunaan CPU keseluruhan gudang data virtual turun menjadi sekitar 70%.

Metrik

Lihat metrik berikut di Konsol Manajemen Hologres, dan konfigurasikan aturan peringatan untuk mereka jika diperlukan. Untuk detailnya, lihat Metrik Pemantauan di Konsol Hologres.

• Penggunaan CPU klaster

• Penggunaan memori klaster

• Jumlah core yang disediakan oleh Penyesuaian Skala Otomatis untuk gudang data virtual

Log eksekusi event elastis

1. Pergi ke halaman Virtual Warehouse Management dan klik tab Elastic Event Execution Logs.

2. Pilih rentang waktu untuk melihat riwayat eksekusi acara penskalaan, yang mencakup waktu eksekusi, gudang data virtual, status eksekusi, jenis acara, jumlah klaster tersedia, dan jumlah klaster target.

Event CloudMonitor

CloudMonitor mencatat semua acara penskalaan horizontal.

1. Pergi ke Pusat Acara CloudMonitor. Di halaman System Events, pilih Hologres di area Event Monitoring untuk memantau acara penskalaan otomatis.

   • Instance:Warehouse:AutoElastic:Start: Acara awal untuk Penyesuaian Skala Otomatis di gudang data virtual.

   • Instance:Warehouse:AutoElastic:Finish: Acara penyelesaian untuk Auto Scaling di gudang data virtual.

   • Instance:Warehouse:AutoElastic:Failed: Peristiwa kegagalan Penyesuaian Skala Otomatis pada gudang data virtual.

2. Anda dapat menggunakan acara CloudMonitor ini untuk mengonfigurasi notifikasi, peringatan, dan tindakan lainnya. Untuk detailnya, lihat Menggunakan Acara Sistem untuk Peringatan.

Berikut adalah contoh detail acara untuk acara Penyesuaian Skala Otomatis yang gagal:

{
    "status": "Failed",
    "instanceName": "<instance_id>",
    "resourceId": "<instance_resource_id>",
    "content": {
        "AutoElasticCPU": <cpu_num>,
        "ScaleType": "ScaleOut",
        "ScheduleId": "xxxxxx",
        "WarehouseId": "<warehouse_id>",
        "WarehouseName": "<warehouse_name>" 
    },
    "product": "hologres",
    "time": 1722852008000,
    "level": "WARN",
    "regionId": "<region>",
    "id": "<event_id>",
    "groupId": "0",
    "name": "Instance:Warehouse:TimedElastic:Failed"
}

ActionTrail

ActionTrail mencatat operasi yang dilakukan di Konsol Manajemen Hologres, seperti mengedit pengaturan Penyesuaian Skala Otomatis, serta operasi penskalaan klaster aktual yang dilakukan oleh Penyesuaian Skala Otomatis. Untuk detailnya, lihat Log Audit Acara.