PolarDB:Optimasi replikasi fisik DDL

Persiapan pengujian

Skema:

CREATE TABLE t0(a INT PRIMARY KEY, b INT) ENGINE=InnoDB;

Data: Tabel dengan 1 juta, 10 juta, 100 juta, dan 1 miliar baris, diisi dengan nilai acak:

DELIMITER //
CREATE PROCEDURE populate_t0()
BEGIN
     DECLARE i int DEFAULT 1;
     WHILE (i <= $table_size) DO
             INSERT INTO t0 VALUES (i, 1000000 * RAND());
             SET i = i + 1;
     END WHILE;
END //
DELIMITER ;
CALL populate_t0();

Ganti $table_size dengan jumlah baris yang akan dimasukkan, misalnya 1000000.

Operasi DDL yang diuji:

• ADD PRIMARY KEY

• ADD INDEX (secondary index)

• OPTIMIZE TABLE

Pengujian 1: Waktu eksekusi DDL di node primary

Bandingkan waktu (dalam detik) untuk ADD PRIMARY KEY dan OPTIMIZE TABLE pada berbagai ukuran tabel, dengan innodb_bulk_load_page_grained_redo_enable diatur ke ON dibandingkan dengan OFF.

Tambahkan primary key:

Optimalkan tabel:

Pengujian 2: Kombinasi dengan parallel DDL

Bandingkan waktu (dalam detik) untuk ADD INDEX pada tabel berisi 1 miliar baris dengan jumlah thread berbeda (innodb_polar_parallel_ddl_threads diatur ke 1, 2, 4, 8, 16, dan 32), dengan innodb_bulk_load_page_grained_redo_enable diatur ke ON dibandingkan dengan OFF.

Dengan parallel DDL diaktifkan (innodb_polar_use_sample_sort dan innodb_polar_use_parallel_bulk_load keduanya diaktifkan):

Dengan parallel DDL dinonaktifkan (innodb_polar_use_sample_sort dan innodb_polar_use_parallel_bulk_load keduanya dinonaktifkan):

Untuk informasi lebih lanjut tentang parameter parallel DDL, lihat Parallel DDL.

Pengujian 3: Stabilitas node read-only dalam beban kerja DDL konkuren

Uji status node read-only, penggunaan CPU, penggunaan memori, IOPS, dan latensi replikasi saat node primary menjalankan 1, 2, 4, 6, dan 8 operasi DDL konkuren pada tabel berisi 1 miliar baris.

Fitur diaktifkan (`innodb_bulk_load_page_grained_redo_enable = ON`):

Fitur dinonaktifkan (`innodb_bulk_load_page_grained_redo_enable = OFF`):

Untuk 4 operasi DDL konkuren, data yang ditampilkan adalah sebelum node read-only menjadi tidak tersedia. Tanda hubung (-) menunjukkan operasi DDL gagal pada tingkat konkurensi tersebut dan tidak ada hasil yang dikembalikan.

Dengan fitur dinonaktifkan, node read-only menjadi tidak tersedia pada 4 atau lebih operasi DDL konkuren dan latensi replikasi melonjak hingga 211 detik dalam kondisi 4 operasi konkuren. Dengan fitur diaktifkan, node tetap stabil di semua tingkat konkurensi yang diuji dengan latensi replikasi di bawah 1 detik.