İş verileri büyüdükçe nadiren erişilen sıcak ve soğuk veriler dahil tüm verilerin standart InnoDB tablolarında saklanması depolama maliyetlerinin sürekli artmasına neden olur. Bu tür verilerin harici depolamaya arşivlenmesi ise çevrimiçi okuma, yazma ve analitik erişimden feragat edilmesini gerektirir. PolarDB for MySQL X-Engine tabanlı veri katmanlama özelliği sunar. Bir tablonun tamamını veya tablo içindeki belirli bölümleri yüksek sıkıştırma oranına sahip X-Engine'e dönüştürebilirsiniz; böylece InnoDB (sıcak veriler) ve X-Engine (sıcak veya soğuk veriler) aynı tabloda birlikte bulunur. Bu yaklaşım, çevrimiçi veri erişimini korurken depolama maliyetlerini azaltır ve X-Engine'deki veriler DML yazma işlemlerini ve çevrimiçi DDL şema değişikliklerini desteklemeye devam eder.
Çalışma prensibi
PolarDB for MySQL hibrit bölümleme özelliği, tek bir bölümlenmiş tablo içindeki farklı bölümlerin farklı depolama motorları kullanmasına olanak tanır. İşleyiş şu şekildedir:
Veri katmanlama: Sık erişilen "sıcak" veri bölümlerini en iyi okuma ve yazma performansı için InnoDB motorunda tutabilir, daha az sıklıkla erişilen "ılık" veya "soğuk" veri bölümlerini ise X-Engine motoruna geçirebilirsiniz.
Akıllı yönlendirme: Tabloyu sorguladığınızda PolarDB sorgu koşullarına göre isteği ilgili bölüme ve depolama motoruna otomatik olarak yönlendirir. Sürecin tamamı uygulama katmanı için şeffaftır.
Yüksek sıkıştırma oranı: Gelişmiş sıkıştırma algoritmaları ve isteğe bağlı sütun deposu biçimi sayesinde X-Engine son derece yüksek bir veri sıkıştırma oranı sağlar. Bu durum fiziksel depolama kullanımını önemli ölçüde azaltarak maliyetleri düşürür.
Kapsam
Bu özelliği kullanmadan önce PolarDB for MySQL kümenizin aşağıdaki sürüm gereksinimlerini karşıladığından emin olun.
-
Standart bir tabloyu arşivleme:
Düzeltme sürümü 8.0.1.1.31 veya üzeri olan MySQL 8.0.1.
Düzeltme sürümü 8.0.2.2.12 veya üzeri olan MySQL 8.0.2.
Bölümlenmiş bir tabloyu arşivleme: Düzeltme sürümü 8.0.2.2.12 veya üzeri olan MySQL 8.0.2.
Bir X-Engine sütun deposu tablosuna arşivleme: Düzeltme sürümü 8.0.2.2.34.1 veya üzeri olan MySQL 8.0.2.
Hazırlıklar
Verileri arşivlemeye başlamadan önce aşağıdaki hazırlıkları tamamlayın.
X-Engine'i etkinleştirin: Tablolar veya bölümler için bir depolama motoru seçeneği olarak kullanılabilir hale getirin.
-
Bölümlenmiş bir tabloyu hibrit bölümlenmiş tablo olarak arşivlemek için aşağıdaki koşulların karşılanması gerekir:
Küçük sürümü 8.0.2.2.34.1 veya üzeri olan MySQL 8.0.2 kullanıyorsanız
loose_polar_allow_create_hybrid_partitionparametresiniONdeğerine ayarlayın.Küçük sürümü 8.0.2.2.34.1'den önceki bir sürüm olan MySQL 8.0.2 kullanıyorsanız gerekli küçük sürüme yükseltme yapın.
Standart tabloları arşivleme
Bölümlenmemiş bir tablonun tamamındaki verileri ve depolama motorunu InnoDB'den X-Engine'e dönüştürün.
Söz dizimi
ALTER TABLE table_name ENGINE=engine_name[ TABLE_FORMAT=COLUMN];
Parametreler
Parametre | Açıklama |
table_name | X-Engine'e arşivlenecek tablonun adı. |
engine_name | Depolama motorunun adı.
|
TABLE_FORMAT | İsteğe bağlı. X-Engine'in veri depolama biçimi.
|
Örnekler
-
Standart
t1tablosunu bir X-Engine satır yönelimli tabloya arşivleyin:ALTER TABLE t1 ENGINE=XEngine; -
Standart
t1tablosunu bir X-Engine sütun yönelimli tabloya arşivleyin:ALTER TABLE t1 ENGINE=XEngine TABLE_FORMAT=COLUMN; -
Standart
t1tablosunu InnoDB motoruna geri döndürün:ALTER TABLE t1 ENGINE=InnoDB;
Bölümlenmiş tabloları arşivleme
Belirtilen bir bölümü arşivleme
Bölümlenmiş bir tablodaki belirli bir bölümü (genellikle soğuk verileri depolayan eski bir bölümü) X-Engine'e arşivleyin. Bu işlem, sıcak ve soğuk verilerin katmanlı depolanmasını sağlar ve ortaya çıkan tablo hibrit bölümlenmiş bir tablo haline gelir.
Söz dizimi
ALTER TABLE table_name CHANGE PARTITION part_name ENGINE = XEngine[ TABLE_FORMAT=COLUMN];
Parametreler
Parametre | Açıklama |
table_name | X-Engine'e arşivlenecek tablonun adı. |
part_name | X-Engine'e arşivlenecek bölümün adı. |
TABLE_FORMAT | İsteğe bağlı. X-Engine'in veri depolama biçimi.
|
Örnekler
-
Bölümlenmiş
t1tablosununp1bölümünü X-Engine satır deposu biçimine arşivleyin:ALTER TABLE t1 CHANGE PARTITION p1 ENGINE = XEngine; -
Bölümlenmiş
t1tablosununp1bölümünü bir X-Engine sütun yönelimli tabloya arşivleyin:ALTER TABLE t1 CHANGE PARTITION p1 ENGINE = XEngine TABLE_FORMAT=COLUMN;
InnoDB motoruna geri dönme
Söz dizimi
ALTER TABLE table_name REORGANIZE PARTITION part_name INTO (partition_definition);
Parametreler
Parametre | Açıklama |
table_name | Hibrit bölümlenmiş tablonun adı. |
part_name | InnoDB motoruna geri döndürülecek bölümün adı. |
partition_definition | Geri döndürülecek bölümün Not Bölüm tanımındaki ENGINE yan tümcesi isteğe bağlıdır. Motor adı belirtilmezse varsayılan motor, tablo ile aynı olan InnoDB'dir. |
Örnek
X-Engine'e arşivlenmiş bölümlenmiş t1 tablosunun p1 bölümünde depolanan verileri InnoDB motoruna geri döndürün.
ALTER TABLE t1 REORGANIZE PARTITION p1 INTO(PARTITION p1 VALUES LESS THAN(100));
Üretim ortamında uygulama
En iyi uygulama: Maliyet ve sorgu performansı arasında en iyi dengeyi sağlamak için yalnızca düşük erişim sıklığına sahip sıcak ve soğuk verileri X-Engine'e arşivleyin. Yüksek sıkıştırma potansiyeline sahip yazma yoğunluklu veriler (günlükler ve ölçüm verileri gibi) için X-Engine sütun deposu biçimini (
TABLE_FORMAT=COLUMN) tercih edin.Risk azaltma: Veri geçişi (
ALTER TABLE) kaynak açısından yoğun bir işlemdir. Çevrimiçi olarak çalışsa da üretim iş yüklerinde performans dalgalanmalarını önlemek için bu işlemi yoğun olmayan saatlerde yapmanızı öneririz.İzleme ve uyarı: Arşivleme sırasında DDL işlemlerinin ilerlemesini takip etmek için
SHOW FULL PROCESSLIST;komutunu çalıştırabilirsiniz. Aynı zamanda konsolda kümenin CPU kullanımı, IOPS ve disk alanı gibi temel ölçümlerini yakından izleyin.