MySQL, yüksek eşzamanlılık ortamlarında Binary Large Object (BLOB) verileri yazarken kilit çekişmesi ve redo günlükleri darboğazları yaygın olarak yaşanır. PolarDB, BLOB yazma işlemlerindeki kilit çekişmesini, G/Ç baskısını ve alan yönetimi sorunlarını gidermek için çekirdek düzeyinde optimizasyonlar kullanır. Bu optimizasyonlar DML ve DDL performansını önemli ölçüde artırarak iş yüklerinizin yüksek eşzamanlılık senaryolarında kararlı ve verimli çalışmasını sağlar.
Genel bakış
Binary Large Object (BLOB), görüntüler, belgeler ve uzun metinler gibi büyük verileri depolamak için kullanılan bir veritabanı alan türüdür. Yerel MySQL InnoDB motorunda, bir veri satırındaki BLOB alanı belirli bir boyutu aştığında veriler ayrı sayfa dışı (off-page) veri sayfalarında saklanır. Bu mekanizma büyük verileri işleyebilse de üç temel performans sorunu ortaya çıkarır:
Eşzamanlı yazma darboğazı: Sayfa dışı bir veri sayfasının güncellenmesi pesimistik kilidi tetikler; bu durum bir tabloya aynı anda yalnızca bir iş parçacığının BLOB yazmasına izin verir ve eşzamanlılığı ciddi şekilde sınırlar.
Artan G/Ç baskısı: Büyük alanlar hacimli redo günlükleri üretir. Disk G/Ç kapasitesi yetersiz olduğunda günlüklerin diske yazılması (flush) bir darboğaza dönüşür ve ön plan yazma işlemlerini engeller.
Geciken alan geri kazanımı: Eski BLOB veri sürümlerinin temizlenmesi (Purge) verimsizdir; bu durum depolama alanının şişmesine ve performansın düşmesine neden olabilir.
PolarDB BLOB optimizasyonu, bu sorunları çözmek için tasarlanmıştır. Veritabanı kullanım şeklinizi değiştirmeden, BLOB yazma, güncelleme ve geri kazanım yolunun tamamını çekirdek düzeyinde optimize eder.
Faturalama
BLOB performans optimizasyonu özellikleri PolarDB çekirdeğine yerleşiktir ve ek ücret talep edilmeden kullanılabilir.
BLOB yazma performansını optimize edin
İş yoğunluğunun zirve yaptığı saatlerde BLOB tablolarında yazma aktarım hızı darboğazları veya yüksek eşzamanlı yazma gecikmeleri yaşıyorsanız, bunun nedeni genellikle yazma kilit çekişmesidir. PolarDB, bu sorunu çözmek için sayfa ön tahsisi ve dizin latch optimizasyonu sunar.
Sayfa ön tahsisi optimizasyonu
Bu optimizasyon, BLOB yazma sürecini aşağıdaki adımlara ayırır:
Gerekli tüm veri sayfalarını tek bir toplu işlemde hesaplar ve tahsis eder.
Verileri kilit gerektirmeyen bir durumda kopyalayarak yeni tahsis edilen sayfaları BLOB içeriğiyle doldurur.
Ortaya çıkan veri sayfası zincirini tek bir iyimser kilit (optimistic lock) işlemiyle dizin kaydına ekler.
Yazma süreci boyunca yalnızca başlangıçtaki alan tahsis aşaması karşılıklı dışlamalıdır (mutually exclusive). Veri kopyalama gibi diğer zaman alıcı işlemler, diğer BLOB yazma işlemleriyle eşzamanlı olarak çalışabilir. Ayrıca, veri kopyalama kritik bölümün dışında gerçekleştiği için sistem, tek bir yazma işleminin arabelleği dolduracak kadar redo günlük verisi üreterek yazmaları engelleme riskini önler. Bu mekanizma, genel kilit tutma süresini en aza indirerek eşzamanlı yazma kapasitesini önemli ölçüde artırır.
Dizin latch optimizasyonu
Küçük (8 KB'den az) veya karışık boyutlu BLOB alanları içeren tablolar için yerel MySQL, Split Merge Operations (SMO'lar) olarak bilinen dizin sayfası yapı değişiklikleri nedeniyle güncellemeler sırasında iyimser kilitlemeyi erken terk eder. Ardından, eşzamanlı performansı ciddi şekilde etkileyen verimsiz bir pesimistik kilit moduna geçer. Latch optimizasyonu, iyimser yolda daha fazla iş gerçekleştirerek bu darboğazı çözer. Bu optimizasyon şu şekilde çalışır:
İyimser yolda kalma: Potansiyel bir BLOB alanı güncellemesi algılandığında, optimizasyon mantığı hemen pesimistik kilitlemeye geçmez. Çakışma olasılığı daha düşük olan paylaşımlı kilidi (S-latch) tutmaya devam eder ve iyimser güncelleme yolunda ilerler.
Ön oluşturma ve güncelleme denemesi: İyimser yolda, güncelleme için gereken BLOB veri yapısını önceden oluşturur ve dizin sayfasını doğrudan değiştirmeyi dener.
-
Değerlendirme ve ardından taahhüt veya geri dönüş:
Başarı: Güncellenen kayıt, mevcut dizin sayfasının alan gereksinimlerini karşılar; böylece işlem iyimser yolda hızlıca tamamlanır.
Başarısızlık: Sayfada yetersiz alan varsa, örneğin optimizasyon denemeyi otomatik olarak iptal eder ve yerel MySQL pesimistik kilit yoluna geri döner. Bu yol, güncellemeyi tamamen tamamlar ve veri tutarlılığını sağlar.
Bu iyimser deneme mekanizmasının temel avantajı, iyimser güncellemelerin başarı oranını önemli ölçüde artırmasıdır. Aksi takdirde pesimistik kilitlemeye geri dönecek olan birçok işlem, daha hafif ve verimli bir şekilde tamamlanabilir; bu da yüksek eşzamanlılık altında karışık boyutlu BLOB verilerini güncellemeye yönelik aktarım hızını büyük ölçüde iyileştirir.
Yazma optimizasyonlarını etkinleştirin
PolarDB konsolu içinde sayfasına gidin ve bu optimizasyonları etkinleştirmek için aşağıdaki parametreleri görüntüleyin ve değiştirin:
Parametre | Açıklama | Desteklenen sürümler |
| BLOB sayfa ön tahsisi optimizasyonunu etkinleştirir veya devre dışı bırakır. Geçerli değerler:
|
|
| BLOB sayfa ön tahsisi optimizasyonu için tek bir BLOB sütununun maksimum uzunluğunu ayarlar. | |
| BLOB dizin latch optimizasyonunu etkinleştirir veya devre dışı bırakır. |
BLOB yazmalarının redo günlük hacmini azaltın
İş yükünüz büyük miktarda BLOB verisi yazıyorsa, redo günlükleri çok hızlı oluşturulabilir ve sistem G/Ç darboğazına neden olabilir. Baskıyı hafifletmek için redo sıkıştırmasını etkinleştirin.
Redo sıkıştırması, BLOB ile ilgili redo günlüklerini günlük arabelleğine yazılmadan önce paralel olarak sıkıştırır. Testlerde ortalama %40 ila %60 oranında gerçek redo günlük yazma hacmini azaltarak depolama G/Ç baskısını düşürür ve redo modülü darboğazının genel yazma performansını etkilemesini önler. Kilitlenme kurtarma (crash recovery) sırasında veritabanı bu günlükleri otomatik olarak açar ve uygular.
Redo sıkıştırmasını etkinleştirin
PolarDB konsolu içinde sayfasına gidin ve bu optimizasyonu etkinleştirmek için aşağıdaki parametreleri görüntüleyin ve değiştirin:
Parametre | Açıklama | Desteklenen sürümler |
| BLOB redo günlükleri için sıkıştırma algoritmasını ayarlar. Geçerli değerler:
|
|
| Seçilen sıkıştırma algoritmasının sıkıştırma düzeyini ayarlar. Geçerli değerler: 0 ila 9. Varsayılan değer: 6. |
Silme sonrası BLOB alan geri kazanımını hızlandırın
BLOB verilerini sık sık sildikten veya güncelledikten sonra tablespace geri kazanımı yavaşlıyor ve dosyalar büyümeye devam ediyorsa, bunun kök nedeni yerel MySQL arka plan Purge işleminin düşük verimliliğidir. Bu işlem verileri temizlerken Index SX gibi temel kilitleri tutarak BLOB sayfalarını okur. Sayfa bellekte değilse, kilit tutulurken zaman alıcı bir disk G/Ç işlemi gerçekleşir ve bu durum tablodaki diğer eşzamanlı işlemleri uzun süre engeller. PolarDB Purge sayfa ön okuma optimizasyonu, G/Ç işlemlerini kilitleme sürecinden ayırarak bu darboğazı çözer. Bu optimizasyon şu şekilde çalışır:
Hedef sayfaları belirleme: Purge işlemi, kilitleri almadan ve temizlemeye başlamadan önce geri kazanılması gereken sayfa dışı BLOB sayfalarının tamamını tanımlar.
Asenkron ön okuma: İşlem, henüz bellekte olmayan hedef sayfaları diskten arabellek havuzuna yüklemek için asenkron G/Ç istekleri gönderir.
Hızlı temizleme: Tüm sayfalar belleğe yüklendikten sonra Purge işlemi,
Index SXgibi temel kilitleri alır ve sayfa serbest bırakma ile meta veri değiştirme işlemlerini tamamen bellek içinde hızlıca gerçekleştirir.
Purge sayfa ön okuma mekanizması, öncelikli olarak kilitler tutulurken kritik bölümde disk G/Ç işlemlerinin gerçekleşmesini önler. En zaman alıcı G/Ç işlemlerini daha erken aşamaya taşıyarak kilit tutma süresini yalnızca hızlı bellek içi işlemlere indirger. Bu durum, BLOB veri geri kazanım verimliliğini artırır ve alan şişmesini önler. Daha da önemlisi, arka plan temizliğinin yüksek eşzamanlı yazma gibi ön plan iş yüklerini engelleme derecesini azaltır. Sonuç olarak, veritabanının genel eşzamanlılığını ve kararlılığını iyileştirir.
Purge ön okumayı etkinleştirin
PolarDB konsolu içinde sayfasına gidin ve bu optimizasyonu etkinleştirmek için aşağıdaki parametreyi görüntüleyin ve değiştirin:
Parametre | Açıklama | Desteklenen sürümler |
| BLOB Purge sırasında sayfa ön okuma optimizasyonunu etkinleştirir veya devre dışı bırakır. Geçerli değerler:
| Tüm sürümlerde desteklenir. |
DDL çalıştırma verimliliğini artırın
Büyük miktarda BLOB verisi içeren tablolar üzerinde ALTER TABLE gibi DDL işlemleri çalıştırmanız gerekiyorsa ve bu işlemler çok uzun sürüyorsa, işlem süresini önemli ölçüde azaltmak için DDL ile ilgili BLOB optimizasyonlarını etkinleştirin.
Sayfa ön tahsisi optimizasyonu: BLOB alanlarının taşma sütunları birincil anahtar üzerinde bulunduğundan, birincil tabloyu yeniden oluşturan DDL işlemleri de BLOB alanlarını yazar. Sayfa ön tahsisi, BLOB verilerini yazmak için daha doğrudan ve basitleştirilmiş bir kilitleme yöntemi kullanarak karmaşık eşzamanlılık çakışmalarını yönetme yükünü önler ve yeniden oluşturma verimliliğini önemli ölçüde artırır.
Latch optimizasyonu: Paralel DDL, birincil anahtar ağacını bölümlere ayırdığından birden fazla çalışan iş parçacığı aynı veri sayfasında işlem yapmaz. Bu optimizasyon, yeni sayfaların tahsisini bağımsız olarak koruyarak diğer işlemlerin eşzamanlı çalışmasına olanak tanır ve verimliliği artırır.
-
Redo optimizasyonu:
Sayfa toplama: Toplu yükleme sırasında sistem artık her kayıt için ayrı bir redo günlük girişi oluşturmaz. Bunun yerine, bir veri sayfası dolduğunda sayfadaki değişiklikleri tek bir büyük redo kaydı olarak yazar; bu da redo işlem verimliliğini artırır.
Toplu sıkıştırma: Sistem, bu büyük toplu redo kayıtlarını sıkıştırarak DDL işlemleri sırasında redo günlük hacmini daha da azaltır.
DDL optimizasyonlarını etkinleştirin
PolarDB konsolu içinde sayfasına gidin ve bu optimizasyonları etkinleştirmek için aşağıdaki parametreleri görüntüleyin ve değiştirin:
Aşağıdaki tabloda yer alan bazı parametreler manuel olarak değiştirilemez. Değiştirmeniz gerekiyorsa, bizimle iletişime geçmek için bir destek bileti oluşturun.
Parametre | Açıklama | Desteklenen sürümler |
| DDL işlemleri sırasında büyük alan optimizasyonunun etkinleştirilip etkinleştirilmeyeceğini belirtir. Geçerli değerler:
|
|
| DDL işlemleri sırasında dizin latch optimizasyonunun etkinleştirilip etkinleştirilmeyeceğini belirtir. Geçerli değerler:
|
|
| DDL toplu yükleme sırasında redo sayfa toplamanın etkinleştirilip etkinleştirilmeyeceğini belirtir. Geçerli değerler:
|
|
| DDL toplu yükleme için redo sıkıştırma algoritmasını ayarlar. Geçerli değerler:
|
|
| DDL işlemleri sırasında redo sıkıştırmanın hedefini ayarlar. Geçerli değerler:
|
|
İlgili modül optimizasyonları
Yüksek aktarım hızına sahip BLOB iş yüklerinde, darboğazlar diğer modüllerde de oluşabilir. Daha iyi performans elde etmek için PolarDB aşağıdaki optimizasyonları da birleştirir:
Paralel asenkron redo yazma: Sistem, redo arabelleğindeki verileri parçalara ayırır ve asenkron G/Ç görevlerini eşzamanlı olarak yürütmek için birden çok iş parçacığı kullanır; bu da redo günlük yazma aktarım hızını önemli ölçüde artırır (testlerde 4 GB/s'ye kadar).
Dosya uzatma optimizasyonu: PolarDB tarafından geliştirilen dağıtılmış dosya sistemi üzerine kuruludur; bir tablespace uzatma işlemi yalnızca küçük bir meta veri değişikliği gerektirir ve yerel dosya sıfır doldurma (zero-filling) işlemi kaldırılır. Dosya uzatma süresi ve kilit yükü artık bir darboğaz oluşturmaz.
Kilitsiz kirli sayfa yazma: Bu optimizasyon gölge sayfa teknolojisini kullanır. Kirli bir sayfa yazılırken sistem önce bellek içinde bir kopya oluşturur, sayfa kilidini serbest bırakır ve ardından G/Ç işlemi için kopyayı kullanır. Bu durum, yazma isteklerinin yazma sırasında tutulan sayfa kilidi tarafından engellenmesini önler.
Performans test verileri
Aşağıdaki veriler, BLOB optimizasyonu etkinleştirildikten sonra DML ve DDL senaryolarındaki performans iyileştirmelerini göstermektedir.
-
DML performansı: Satır uzunluklarının 100 KB ve 200 KB olduğu yüksek eşzamanlılık senaryolarında, PolarDB optimizasyonu ekleme ve güncelleme performansını neredeyse 3 kat artırır. Redo sıkıştırması ile birlikte performans 4 ila 5 kat iyileşir.


DDL performansı: BLOB alanları içeren 40 GB'lık bir tablo için bu optimizasyonların etkinleştirilmesi DDL yazma hızını 5 ila 6 kat artırır ve toplam süreyi %84 azaltır.
