PolarDB:Aktifkan dan gunakan penyimpanan berjenjang untuk data dingin

Version requirements

Supported regions

Move tables, indexes, and materialized views

• Pindahkan tabel, indeks, atau materialized view yang sudah ada ke cold storage.

  ALTER  TABLE  tblname  SET  TABLESPACE OSS;
  ALTER  INDEX  idxname  SET TABLESPACE OSS;
  ALTER Materialized View mvname SET TABLESPACE OSS;

  Catatan

  Saat Anda menjalankan ALTER TABLE tblname SET TABLESPACE OSS pada sebuah tabel, hanya data tabel yang dipindahkan ke OSS secara default. Untuk memindahkan indeks tabel tersebut, Anda harus menjalankan pernyataan ALTER INDEX untuk masing-masing indeks.

• Buat tabel, indeks, atau materialized view baru langsung di penyimpanan OSS.

  • Metode 1: Tentukan TABLESPACE OSS dalam pernyataan CREATE.

    CREATE TABLE tblname (...) TABLESPACE OSS;
    CREATE TABLE tblname(...) TABLESPACE OSS as SELECT ...;
    CREATE INDEX idxname ON tblname(columnname) TABLESPACE OSS;
    CREAE INDEX idxname ON tblename USING GiST(columnname) TABLESPACE OSS;
    CREATE MATERIALIZED VIEW table_name TABLESPACE OSS AS query [ WITH [ NO ] DATA ];

  • Metode 2: Atur ruang tabel default ke ruang tabel OSS.

    SET default_tablespace = 'oss';
    CREATE  TABLE  tblname  (...) ;
    CREATE  INDEX  idxname ON  tblname(columnname);
    CREAE  INDEX  idxname  ON tblename USING GiST(columnname);
    CREATE MATERIALIZED VIEW  table_name  AS query [ WITH [ NO ] DATA ];

    Catatan

    Setelah Anda mengatur ruang tabel default ke OSS, semua tabel, indeks, dan materialized view baru akan dibuat di OSS. Untuk mengembalikan perilaku sebelumnya, atur ulang ruang tabel default:

    RESET default_tablespace;

Move LOB fields to cold storage separately

Bidang LOB dalam mengacu pada bidang dengan tipe data blob, text, json, jsonb, atau array, serta . Bidang-bidang ini sering berisi large individual objects yang mengonsumsi large amount of storage space tetapi jarang diperbarui. Untuk membantu mengurangi biaya dalam skenario seperti itu, fitur tiered storage for cold data dari memungkinkan Anda memindahkan hanya bidang LOB ke cold storage, sementara penyimpanan bidang lainnya tetap tidak berubah. Anda dapat menggunakan satu pernyataan SQL untuk memindahkan bidang LOB ke cold storage. Penggunaannya sebagai berikut:

-- Buat tabel yang berisi bidang LOB.
CREATE TABLE  test_large_object(id serial, val text);
-- Pindahkan bidang LOB ke cold storage secara terpisah.
ALTER TABLE test_large_object alter column val set (storage_type='oss');
-- Tulis data ke bidang LOB. Konten bidang text kini disimpan di OSS.
INSERT INTO test_large_object(val) VALUES((SELECT string_agg(random()::text, ':') FROM generate_series(1, 10000)));

Move partitioned tables to cold storage

Tabel partisi merupakan kandidat umum untuk cold storage. Anda dapat menggunakan metode tertentu untuk mengelola penyimpanannya.

• Pindahkan semua partisi dari tabel partisi ke cold storage.

  • Metode 1: Pindahkan partisi yang sudah ada ke cold storage satu per satu.

    -- prt1 adalah tabel partisi (tabel induk).
    -- prt1_p1 adalah partisi dari prt1.
    -- prt1_p2 adalah partisi lain dari prt1.
    -- Jalankan pernyataan ALTER pada semua partisi.
    ALTER  TABLE  prt1_p1  SET  TABLESPACE OSS;
    ALTER  TABLE  prt1_p2  SET  TABLESPACE OSS;

  • Metode 2: Buat tabel partisi induk langsung di ruang tabel OSS.

    CREATE TABLE prt1 (a int, b int) PARTITION BY RANGE(a) TABLESPACE OSS;
    -- Partisi mewarisi properti ruang tabel dari tabel induk secara default dan dibuat di ruang tabel OSS.
    CREATE TABLE prt1_p1 PARTITION OF prt1 FOR VALUES FROM (0) TO (250);
    CREATE TABLE prt1_p2 PARTITION OF prt1 FOR VALUES FROM (250) TO (500);

  • Metode 3: Atur ruang tabel default ke ruang tabel OSS, lalu buat tabel partisi.

    SET default_tablespace = 'oss';
    CREATE  TABLE  prt1 (a int, b int) PARTITION BY RANGE(a);
    CREATE TABLE prt1_p1 PARTITION OF prt1 FOR VALUES FROM (0) TO (250);
    CREATE TABLE prt1_p2 PARTITION OF prt1 FOR VALUES FROM (250) TO (500);

• Pindahkan partisi tertentu ke cold storage:

  Jika Anda hanya perlu memindahkan partisi yang kedaluwarsa (jarang diakses) ke cold storage, Anda dapat langsung mengubah ruang tabel untuk partisi-partisi tersebut. Partisi aktif (sering diakses) tetap berada di disk cloud. Pendekatan ini mempertahankan performa kueri tabel partisi sekaligus mengurangi biaya penyimpanan.

  -- prt1 adalah tabel partisi (tabel induk).
  -- prt1_p1 adalah partisi aktif dari prt1.
  -- prt1_p2 adalah partisi kedaluwarsa dari prt1.
  -- Jalankan pernyataan ALTER pada partisi kedaluwarsa.
  ALTER  TABLE  prt1_p2  SET  TABLESPACE OSS;

Manage data tiers

Materialized cache

Anda dapat mengatur ukuran materialized cache dengan memodifikasi parameter polar_smgrcache_size.

1. Masuk ke PolarDB console. Di panel navigasi kiri, klik Clusters. Pilih region kluster, lalu klik ID-nya untuk membuka halaman detail.

2. Di panel navigasi kiri, pilih Configuration and Management > Parameter Configuration. Temukan parameter polar_smgrcache_size dan klik Modify Parameter.

3. Atur parameter polar_smgrcache_size. Lihat tabel berikut untuk contohnya.

   Value	Cache size
   0	0 (Cache dinonaktifkan.)
   1	1 GB
   2	2 GB
   128	128 GB (Nilai maksimum yang didukung.)

4. Di pojok kiri atas, klik Submit modification. Di kotak dialog Save Changes yang muncul, klik OK. Kluster akan melakukan restart setelah Anda memodifikasi parameter ini.

Setelah Anda mengaktifkan materialized cache, Anda dapat menanyakan penggunaannya sebagai berikut:

-- Buat ekstensi.
CREATE extension polar_monitor;
-- Tanyakan penggunaan dasar materialized cache.
SELECT * FROM polar_smgrcaches;
-- Deskripsi bidang:
  -- smgrcache: ID cache.
  -- relfilenode: File tabel yang sesuai dengan cache.
  -- relchunknumber: Posisi cache dalam file tabel.
  -- nblocks: Ukuran cache.
  -- dirty: Menentukan apakah cache tersebut dirty.
  -- usagecount: Jumlah penggunaan.
  -- pinning_backends: Jumlah referensi.
-- Paksa flush materialized cache ke OSS.
SELECT polar_flush_smgrcache(); 
-- Paksa evict materialized cache.
SELECT polar_evict_smgrcache(); 

Access cold data

Insert, delete, update, and query cold data

Pernyataan SQL standar untuk memasukkan, menghapus, memperbarui, dan menanyakan data bekerja secara transparan pada data dingin (objek yang disimpan di ruang tabel OSS).

Restore cold data

Data dikompresi saat dipindahkan ke OSS. Jika Anda memulihkan data dari OSS kembali ke disk cloud, pastikan disk cloud memiliki ruang yang cukup. Ruang yang dibutuhkan biasanya 1,4 hingga 4 kali lipat dari ruang penyimpanan yang ditempati data di OSS.

Delete cold data

Pernyataan SQL standar untuk menghapus tabel dingin, indeks, dan materialized view bekerja secara transparan.

DELETE  FROM tblname WHERE ...;
TRUNCATE  TABLE  tblname;
DROP  TABLE  tblname;
...