Hologres:CREATE PARTITION TABLE

Bölümlenmiş tablolar ne zaman kullanılır?

Bölüm eleme veya toplu veri işlemlerinden sağlanan fayda, birden fazla alt tabloyu yönetmenin ek yükünü açıkça aştığında bölümlenmiş tabloları kullanın.

Bölümlenmiş tabloları şu durumlarda kullanın:

• Tek bir bölüm için günlük veri hacmi 100 milyon satırı aşarsa (tarih bazlı bölümlendirme için).

• Bir bölümün tüm verilerini TRUNCATE veya DROP kullanarak toplu şekilde değiştirmeniz veya silmeniz gerekiyorsa; her iki işlem de alt tabloda anında tamamlanır ve tam taramalardan kaçınır.

Bölümlenmiş tabloları şu durumlarda kullanmaktan kaçının:

• Veri kaynağı bir veritabanı sistemiyse. Aşırı sayıda bölüm G/Ç kaynaklarını boşa harcar. Bunun yerine, dizin tabanlı sorgu hızlandırmayı etkinleştirmek için sık kullanılan filtre sütunlarını segment anahtarı olarak belirtin.

• Bölüm başına günlük veri hacmi 100 milyon satırın altındaysa. Küçük bölümler ihmal edilebilir düzeyde sorgu hızlandırma sağlar. Bunun yerine daha kaba bir granülerlik kullanın.

Şunu unutmayın: Her alt tablo ayrı bir dosya kümesi olarak depolanır ve meta veri depolama açısından bölümlenmemiş bir tabloya eşdeğerdir. Çok sayıda alt tablo, meta veri hacmini artırır ve çok sayıda küçük dosya ile parçalanmaya neden olur.

Sınırlamalar

• Veriler doğrudan ana tabloya değil, alt tabloya yazılmalıdır.

  Realtime Compute for Apache Flink, verileri ana tabloya gerçek zamanlı olarak yazabilir. Ayrıntılar için bkz. Write data to a partitioned Hologres sink table in real time .

• Hologres yalnızca liste bölümlendirmeyi (PARTITION BY LIST) destekler.

• Bölüm anahtarı tek bir sütun olmalıdır.

• Her bölümlendirme kuralı yalnızca bir bölümlenmiş tablo oluşturmak için kullanılabilir.

• Ana tablonun bir birincil anahtarı varsa, bölüm anahtarı sütunu bu birincil anahtarın bir parçası olmalıdır.

Bölümlenmiş tablo oluşturma

Bölümlenmiş bir tablo, şemayı ve bölüm kuralını tanımlayan bir ana tablo ile belirli bölüm değerlerini kapsayan bir veya daha fazla alt tablodan oluşur. Veri yazılmadan önce alt tabloların oluşturulması gerekir.

Alternatif olarak, Hologres'in yapılandırdığınız kurallara göre alt tabloları otomatik olarak oluşturmasını sağlamak için dynamic partitioning özelliğini etkinleştirin.

-- Create the parent table
CREATE TABLE [IF NOT EXISTS] [<schema_name>.]<table_name> (
  {
    <column_name> <column_type> [<column_constraints> [, ...]]
    | <table_constraints>
    [, ...]
  }
)
PARTITION BY LIST (<column_name>);

-- Create a child table
CREATE TABLE [IF NOT EXISTS] [<schema_name>.]<table_name>
  PARTITION OF <parent_table>
  FOR VALUES IN (<string_literal>);

BEGIN;
CREATE TABLE public.hologres_parent (
    a TEXT,
    b INT,
    c TIMESTAMP,
    d TEXT
)
PARTITION BY LIST (a)
WITH (orientation = 'column');
CREATE TABLE public.hologres_child1 PARTITION OF public.hologres_parent FOR VALUES IN ('v1');
CREATE TABLE public.hologres_child2 PARTITION OF public.hologres_parent FOR VALUES IN ('v2');
CREATE TABLE public.hologres_child3 PARTITION OF public.hologres_parent FOR VALUES IN ('v3');
COMMIT;

BEGIN;
CREATE TABLE public.hologres_parent(
  a TEXT,
  b INT,
  c TIMESTAMP,
  d TEXT
)
PARTITION BY LIST(a);
CALL set_table_property('public.hologres_parent', 'orientation', 'column');
CREATE TABLE public.hologres_child1 PARTITION OF public.hologres_parent FOR VALUES IN('v1');
CREATE TABLE public.hologres_child2 PARTITION OF public.hologres_parent FOR VALUES IN('v2');
CREATE TABLE public.hologres_child3 PARTITION OF public.hologres_parent FOR VALUES IN('v3');
COMMIT;

BEGIN;
CREATE TABLE public.hologres_parent_2 (
    a TEXT,
    b INT,
    c TIMESTAMP,
    d TEXT,
    ds TEXT,
    PRIMARY KEY (ds, b)
)
PARTITION BY LIST (ds)
WITH (orientation = 'column');
CREATE TABLE public.holo_child_1 PARTITION OF public.hologres_parent_2 FOR VALUES IN ('20201215');
CREATE TABLE public.holo_child_2 PARTITION OF public.hologres_parent_2 FOR VALUES IN ('20201216');
CREATE TABLE public.holo_child_3 PARTITION OF public.hologres_parent_2 FOR VALUES IN ('20201217');
COMMIT;

BEGIN;
CREATE TABLE public.hologres_parent_2(
  a TEXT,
  b INT,
  c TIMESTAMP,
  d TEXT,
  ds TEXT,
  PRIMARY KEY (ds, b)
)
PARTITION BY LIST(ds);
CALL set_table_property('public.hologres_parent_2', 'orientation', 'column');
CREATE TABLE public.holo_child_1 PARTITION OF public.hologres_parent_2 FOR VALUES IN('20201215');
CREATE TABLE public.holo_child_2 PARTITION OF public.hologres_parent_2 FOR VALUES IN('20201216');
CREATE TABLE public.holo_child_3 PARTITION OF public.hologres_parent_2 FOR VALUES IN('20201217');
COMMIT;

Alt tabloları listeleme

HoloWeb'i veya aşağıdaki SQL deyimini kullanarak bir ana tablonun tüm alt tablolarını listeleyin. parent_table_name ifadesini gerçek ana tablo adıyla değiştirin.

SELECT
    nmsp_parent.nspname AS parent_schema,
    parent.relname      AS parent,
    nmsp_child.nspname  AS child_schema,
    child.relname       AS child
FROM pg_inherits
    JOIN pg_class parent          ON pg_inherits.inhparent = parent.oid
    JOIN pg_class child           ON pg_inherits.inhrelid  = child.oid
    JOIN pg_namespace nmsp_parent ON nmsp_parent.oid = parent.relnamespace
    JOIN pg_namespace nmsp_child  ON nmsp_child.oid  = child.relnamespace
WHERE parent.relname = 'parent_table_name';

Özellik devralma kuralları

CREATE TABLE ... PARTITION OF kullanarak bir alt tablo oluşturduğunuzda, alt tablo ana tablodan çoğu özelliği devralır. Aşağıdaki tabloda hangi özelliklerin eşleşmesi gerektiği ve hangilerinin farklı olabileceği gösterilmektedir.

• Eşleşmelidir: Bu özellikler için farklı bir değerle alt tablo eklemek hata döndürür. Bundan kaçınmak için, ana tablonun özellik ayarlarını kopyalayan CREATE TABLE LIKE kullanarak alt tablolar oluşturun.

• Farklı olabilir: Alt tabloda açıkça ayarlanmadıysa, alt tablo ana tablonun değerini devralır. Açıkça ayarlanırsa, alt tablonun değeri geçerli olur.

• Ana tablonun dizinlenmiş sütunlarını içermelidir: Alt tablonun dizinlenmiş sütunları, ana tablonunkilerin üst kümesi olmalıdır. Alt tabloya ek dizinlenmiş sütunlar eklenebilir.

Sonraki adımlar

• Dynamic partitioning — yapılandırılan kurallara göre alt tabloları otomatik olarak oluşturur ve yönetir, her bölümü önceden manuel olarak oluşturmanıza gerek kalmaz.

• ALTER PARTITION TABLE — oluşturulduktan sonra bölümleri değiştirin.

• DROP PARTITION TABLE — bölümlenmiş tabloları silin.