Hologres:Hologres インデックスのクイックスタート

TPC-H Q1 クエリ

TPC-H Q1 クエリは、lineitem テーブルの特定の列に対して集約とフィルタリングを実行します。次の条件が含まれます：

l_shipdate <=：これはフィルター条件です。効率的な範囲フィルタリングをサポートし、必要なデータを迅速に取得するには、適切なインデックスを定義する必要があります。

--TPC-H Q1
SELECT
        l_returnflag,
        l_linestatus,
        SUM(l_quantity) AS sum_qty,
        SUM(l_extendedprice) AS sum_base_price,
        SUM(l_extendedprice * (1 - l_discount)) AS sum_disc_price,
        SUM(l_extendedprice * (1 - l_discount) * (1 + l_tax)) AS sum_charge,
        AVG(l_quantity) AS avg_qty,
        AVG(l_extendedprice) AS avg_price,
        AVG(l_discount) AS avg_disc,
        COUNT(*) AS count_order
FROM
        lineitem
WHERE
        l_shipdate <= DATE '1998-12-01' - INTERVAL '120' DAY
GROUP BY
        l_returnflag,
        l_linestatus
ORDER BY
        l_returnflag,
        l_linestatus;

TPC-H Q4 クエリ

TPC-H Q4 クエリは、主に lineitem テーブルと orders テーブルを結合します。次の条件が含まれます：

• o_orderdate >= DATE '1996-07-01'：これはフィルター条件です。効率的な範囲フィルタリングをサポートし、必要なデータを迅速に取得するには、適切なインデックスを定義する必要があります。

• l_orderkey = o_orderkey：これは 2 つのテーブル間の結合条件です。最高のパフォーマンスを得るには、両方のテーブルで同じインデックスを使用してローカル結合を有効にし、操作中のデータシャッフルを削減します。

  --TPC-H Q4 Query
  SELECT
          o_orderpriority,
          COUNT(*) AS order_count
  FROM
          orders
  WHERE
          o_orderdate >= DATE '1996-07-01'
          AND o_orderdate < DATE '1996-07-01' + INTERVAL '3' MONTH
          AND EXISTS (
                  SELECT
                          *
                  FROM
                          lineitem
                  WHERE
                          l_orderkey = o_orderkey
                          AND l_commitdate < l_receiptdate
          )
  GROUP BY
          o_orderpriority
  ORDER BY
          o_orderpriority;

hologres_dataset_tpch_100g.lineitem

Q1 と Q4 の両方のクエリに lineitem テーブルが関与しますが、使用する列と条件は異なります。

• Q1 クエリの場合：クエリは主に l_shipdate を範囲フィルタリングに使用します。クラスタリングキーは、ファイル内のデータのソート順を利用して範囲スキャンを高速化します。したがって、l_shipdate をクラスタリングキーとして設定します。セグメントキー (イベント時間列) は、ファイル間の順序を維持します。単調増加または単調減少する日付列の場合、それをセグメントキーとして設定すると、効果的なセグメントキープルーニングが可能になります。したがって、l_shipdate をセグメントキーとして設定することもできます。

• Q4 クエリの場合：クエリは lineitem テーブルを orders テーブルと l_orderkey および o_orderkey 列で結合します。分散キーはデータ分散戦略を指定します。システムは、同じキー値を持つデータを同じシャードに配置します。2 つのテーブルが同じテーブルグループにあり、それらの分散キー列で結合される場合、システムはデータ書き込み時に一致するレコードを自動的に同じシャードに分散します。これらのテーブルが結合されると、システムはネットワーク経由でデータをシャッフルすることなく、各ノードでローカル結合を実行します。これにより、ランタイムのデータシャッフルと再配布が回避され、実行効率が大幅に向上します。したがって、l_orderkey を分散キーとして設定します。

• lineitem の最終的なテーブル構造は次のとおりです：

  BEGIN;
  CREATE TABLE hologres_dataset_tpch_100g.lineitem
  (
      l_ORDERKEY      BIGINT      NOT NULL,
      L_PARTKEY       INT         NOT NULL,
      L_SUPPKEY       INT         NOT NULL,
      L_LINENUMBER    INT         NOT NULL,
      L_QUANTITY      DECIMAL(15,2) NOT NULL,
      L_EXTENDEDPRICE DECIMAL(15,2) NOT NULL,
      L_DISCOUNT      DECIMAL(15,2) NOT NULL,
      L_TAX           DECIMAL(15,2) NOT NULL,
      L_RETURNFLAG    TEXT        NOT NULL,
      L_LINESTATUS    TEXT        NOT NULL,
      L_SHIPDATE      TIMESTAMPTZ NOT NULL,
      L_COMMITDATE    TIMESTAMPTZ NOT NULL,
      L_RECEIPTDATE   TIMESTAMPTZ NOT NULL,
      L_SHIPINSTRUCT  TEXT        NOT NULL,
      L_SHIPMODE      TEXT        NOT NULL,
      L_COMMENT       TEXT        NOT NULL,
      PRIMARY KEY (L_ORDERKEY,L_LINENUMBER)
  )
  WITH (
      distribution_key = 'L_ORDERKEY',--ローカル結合を有効にします。
      clustering_key = 'L_SHIPDATE',--範囲フィルタリングを高速化します。
      event_time_column = 'L_SHIPDATE'--セグメントキープルーニングを高速化します。
    );
  COMMIT;

hologres_dataset_tpch_100g.orders

この例では、orders テーブルは Q4 クエリで使用されます。

• orders テーブルの o_orderkey 列を分散キーとして設定し、ローカル結合機能を活用して結合クエリの効率を向上させます。

• o_orderdate 列は主に日付フィルタリングに使用されます。セグメントキープルーニングを高速化するために、これをセグメントキーとして設定します。

• orders の最終的なテーブル構造は次のとおりです：

  BEGIN;
  CREATE TABLE hologres_dataset_tpch_100g.orders
  (
      O_ORDERKEY      BIGINT      NOT NULL PRIMARY KEY,
      O_CUSTKEY       INT         NOT NULL,
      O_ORDERSTATUS   TEXT        NOT NULL,
      O_TOTALPRICE    DECIMAL(15,2) NOT NULL,
      O_ORDERDATE     timestamptz NOT NULL,
      O_ORDERPRIORITY TEXT        NOT NULL,
      O_CLERK         TEXT        NOT NULL,
      O_SHIPPRIORITY  INT         NOT NULL,
      O_COMMENT       TEXT        NOT NULL
  )
  WITH (
      distribution_key = 'O_ORDERKEY',--ローカル結合を有効にします。
      event_time_column = 'O_ORDERDATE'--セグメントキープルーニングを高速化します。
    );
  COMMIT;