PolarDB:クラスター化カラムナインデックスの TPC-H テスト (100 GB)

背景情報

TPC-H は、トランザクション処理性能評議会 (TPC) によって策定された、データベースの分析クエリ機能を評価するための意思決定支援ベンチマークです。TPC-H ワークロードは、8 つのテーブルと 22 の複雑な SQL クエリで構成されており、そのほとんどにテーブル結合、サブクエリ、GROUP BY 集計が含まれています。

テスト設計

データセットサイズ

このテストでは、100 GB のデータセット (スケールファクター = 100) を使用します。主なテーブルは次のとおりです。

• LINEITEM：約 6 億行

• ORDERS：1.5 億行

• PART_SUPP：8,000 万行

テストインスタンスの仕様

ストレステストインスタンスの仕様

ecs.g7.4xlarge (16 vCPU、64 GB メモリ)

操作手順

手順1：ストレステスト用 ECS の準備

ECS インスタンスを 1 台準備します。このインスタンスは、データインポートやストレステストの実行など、後続のすべての操作で使用します。

手順2：PolarDB-X インスタンスの準備

PolarDB-X インスタンスを作成します。詳細な手順については、「インスタンスの作成」をご参照ください。

手順3：インスタンスパラメータの調整

1. XPROTO_MAX_DN_CONCURRENT パラメータを 4000 に設定します。詳細な手順については、「パラメータ設定」をご参照ください。

2. コマンドラインインターフェイス (CLI) を使用して PolarDB-X インスタンスに接続します。同じセッションで、次の SQL ステートメントを実行して、SQL ログ、CPU サンプリング、および自動統計情報収集を無効にします。

   set global RECORD_SQL = false;
   set global MPP_METRIC_LEVEL = 0;
   set global ENABLE_CPU_PROFILE = false;
   set global ENABLE_BACKGROUND_STATISTIC_COLLECTION=false;
   set global ENABLE_STATISTIC_FEEDBACK=false;

手順4：Benchmark Boot ツールのインストール

1. ストレステスト用 ECS インスタンスのセキュリティグループでポート 4121 を開きます。詳細については、「セキュリティグループルールの追加」をご参照ください。

2. ストレステスト用 ECS インスタンスにログインし、bash -c "$(curl -fsSL https://benchmark-boot.oss-cn-hangzhou.aliyuncs.com/setup.sh)" コマンドを実行して Benchmark Boot をインストールします。詳細については、「Benchmark Boot のダウンロードとインストール」をご参照ください。

3. ブラウザで http://{ストレステストインスタンスのパブリック IP アドレス}:4121 を開きます。Benchmark Boot のホームページが表示され、インストールが成功したことを確認します。

手順5：データの準備

1. Benchmark Boot コンソールで、[ストレステスト] > [データベース接続] > [データベース接続の設定] の順に移動します。PolarDB-X の接続文字列 (ホスト IP アドレス、ポート、ユーザー名、パスワード) を設定します。TPC-H データベース名を入力し、[データベース作成モード] で [AUTO] を選択して、提出する をクリックします。

2. [ストレステスト] > [TPCH] > [TPC-H のインポート] の順に移動します。提出する を 100 に、提出する を 16 に設定します。提出する をクリックして、100 GB の TPC-H データセットを PolarDB-X プライマリインスタンスにインポートします。

   説明

   データがインポートされた後、Benchmark Boot は自動的に ANALYZE TABLE ステートメントを実行して統計情報を収集します。

3. 100 GB の TPC-H データセットがインポートされた後、PolarDB-X プライマリインスタンスで次の SQL ステートメントを実行して、クラスター化カラムナインデックス (CCI) を作成します。詳細については、「CCI の作成と使用」をご参照ください。

   create clustered columnar index `nation_col_index` on nation(`n_nationkey`) partition by hash(`n_nationkey`) partitions 1;
   
   create clustered columnar index `region_col_index` on region(`r_regionkey`) partition by hash(`r_regionkey`) partitions 1;
   
   create clustered columnar index `customer_col_index` on customer(`c_custkey`) partition by hash(`c_custkey`) partitions 64;
   
   create clustered columnar index `part_col_index` on part(`p_size`) partition by hash(`p_partkey`) partitions 64;
   
   create clustered columnar index `partsupp_col_index` on partsupp(`ps_partkey`) partition by hash(`ps_partkey`) partitions 64;
   
   create clustered columnar index `supplier_col_index` on supplier(`s_suppkey`) partition by hash(`s_suppkey`) partitions 64;
   
   create clustered columnar index `orders_col_index` on orders(`o_orderdate`,`o_orderkey`) partition by hash(`o_orderkey`) partitions 64;
   
   create clustered columnar index `lineitem_col_index` on lineitem(`l_shipdate`,`l_orderkey`) partition by hash(`l_orderkey`) partitions 64;

   説明

   • SHOW COLUMNAR INDEX ステートメントを実行して、CCI の現在のステータスを表示できます。詳細については、「SHOW COLUMNAR INDEX」をご参照ください。

   • CCI の作成には約 45 分かかります。

手順6：読み取り専用カラムストアインスタンスの追加

PolarDB-X プライマリインスタンスに読み取り専用カラムストアインスタンスを追加します。詳細な手順については、「読み取り専用カラムストアインスタンスの追加」をご参照ください。

手順7：TPC-H テストの実行

1. Benchmark Boot コンソールで、[ストレステスト] > [データベース接続] > [データベース接続の設定] の順に移動します。読み取り専用カラムストアインスタンスの接続文字列を設定し、TPC-H データベース名を入力し、[データベース作成モード] で [AUTO] を選択して、提出する をクリックします。

2. [ストレステスト] > [TPCH] > [TPCH の実行] の順に移動します。提出する を選択し、タスクの説明を入力して、[送信] をクリックして TPC-H ベンチマークの 22 のクエリステートメントを実行します。

3. [テスト結果] > [TPCH] の順に移動して、最終的なテスト結果を表示します。

   説明

   最初のベンチマーク実行にはウォームアップが必要です。安定した結果を得るために、テストを複数回実行することを推奨します。

テスト結果

すべての実行時間は秒 (s) 単位です。