Hologres:自動速度制限 (ベータ版)

シナリオ

自動速度制限は、システムの負荷に基づいてクエリキューの最大同時実行数を動的に調整します。計算グループで同時に実行されるクエリの数を制御することで、過剰なリソース消費を防ぎます。この機能は、以下のシナリオで使用できます。

• 高同時実行ワークロード：同時実行数が多く、各リクエストが同程度のリソースを消費する場合、自動速度制限は同時実行数の上限を動的に調整します。これにより、CPU 使用率は 100% 未満の高いが安全なレベルで安定します。

  説明

  • 同時実行数が低すぎる場合、動的な調整によって CPU 使用率がのこぎり状に急激に変動し、CPU の利用効率が低下する可能性があります。

  • 極端なケース、例えば大規模なクエリが 1 つだけ実行される場合、自動速度制限は効果がありません。

• 許容可能なクエリのレイテンシー：この機能はトラフィック制限を適用するため、同時実行数の上限を超えたクエリはキューで待機し、応答時間が増加します。

• 予測不能なトラフィックの急増：クエリ量の急増や十分な計算リソースの事前プロビジョニングを予測できない場合、自動速度制限は安定性リスクの低減に役立ちます。

以下のシナリオでは、代替ソリューションを検討してください。

• 予測可能なトラフィックパターン：毎日のピークトラフィックが特定の時間に発生する場合、計算グループの時間ベースの弾力性を使用してスケーリングをスケジュールできます。

• 低同時実行数の大規模クエリ：自動速度制限は、低同時実行数の大規模クエリには限定的な影響しかありません。これらのクエリは Serverless Computing リソースを使用して実行できます。詳細については、「Serverless Computing ユーザーガイド」をご参照ください。

• ゼロレイテンシー要件：高い同時実行性と低いレイテンシーの両方をサポートするには、計算リソースを増やす必要があります。計算リソースをスケールアウトするか、large クエリコントロール機能を使用して遅いクエリを Serverless Computing に転送できます。詳細については、「large クエリコントロール」をご参照ください。

前提条件

クエリキューを作成済み であること。

注意事項

• 自動速度制限は、Hologres V3.1 以降を実行する計算グループインスタンスでのみサポートされます。汎用インスタンスではこの機能はサポートされません。

  説明

  この機能を使用する前に、汎用インスタンスを計算グループインスタンスに変換できます。詳細については、「汎用インスタンスから計算グループインスタンスへの変換」をご参照ください。

• クエリキューを介してルーティングされるクエリのみが自動速度制限の対象となります。これには、エンジンタイプが HQE、PQE、SQE、または HiveQE のクエリが含まれます。影響を受けるクエリタイプには、SELECT、INSERT、UPDATE、DELETE、および COPY や CTAS などのコマンドによって生成される INSERT 文が含まれます。

• 固定プランを使用するクエリはクエリキューをバイパスするため、自動速度制限による同時実行数の制限を受けません。詳細については、「固定プランによる SQL 実行の高速化」をご参照ください。リソースを効果的に管理するために、固定プランを使用するクエリを別の計算グループを使用して他のワークロードから分離できます。詳細については、「計算グループインスタンスのクイックスタート」をご参照ください。

自動速度制限の使用

自動速度制限は、計算グループレベルまたはクエリキューレベルで設定できます。

監視と運用保守

Hologres 管理コンソールで、対象のインスタンス ID をクリックし、Monitoring Information ページに移動して、計算グループの CPU 使用率 (%) メトリックを表示し、自動速度制限の動作をモニターします。

例

このセクションでは、PostgreSQL のネイティブベンチマークツールである pgbench を使用して、自動速度制限の仕組みとその効果を実証する例を示します。

1. テストテーブルを作成し、Hologres にデータをロードします。

   CREATE TABLE tbl_1 (col1 INT, col2 INT, col3 TEXT);
   CREATE TABLE tbl_2 (col1 INT, col2 INT, col3 TEXT);
   INSERT INTO tbl_1 SELECT i, i+1, md5(RANDOM()::TEXT) FROM GENERATE_SERIES (0, 500000) AS i;
   INSERT INTO tbl_2 SELECT i, i+1, md5(RANDOM()::TEXT) FROM GENERATE_SERIES (0, 500000) AS i;

2. クエリキューの最大同時実行数を 100 に設定します。この例では、init_warehouse 計算グループと default_queue クエリキューを使用します。

   CALL hg_set_query_queue_property ('init_warehouse', 'default_queue', 'max_concurrency', '100');

3. pgbench クライアントの bin ディレクトリに、select.sql という名前のベンチマーク SQL ファイルを作成し、次の SQL 文をファイルに追加します。

   EXPLAIN ANALYZE SELECT * FROM tbl_1 LEFT JOIN tbl_2 ON tbl_1.col3 = tbl_2.col3 ORDER BY 1;

4. ご利用のサーバーの構成ファイルに、パスワードを環境変数として設定するために次のコマンドを追加して保存します。

   export PGPASSWORD='<AccessKey_Secret>'

5. pgbench クライアントの bin ディレクトリに移動し、次のベンチマークコマンドを実行します。

   ./pgbench
   -c 30 \
   -j 30 \
   -f select.sql \
   -d <Database> \
   -U <AccessKey_ID> \
   -h <Endpoint> \
   -p <Port> \
   -T 1800

   パラメーターの詳細については、「Hologres への接続と開発」をご参照ください。

6. ベンチマークテスト中に、Hologres で自動速度制限を有効化してから無効化し、テストが完了するまで計算グループの CPU 使用率をモニターします。

   -- 自動速度制限を有効化
   CALL hg_set_warehouse_adaptive_concurrency_limiting ('init_warehouse', true);
   
   -- 自動速度制限を無効化
   CALL hg_set_warehouse_adaptive_concurrency_limiting ('init_warehouse', false);