MaxCompute:MaxQA の概要

機能概要

MaxQA（MaxCompute Query Accelerator 2.0、旧称 MCQA 2.0）は、リアルタイムおよびニアリアルタイムのデータ分析に対する需要の高まりに対応するための MaxCompute 向けクエリアクセラレーションソリューションです。専用のアクセラレーションリソースプールと、コントロールパス、クエリ オプテマイザー、実行エンジン、ストレージエンジン、キャッシュ機構にわたる包括的な最適化により、クエリ応答時間を大幅に短縮します。MaxQA は、ビジネスインテリジェンス（BI）、インタラクティブ分析、ニアリアルタイムデータウェアハウスなどのシナリオのように、高安定性が求められる遅延の影響を受けやすいワークロードに最適です。

MaxCompute MaxQA（旧称 MCQA2.0）機能は、以下の能力を提供します。

• 高性能なクエリおよびデータ挿入

  テラバイト規模のデータセットに対するクエリおよびデータ挿入ジョブを高速化し、サブ秒単位での実行を実現します。

• SQL 互換性

  ユーザー定義関数（UDF）、Delta Tables、増分マテリアライズドビューを含む MaxCompute SQL 機能と完全互換です。

• リソース分離とエラスティック管理

  • 安定性を高めるため、テナント専用の隔離されたクエリアクセラレーションリソースプールを提供します。

  • インタラクティブクォータグループおよびバッチ処理リソースプールに対して、時間帯に基づくリソース割り当てルールと自動スケーリングをサポートし、リソース利用率を向上させます。

• エンドツーエンドのキャッシング機能を備えており、複数の実行段階における中間結果および最終結果が自動的にキャッシュされます。後続のジョブは任意の段階でこのキャッシュをヒットでき、クエリ実行が大幅に高速化されます。

• 複数の BI ツール（FineBI、Tableau、QuickBI）をサポートします。

制限事項

• MaxQA では DDL/DML/DQL 文のみ実行可能です（権限操作文、Tunnel 関連文、リソースのアップロード/ダウンロードなど）。

• MaxQA はユーザー定義関数（UDF）をサポートしています。セキュリティを確保するため、各 UDF は隔離された環境で起動されます。パフォーマンスの急激な変動を防ぐため、MaxQA インスタンス内のリソースの最大 50% しか UDF の実行に使用できません。

• DQL 文の場合、デフォルトで最大 100 万行のデータが返されます。この制限を超えるには、odps.sql.select.auto.limit パラメーターをより大きな値に設定してください（戻り値が大きすぎると実行効率に影響する可能性があるため、実際の業務要件に応じて慎重に設定することを推奨します）。

• 実行計画内で常駐 Worker を必要とする Distributed MapJoin などのジョブは、現在サポートされていません。

サービスアーキテクチャ

MaxQA の主要な技術的優位性には、インテリジェントかつ動的に隔離されたリソースプール、エンドツーエンドのキャッシュ機構、ローカル I/O、遅延最適化された実行計画（クエリプラン）、およびより効率的な実行エンジンがあり、これらによりクエリ効率が向上します。

• インテリジェントかつ動的に隔離されたリソースプール

  各 MaxQA インスタンスは、完全に隔離されたコンピュート環境で動作します。テナントは複数のインスタンスを作成でき、それぞれがインタラクティブクォータグループに対応します。このモデルにより、マルチテナント環境で一般的な「ノイジーネイバー問題」を回避し、安定したクエリ遅延を保証します。

• エンドツーエンドのキャッシュ機構

  スキャンされたテーブル、メタデータ、実行計画、中間結果、最終クエリ結果などのデータが自動的にキャッシュされます。後続のジョブは複数の段階でこのキャッシュをヒットでき、実行が高速化されます。コンピュート環境がインスタンスレベルで隔離されているため、キャッシュの寿命が長くなり、他のインスタンスからのジョブの影響を受けません。

• ローカル I/O

  シャッフルやスピルなどの操作による I/O データにローカル記憶域を最大限活用します。これにより外部システムへの依存関係が低減され、遅延の安定性が向上します。

• 遅延最適化された実行計画

  クエリ オプテマイザーは、物理実行計画の選択、同時実行数の計算、圧縮アルゴリズムの選択など、クエリ計画のあらゆる側面において低遅延を優先します。

• 簡略化されたコントロールパス

  フロントエンドがコーディネーターに直接接続します。コントロールパスのアーキテクチャは最適化され非同期化されており、やり取りがより効率的になります。

MaxQA の技術アーキテクチャを次の図に示します。

利用シーン

MaxQA 機能は、日常的な運用レポートから高度なデータ分析まで、さまざまなアプリケーションシナリオをカバーしており、特にクエリ応答時間と安定性に対する要件が高いビジネスシナリオに適しています。短期的な意思決定支援から長期的な戦略的計画まで、MaxQA は企業のデータ駆動型価値創造能力を強化する強力なテクニカルサポートを提供します。

CU 仕様別のシステムパラメーター

TPC-DS 性能テスト結果

結果はリージョンによって若干異なる場合があります。ご利用の環境における実際のパフォーマンスは異なる可能性があります。

上記の性能テストレポートは、中国 (北京) リージョンのテスト環境から取得したものです。

詳細なテスト計画および内容については、「TPC-DS Performance Testing」をご参照ください。

MaxQA と MCQA（新規有効化は終了）の比較

使用方法

MaxQA の具体的な使用方法については、「Query Acceleration MaxQA」をご参照ください。