MaxCompute:TPC-DS パフォーマンス テスト

準備

1. 環境を構成します。

   • TPC-DS テストを実行する前に、MaxCompute をアクティブ化し、「プロジェクトを作成する」をご参照ください。

   • 方法 1：MaxQA（MaxCompute Query Acceleration 2.0）をアクティブ化します。現在パブリックプレビュー中です。パブリックプレビューリンクをクリックして参加し、各リージョンがパブリックプレビューを開始するスケジュールについては、パブリックプレビュープランを参照してください。

     • 詳細については、「MaxQA の概要」をご参照の上、サブスクリプション 仕様をアクティブ化し、インタラクティブクォータグループを作成します。

   • 方法 2：MaxQA パブリックプレビューが有効になっていないその他のリージョンでは、MCQA（MaxCompute Query Acceleration 1.0）をアクティブ化します。

     • 詳細については、「MaxCompute Query Acceleration」をご参照の上、変更を保存 仕様をアクティブ化します。

2. テストツールを準備します。

   MaxCompute は、TPC-DS テストを迅速に完了し、テスト結果を自動的に生成するのに役立つ、TPC-DS 自動パフォーマンステストツールを提供します。

   重要

   テストツールは、Java 開発キット（JDK） 1.7 以降がインストールされている Linux でのみ使用できます。

   mc_tpcds_benchmark をクリックしてツールパッケージの添付ファイルをダウンロードし、Linux サーバーで次のコマンドを実行して解凍します。

   unzip mc_tpcds_benchmark.zip

   次のコードは、解凍されたファイルのディレクトリ構造を示しています。

   .
   |_t1c7039e3-2a1d-451b-bfda-d14c49016243-tpc-ds-tool.zip
   |_config
   |_init_tools.sh
   |_load_table.sh
   |_logs
   |_odps_clt
   |_patches
   |_pt.sh
   |_queries_1
   |_queries_1.quality
   |_queries_10
   |_queries_100
   |_queries_1000
   |_queries_10000
   |_queries_100000
   |_querygen.sh
   |_results
   |_run_stream.sh
   |_run_stream.sh.offline
   |_sqls
   |_start_session_only.sh
   |_start_session.sql
   |_start_session.sql_tmp
   |_tools_file
   |_tt.sh
   |_v2.10.1rc3

3. テストデータセットを取得します。

   MaxCompute はパブリック データセットを提供します。テストデータを自分で準備する必要はありません。すべてのデータは MaxCompute パブリック プロジェクト BIGDATA_PUBLIC_DATASET に保存されています。詳細については、「パブリック データセットの概要」をご参照ください。

   TPC-DS テストデータセットは、データサイズに基づいて 10 GB、100 GB、1 TB、および 10 TB のデータセットに分割されます。次の表に、データセットを示します。

   カテゴリ	概要	データセット名	スキーマ名
   TPC-DS	TPC-DS は、クエリやデータメンテナンスなど、意思決定支援システムのいくつかの一般的に適用可能な側面をモデル化する意思決定支援ベンチマークであり、ビッグデータシステムなどの新しいテクノロジーがベンチマークテストを実行できるようにします。	TPC-DS 10 GB パフォーマンス テスト データセット TPC-DS 100 GB パフォーマンス テスト データセット TPC-DS 1 TB パフォーマンス テスト データセット TPC-DS 10 TB パフォーマンス テスト データセット	tpcds_10g tpcds_100g tpcds_1t tpcds_10t

テストプロセス

nohup sh pt.sh > pt.log 2>&1 &

tail -f pt.log