Time Series Database:OpenTSDB との利点

背景情報

OpenTSDB プロトコルとの互換性

TSDB の基盤となる技術アーキテクチャは、OpenTSDB のアーキテクチャとは大きく異なります。TSDB は、OpenTSDB によって O&M 用に提供される API 操作と互換性がない場合があります。たとえば、TSDB は、メタデータ情報を管理するために OpenTSDB によって提供される API エンドポイント /api/tree および /api/uid と互換性がありません。OpenTSDB によって提供される API エンドポイントの詳細については、HTTP API にアクセスしてください。次の表に、TSDB と OpenTSDB の互換性を示します。

TSDB は、時系列データのカスタム API エンドポイントも提供します。次の表に、カスタム API エンドポイントを示します。

パフォーマンス比較

テストデータの説明

このセクションでは、データセットを使用してクエリのパフォーマンスをテストする例を示します。パフォーマンステストで使用されるデータは、次のパラメーターを使用して記述されます。

metric

各メトリックの名前には、m というプレフィックスが付きます。

tagkv

次の表に、5 つのタグキーと値のペアを示します。最初の 4 つのタグキーと値のペアの場合、式 10 × 20 × 100 × 100 = 2,000,000 に基づいて合計 2,000,000 の時系列を作成できます。最後のタグキー ip は 2,000,000 の時系列に対応し、タグ値は 1 ずつ増加します。

value

各メトリック値は、1 から 100 までのランダムな値です。

interval

収集間隔は 10 秒で、データは 3 時間連続して収集されます。この場合、収集できるデータポイントの総数は、次の式に基づいて計算されます。3 × 60 × 60/10 × 2,000,000 = 2,160,000,000

統計結果

次の表に、ストレステストの構成項目を示します。

各ストレステストを実行する前に、データベースサービスが再起動されます。これにより、以前のストレステストでリソースが使用されるのを防ぎます。テスト操作のプリロードも実行されます。プリロードを実行しないと、最初のリクエストに応答するのに非常に長い時間がかかる場合があります。これは、応答時間 (RT) の統計結果の精度に影響します。

テスト環境の説明

サーバー構成

書き込み操作用サーバー: 2 コア、8 GB メモリ

データクエリ用サーバー: 64 コア、256 GB メモリ

ApsaraDB for HBase サーバー: 8 コア、16 GB メモリ (合計 5 台のサーバー)

データベースバージョン

OpenTSDB: OpenTSDB V2.3.2 および ApsaraDB for HBase V1.5.0.1

TSDB: TSDB V2.4.2

書き込みパフォーマンスの比較

シナリオ

上記のストレステスト構成を使用する場合、5 つのストレステスターが使用可能であり、各ストレステスターの TPS は 1,000 です。この場合、ストレステスト中に毎秒最大 5,000 データポイントを書き込むことができます。テスト結果に実際のデータベースパフォーマンスが表示されるようにするには、TSDB データベースと OpenTSDB データベースで同期書き込み操作を実行します。TSDB データベースと OpenTSDB データベースでは、データをディスクにフラッシュするために使用される機能を有効にする必要があります。TSDB と OpenTSDB は、次の式を使用してデータポイントのタイムスタンプを計算します。タイムスタンプ = 指定時刻 (base_time) + 間隔 × N。この式では、N は操作呼び出しの回数を指定し、base_time はデータポイントが収集される指定時点を指定します。N 値が増加すると、base_time 値が増加します。TSDB と OpenTSDB は、異なる間隔でデータポイントを収集します。

TSDB のテスト結果

OpenTSDB のテスト結果

TSDB データベースと OpenTSDB データベースのクエリパフォーマンスの比較

シナリオ

上記のストレステスト構成を使用する場合、5 つのストレステスターが使用可能であり、各ストレステスターの 1 秒あたりのクエリ数 (QPS) は 1,000 です。この場合、ストレステスト中に毎秒最大 5,000 データポイントをクエリできます。クエリのデータセットは、書き込み操作のデータセットよりも大きくなります。ストレステスト中に毎秒 5,000 クエリが送信される場合、キュー内のクエリの数が上限を超えると、ドライランの問題が発生する可能性があります。この例では、5,000 が最大 QPS です。これにより、テスト結果の精度が保証されます。ストレステストを実行する前に、TSDB と OpenTSDB はデータベースサーバーログと使用されているリソースをチェックして、データベースが安定して実行されていることを確認します。シナリオ 5 からシナリオ 8 では、データセット全体に基づいてクエリが実行されます。同時クエリリクエストの数が 5,000 から 500、50、5、または 1 に減らされた場合でも、OpenTSDB はこれらのシナリオでは使用できなくなります。この例では、N/A はデータベースサービスが使用できないことを示します。次の表では、0 はデータベースサービスが使用できないことを示します。

クエリステートメント

# 5min
// 5分
null
null
null
null
# 3hour
// 3時間
null
null
null
null

TSDB のテスト結果

OpenTSDB のテスト結果