Simple Log Service:クエリ高速化

グローバルキャッシュ

デフォルトでは、Prometheus クエリ コンピュートエンジンはクエリ結果をキャッシュしません。データをクエリするたびに、すべてのデータが計算されます。データ量が多く、クエリ時間範囲が長いシナリオでは、クエリは非効率的です。グローバルキャッシュ機能は、同じクエリに対して特定の結果の再利用をサポートします。クエリに指定した PromQL 文と step パラメーターが以前のクエリに指定した設定と同じ場合、2 つのクエリは同じと見なされ、以前のクエリの結果を再利用できます。この機能は、同じクエリ時間範囲内でクエリ結果を再利用し、時間範囲を超えるデータを個別にクエリします。

並列計算

デフォルトでは、標準の Prometheus クエリ文を実行して取得されたデータは、単一のコルーチンのサーバー上で計算されます。複数の時系列、長いクエリ時間範囲、複雑な計算ロジックが関係するシナリオでは、クエリ速度が遅くなります。 Simple Log Service は、Prometheus エンジンへの適応を組み込んで、並列および分散 Prometheus クエリをサポートしています。並列計算機能は、時間間隔または時系列ごとに PromQL クエリを分割し、実行するために複数のサーバーにクエリをスケジュールします。複数のサーバーでのクエリの パフォーマンス は、単一のサーバーでのクエリと比較して 2 ～ 10 倍向上します。

• 時間間隔による分割

  この例では、クエリの実行間隔は 12 時間です。クエリは、2 時間間隔で実行される 6 つのサブクエリに分割されます。 6 つのサブクエリは計算のために同時に実行されます。サブクエリの結果はマージされます。

  query:    sum(metric)
  interval: 12h
  step:     2m

• 時系列による分割

  この例では、メトリックには 500,000 の時系列が含まれており、グローバルな同時タスク数は 10 に設定されています。合計 10 個のタスクが同時に実行されます。各タスクは、50,000 の時系列に関連するデータを計算します。タスクが実行された後、タスクの結果がマージされます。

Simple Log Service コンソールで Metricstore のクエリ高速化設定を構成する

[メトリックストア属性] ページで、次の操作を実行します。 [メトリックストア属性] ページへのアクセス方法の詳細については、「Metricstore の構成を変更する」をご参照ください。

次のモードで並列計算を構成できます。

• auto モードでは、Simple Log Service は、最新のクエリタスクの結果における同じクエリによってプルされたデータ量に基づいて、現在の並列計算タスクの並列度を推定します。

• static モードでは、並列度を手動で構成できます。 static モードで並列計算を構成するには、Simple Log Service のテクニカルサポートに相談することをお勧めします。

SDK を使用して Metricstore の MetricsConfig パラメーターを構成する

Simple Log Service Java 用 SDK は、MetricsConfig パラメーターを変更するために使用できる操作を提供します。 JSON 形式で MetricsConfig パラメーターのフィールドを構成できます。例：

{
  "parallel_config": {
    "enable": true,
    "mode": "static",
    "parallel_count_per_host": 2,
    "time_piece_count": 8,
    "time_piece_interval": 21600,
    "total_parallel_count": 8
  },
  "query_cache_config": {
    "enable": true
  }
}

次の表に、クエリ高速化の構成に使用するパラメーター、JSON 形式の MetricsConfig パラメーターのフィールド、および FormValue パラメーターのキーフィールド間のマッピングを示します。

グローバルキャッシュ

x-sls-global-cache-enable=true を追加して、グローバルキャッシュを有効にします。

https://{project}.{sls-endpoint}/prometheus/{project}/{metricstore}/api/v1/query_range?query=sum(up)&start=1690876800&end=1690877800&step=10&x-sls-global-cache-enable=true

並列計算

x-sls-parallel-enable=true&x-sls-parallel-count=16 を追加して、並列計算を有効にし、並列度を 16 に設定します。

https://{project}.{sls-endpoint}/prometheus/{project}/{metricstore}/api/v1/query_range?query=sum(up)&start=1690876800&end=1690877800&step=10&x-sls-parallel-enable=true&x-sls-parallel-count=16