Simple Log Service:SPL 関数

制限

• make-series を使用して、データを series フォーマットで構築する必要があります。時間単位はナノ秒である必要があります。

• 各行には少なくとも 31 個のデータポイントが含まれている必要があります。

構文

series_forecast(array(T) field, bigint periods)

または

series_forecast(array(T) field, bigint periods, varchar params)

パラメーター

戻り値

row(
  time_series array(bigint),
  metric_series array(double),
  forecast_metric_series array(double),
  forecast_metric_upper_series array(double),
  forecast_metric_lower_series array(double),
  forecast_start_index bigint,
  forecast_length bigint,
  error_msg varchar)

例

次の 10 データポイントについて、異なる request_method 値の数をカウントします。

• SPL 文

  * | extend ts = second_to_nano(__time__ - __time__ % 60)
    | stats latency_avg = max(cast(status as double)), inflow_avg = min(cast (status as double)) by ts, request_method
    | make-series   latency_avg  default = 'last',
                  inflow_avg default = 'last'
                  on ts 
                  from 'min' to 'max'
                   step '1m' 
                  by request_method
   | extend test=series_forecast(inflow_avg, 10)

• 出力

  

アルゴリズムパラメーター

D        daily frequency
H        hourly frequency
T, min   minutely frequency
S        secondly frequency

制限

• make-series を使用して、データを series フォーマットで構築する必要があります。時間単位はナノ秒である必要があります。

• 各行には少なくとも 11 個のデータポイントが含まれている必要があります。

構文

series_pattern_anomalies(array(T) metric_series)

パラメーター

戻り値

row(
  anomalies_score_series array(double),
  anomalies_type_series array(varchar)
  error_msg varchar
) 

例

現在のデータポイントでシーケンスの異常を検出します。

• SPL 文

  * | extend ts = second_to_nano(__time__ - __time__ % 60)
    | stats latency_avg = max(cast(status as double)), inflow_avg = min(cast (status as double)) by ts, request_method
    | where request_method is not null
    | make-series   latency_avg  default = 'last',
                  inflow_avg default = 'last'
                  on ts 
                  from 'min' to 'max'
                   step '1m' 
                  by request_method
   | extend test=series_pattern_anomalies(inflow_avg)

• 出力

  

制限

• make-series を使用して、データを series フォーマットで構築する必要があります。時間単位はナノ秒である必要があります。

• 各行には少なくとも 11 個のデータポイントが含まれている必要があります。

構文

series_decompose_anomalies(array(T) metric_series)

または

series_decompose_anomalies(array(T) metric_series, varchar params)

パラメーター

戻り値

row(
  metric_baseline_series array(double)
  anomalies_score_series array(double),
  anomalies_type_series array(varchar)
  error_msg varchar
) 

例

すべての時系列で異常検出を実行した後、異常スコアが 0 以上の過去 5 分間の時系列を保持します。

• SPL 文

  * | extend ts = second_to_nano(__time__ - __time__ % 60)
    | stats latency_avg = max(cast(status as double)), inflow_avg = min(cast (status as double)) by ts, request_method
    | where request_method is not null
    | make-series   latency_avg  default = 'last',
                  inflow_avg default = 'last'
                  on ts 
                  from 'min' to 'max'
                   step '1m' 
                  by request_method
   | extend test=series_decompose_anomalies(inflow_avg, '{"confidence":"0.005"}')
   | extend anomalies_score_series = test.anomalies_score_series
   | where array_max(slice(anomalies_score_series, -5, 5)) >= 0

• 出力

  

アルゴリズムパラメーター

構文

series_drilldown(array(varchar) label_0_array,array(varchar) label_1_array,array(varchar) label_2_array, ... ,array(array(bigint)) time_series_array,array(array(double)) metric_series_array,bigint begin_time,bigint end_time)

または

series_drilldown(array(varchar) label_0_array,array(varchar) label_1_array,array(varchar) label_2_array, ... ,array(array(bigint)) time_series_array,array(array(double)) metric_series_array,bigint begin_time,bigint end_time,varchar config)

パラメーター

戻り値

row(dirlldown_result varchar, error_msg varchar)

dirlldown_result パラメーターの説明

{
  "attrs": [
    {
      "api": "/ids/ml/annotationdataset",
      "resource": "test"
    },
    {
      "api": "/console/logs/getLogs"
    }
  ],
  "statistics": {
    "relative_ratio": 0.5003007763190033,
    "relative_ratio_predict": 1.0000575873881987,
    "unexpected_difference": -4.998402840764594,
    "relative_unexpected_difference": -0.499660063545782,
    "difference": -4.999183856137503,
    "predict": 5.005203022057271,
    "relative_ratio_real": 1.9987568734256989,
    "real": 10.004386878194774,
    "support": 50
  }
}

例

• SPL 文

  *
  | extend ts= (__time__- __time__%60)*1000000000
  | stats access_count = count(1) by ts, Method, ProjectName
  | extend access_count = cast( access_count as double)
  | make-series   access_count = access_count default = 'null'
                  on ts
                  from 'sls_begin_time' to 'sls_end_time'
                  step '1m'
                  by Method, ProjectName
  | stats m_arr = array_agg(Method), ProjectName = array_agg(ProjectName), ts_arr = array_agg(__ts__), metrics_arr = array_agg(access_count)
  | extend ret = series_drilldown(ARRAY['Method', 'Project'], m_arr, ProjectName, ts_arr, metrics_arr, 1739192700000000000, 1739193000000000000, '{"fill_na": "1", "gap_size": "3"}')
  | project ret

• 出力

  

構文

cluster(array(array(double)) array_vector, varchar cluster_mode,varchar params)

パラメーター

{
  "n_clusters": "5",
  "max_iter": "100",
  "tol": "0.0001",
  "init_mode": "kmeans++",
  "metric": "cosine/euclidean"
}

{
  "epsilon": "0.1", // 注: epsilon の値が 0 以下の場合、アルゴリズムはこのパラメーターを自動的に推測します。
  "min_samples": "5"
}

戻り値

row(
  n_clusters bigint, 
  cluster_sizes array(bigint), 
  assignments array(bigint),  
  error_msg varchar 
)

例

• SPL 文

  * and __tag__:__job__: sql-calculate-metric
  | extend time = cast(time as bigint) - cast(time as bigint) % 300 
  | extend time = second_to_nano(time) 
  | stats avg_latency = avg(cast(sum_latency as double)) by time, Method 
  | make-series avg_latency = avg_latency default = '0' on time from 'sls_begin_time' to 'sls_end_time' step '5m' by Method 
  | stats method_array = array_agg(Method), ts_array = array_agg(__ts__), ds_array = array_agg(avg_latency)
  | extend ret = cluster(ds_array, 'kmeans', '{"n_clusters":"5"}')
  | extend n_clusters = ret.n_clusters, cluster_sizes = ret.cluster_sizes, assignments = ret.assignments, error_msg = ret.assignments

• 出力

  

制限

make-series を使用して、データを `series` フォーマットで構築する必要があります。時間単位はナノ秒である必要があります。

構文

series_describe(__ts__ array<bigint>, __ds__ array<double>)

または

series_describe(__ts__ array<bigint>, __ds__ array<double>,config varchar)

パラメーター

戻り値

row(statistic varchar, error_msg varchar)

{
	"duplicate_count": 0, 
	"total_count": 1,
	"mean": 3.0,
	"variance": null,
	"min": 3.0,
	"max": 3.0,
	"median": 3.0,
	"interval": null,
	"missing_count": 0,
	"adf_test": null,
	"is_stable": false,
	"period": null,
	"trend": null
}

例

• SPL 文

  * and entity.file_name: "239_UCR_Anomaly_taichidbS0715Master.test.csv"
  | extend time = cast(__time__ as bigint) 
  | extend time = time - time % 60 
  | stats value = avg(cast(value as double)) by time 
  | extend time = second_to_nano(time)
  | make-series value = value default = 'nan' on time from 'min' to 'max' step '1m' 
  | extend ret = series_describe(value)

• 出力

  

制限

入力パラメーターは、make-series を使用して構築された `series` フォーマットのデータである必要があります。

構文

• オーバーロード 1

  correlation(arr_1 array(double), arr_2 array(double), params varchar)

• オーバーロード 2

  correlation(arr_arr_1, array(array(double)), arr_2 array(double), params varchar)

• 過負荷 3

  correlation(arr_arr_1 array(array(double)), arr_arr_2  array(array(double)), params varchar)

パラメーター

• オーバーロード 1

  パラメーター	説明
  arr_1	時系列。make-series によって生成された単一のユニットです。
  arr_2	時系列。make-series によって生成された単一のユニットです。
  params	任意。JSON フォーマットのアルゴリズムパラメーター。

• オーバーロード 2

  パラメーター	説明
  arr_arr_1	make-series によって生成された単一のユニットである時系列は、array_agg 関数を使用して処理され、2 次元配列として返されます。
  arr_2	時系列。make-series によって生成された単一のユニットです。
  params	任意。JSON フォーマットのアルゴリズムパラメーター。

• オーバーロード 3

  パラメーター	説明
  arr_arr_1	make-series によって生成された単一のユニットである時系列は、array_agg 関数を使用して処理され、2 次元配列として返されます。
  arr_arr_2	make-series によって生成された単一のユニットである時系列は、array_agg 関数を使用して処理され、2 次元配列として返されます。
  params	任意。JSON フォーマットのアルゴリズムパラメーター。

アルゴリズムパラメーター

戻り値

• オーバーロード 1

  row(result double)

  列名	型	説明
  result	double	入力パラメーター `arr_1` と `arr_2` の間の相関係数。

• オーバーロード 2

  row(result  array(double))

  列名	型	説明
  result	array(double)	`arr_arr_1` の各ベクターと `arr_2` の間の相関係数の配列。返される配列の長さは、`arr_arr_1` のベクターの数です。

• オーバーロード 3

  row(result  array(array(double)))

  列名	型	説明
  result	array(array(double))	マトリックス。データが空でない場合、行 i と列 j の要素は `arr_arr_1[i]` と `arr_arr_2[j]` の間の相関係数です。

例