Simple Log Service (SLS) は、時系列メトリックのクエリや MetricStore へのメトリックデータの書き込みのために、複数の API を提供します。これらの API は、オープンソースの Prometheus プロトコルと互換性があります。本トピックでは、これらの API について詳しく説明します。
概要
Prometheus が提供する API は /api/v1/ ディレクトリにあります。MetricStore の API も同じ規則に従います。完全な URL は https://{project}.{sls-endpoint}/prometheus/{project}/{metricstore}/api/v1/ です。
変数 | 必須 | 説明 |
{sls-endpoint} | はい | Simple Log Service のエンドポイント。エンドポイントは、サービスにアクセスするために使用されるドメイン名です。エンドポイントは、プロジェクトが配置されているリージョンによって異なります。詳細については、「エンドポイント」をご参照ください。 |
{project} | はい | [プロジェクト名]:プロジェクトは、SLS のリソース管理単位です。これは、マルチユーザーの隔離とアクセスの制御における主要な境界です。詳細については、「プロジェクトの管理」をご参照ください。 |
{metricstore} | はい | 作成した MetricStore。詳細については、「MetricStore の作成」をご参照ください。 |
API を呼び出す際には、BasicAuth 認証を使用する必要があります。[Username] を AccessKey ID に、[Password] を AccessKey Secret に設定します。Resource Access Management (RAM) ユーザーの AccessKey を使用することを推奨します。指定されたプロジェクトをクエリする権限を RAM ユーザーに付与する必要があります。詳細については、「権限アシスタントの設定」をご参照ください。
API は Security Token Service (STS) 認証もサポートしています。この場合、BasicAuth の [Password] は {AccessKey Secret}${STS Token} というフォーマットになります。詳細については、「STS とは」をご参照ください。
時系列メトリッククエリ API
時系列メトリッククエリ API には、Instant Queries API と Range Queries API があります。
即時クエリ API
即時クエリ API を使用して、特定の時点のメトリックデータをクエリできます。
GET https://{project}.{sls-endpoint}/prometheus/{project}/{metricstore}/api/v1/query
POST https://{project}.{sls-endpoint}/prometheus/{project}/{metricstore}/api/v1/query次の表にパラメーターを示します。
変数 | 必須 | 説明 |
query | はい | Prometheus クエリ言語 (PromQL) 文。詳細については、「PromQL 構文」をご参照ください。 |
time | いいえ | クエリを実行する時点。値は UNIX タイムスタンプで、秒単位の精度です。デフォルト値は現在の時刻です。 |
timeout | いいえ | クエリ実行のタイムアウト期間 (秒単位)。 1s、2m、3h、4d などのフォーマットもサポートされています。例:timeout=10s。詳細については、「Time Durations」をご参照ください。 |
lookback_delta | いいえ | 現在のクエリに対してのみ、Prometheus の `query.lookback-delta` フラグをカスタマイズします。値は Time Durations フォーマットに従う必要があります。例:`lookback_delta=1m`。詳細については、「Time Durations」をご参照ください。このパラメーターは、PromQL の計算でデータポイントを検索するための最大ルックバック間隔を指定します。SLS MetricStore でのデフォルト値は `3m` です。 |
例
curl -X GET 'https://haoqi-sls-metric-test.pub-cn-hangzhou.log.aliyuncs.com/prometheus/haoqi-sls-metric-test/prometheus-metrics/api/v1/query?query=up&time=1676700699' \ -u username:password \ -H 'Content-Type: application/x-www-form-urlencoded' # ユーザー名とパスワードを Alibaba Cloud の AccessKey に設定します。クエリ結果
{ "status": "success", "data": { "resultType": "vector", "result": [ { "metric": { "__name__": "up", "instance": "demo.promlabs.com:10001", "job": "demo" }, "value": [ 1676700550.696, "1" ] }, { "metric": { "__name__": "up", "instance": "demo.promlabs.com:10000", "job": "demo" }, "value": [ 1676700550.696, "1" ] } ] } }
範囲クエリ API
範囲クエリ API を使用して、指定された時間範囲内の複数の時点のメトリックデータをクエリできます。
GET https://{project}.{sls-endpoint}/prometheus/{project}/{metricstore}/api/v1/query_range
POST https://{project}.{sls-endpoint}/prometheus/{project}/{metricstore}/api/v1/query_range次の表にパラメーターを示します。
変数 | 必須 | 説明 |
query | はい | PromQL 文。詳細については、「PromQL 構文」をご参照ください。 |
start | いいえ | クエリの開始時刻。値は UNIX タイムスタンプで、秒単位の精度です。 |
end | いいえ | クエリの終了時刻。値は UNIX タイムスタンプで、秒単位の精度です。 |
step | いいえ | クエリ実行の間隔 (秒単位)。 1s、2m、3h、4d などのフォーマットもサポートされています。例:`step=2m`。詳細については、「Time Durations」をご参照ください。 |
timeout | いいえ | クエリ実行のタイムアウト期間 (秒単位)。 1s、2m、3h、4d などのフォーマットもサポートされています。例:timeout=10s。詳細については、「Time Durations」をご参照ください。 |
lookback_delta | いいえ | 現在のクエリに対してのみ、Prometheus の `query.lookback-delta` フラグをカスタマイズします。値は Time Durations フォーマットに従う必要があります。例:`lookback_delta=1m`。詳細については、「Time Durations」をご参照ください。このパラメーターは、PromQL の計算でデータポイントを検索するための最大ルックバック間隔を指定します。SLS MetricStore でのデフォルト値は `3m` です。 |
例
この例では、2023-02-18 14:09:59 から 2023-02-18 14:16:39 までのメトリックデータを 60 秒のステップでクエリします。
curl -X GET 'https://haoqi-sls-metric-test.pub-cn-hangzhou.log.aliyuncs.com/prometheus/haoqi-sls-metric-test/prometheus-metrics/api/v1/query_range?query=up&start=1676700599&end=1676700999&step=60s' \ -u username:password \ -H 'Content-Type: application/x-www-form-urlencoded' # ユーザー名とパスワードを Alibaba Cloud の AccessKey に設定します。クエリ結果
{ "status": "success", "data": { "resultType": "matrix", "result": [ { "metric": { "__name__": "up", "instance": "demo.promlabs.com:10000", "job": "demo" }, "values": [ [ 1676700599, "1" ], [ 1676700659, "1" ], [ 1676700719, "0" ], [ 1676700779, "0" ], [ 1676700839, "1" ], [ 1676700899, "0" ], [ 1676700959, "1" ] ] }, { "metric": { "__name__": "up", "instance": "demo.promlabs.com:10001", "job": "demo" }, "values": [ [ 1676700599, "1" ], [ 1676700659, "1" ], [ 1676700719, "0" ], [ 1676700779, "0" ], [ 1676700839, "1" ], [ 1676700899, "1" ], [ 1676700959, "1" ] ] } ] } }
メタデータクエリ API
SLS は、ラベルやラベル値などのメタデータのクエリもサポートしています。SLS のメタデータクエリ API は、Prometheus の「メタデータのクエリ」API と互換性があります。これらの API を使用して、特定の期間内のすべてのメトリック、ラベル、およびラベル値を取得できます。レスポンスには、タイムスタンプや数値は含まれません。
シリーズクエリ API
Query Series API を使用して、指定された期間内に特定の条件に一致するすべてのメトリック名と、それに対応するラベルと値のペアをクエリできます。
GET https://{project}.{sls-endpoint}/prometheus/{project}/{metricstore}/api/v1/series
POST https://{project}.{sls-endpoint}/prometheus/{project}/{metricstore}/api/v1/series次の表にパラメーターを示します。
変数 | 必須 | 説明 |
match[] | はい | フィルター条件。例:match[]=up{instance="demo.*"}。 1 つ以上の値を設定できます。 |
start | いいえ | クエリの開始時刻。値は UNIX タイムスタンプで、秒単位の精度です。 デフォルト値は現在の時刻の 5 分前です。 |
end | いいえ | クエリの終了時刻。値は UNIX タイムスタンプで、秒単位の精度です。 デフォルト値は現在の時間です。 重要 start と end の両方のパラメーターにカスタム値を指定した場合、API は end 時刻の 5 分前までのデータクエリのみをサポートします。クエリ範囲は `(end - 5 分, end)` です。 |
例
curl -g -X GET 'https://haoqi-sls-metric-test.pub-cn-hangzhou.log.aliyuncs.com/prometheus/haoqi-sls-metric-test/prometheus-metrics/api/v1/series?match[]=up{instance="demo.promlabs.com:10000"}&match[]=go_sched_latencies_seconds_bucket&start=1676700599&end=1676700999' \ -u username:password \ -H 'Content-Type: application/x-www-form-urlencoded' # ユーザー名とパスワードを Alibaba Cloud の AccessKey に設定します。結果
{ "status": "success", "data": [ { "__name__": "go_gc_duration_seconds_count", "instance": "demo.promlabs.com:10000", "job": "demo" }, { "__name__": "go_gc_duration_seconds_count", "instance": "demo.promlabs.com:10001", "job": "demo" }, { "__name__": "up", "instance": "demo.promlabs.com:10000", "job": "demo" } ] }
ラベル名クエリ API
この API を使用して、指定された期間内に特定の条件に一致するすべてのラベル名をクエリできます。
GET https://{project}.{sls-endpoint}/prometheus/{project}/{metricstore}/api/v1/labels
POST https://{project}.{sls-endpoint}/prometheus/{project}/{metricstore}/api/v1/labels次の表にパラメーターを示します。
変数 | 必須 | 説明 |
match[] | はい | フィルター条件。例: `match[]=up{instance="demo.*"}`。 0、1、またはそれ以上の値を指定できます。 |
start | いいえ | クエリ範囲の開始時刻。値は UNIX タイムスタンプで、秒単位の精度です。 デフォルト値は現在の時刻の 5 分前です。 |
end | いいえ | クエリ範囲の終了時刻。値は UNIX タイムスタンプで、秒単位の精度です。 デフォルト値は現在の時間です。 重要 start と end の両方のパラメーターにカスタム値を指定した場合、API は end 時刻の 5 分前までのデータクエリのみをサポートします。クエリ範囲は `(end - 5 分, end)` です。 |
例
この例では、指定された期間内のすべてのメトリックのラベル名をクエリします。
curl -X GET 'https://haoqi-sls-metric-test.pub-cn-hangzhou.log.aliyuncs.com/prometheus/haoqi-sls-metric-test/prometheus-metrics/api/v1/labels?start=1676700599&end=1676700999' \ -u username:password \ -H 'Content-Type: application/x-www-form-urlencoded' # ユーザー名とパスワードを Alibaba Cloud の AccessKey に設定します。クエリ結果
{ "status": "success", "data": [ "code", "instance", "job", "le", "method", "mode", "path", "quantile", "status", "type", "version", "__name__" ] }
ラベル値クエリ API
Query Label Values API を使用して、指定された期間内に特定の条件に一致する、特定のラベル名のすべてのラベル値をクエリできます。
API URL で、<label_name> を特定のラベル名に置き換えてください。
GET https://{project}.{sls-endpoint}/prometheus/{project}/{metricstore}/api/v1/label/<label_name>/values次の表にパラメーターを示します。
変数 | 必須 | 説明 |
match[] | はい | フィルター条件。例: `match[]=up{instance="demo.*"}`。 1 つ以上の値を指定できます。 |
start | いいえ | クエリの開始時刻。値は UNIX タイムスタンプで、秒単位の精度です。 デフォルト値は現在の時刻の 5 分前です。 |
end | いいえ | クエリ範囲の終了時刻。値は UNIX タイムスタンプで、秒単位の精度です。 デフォルト値は現在の時間です。 重要 start と end の両方のパラメーターにカスタム値を指定した場合、API は end 時刻の 5 分前までのデータクエリのみをサポートします。クエリ範囲は `(end - 5 分, end)` です。 |
例
この例では、指定された期間内の up メトリックの instance ラベルのすべてのラベル値をクエリします。
curl -X GET 'https://haoqi-sls-metric-test.pub-cn-hangzhou.log.aliyuncs.com/prometheus/haoqi-sls-metric-test/prometheus-metrics/api/v1/label/instance/values?match[]=up&start=1676700599&end=1676700999' \ -u username:password \ -H 'Content-Type: application/x-www-form-urlencoded' # ユーザー名とパスワードを Alibaba Cloud の AccessKey に設定します。クエリ結果
{ "status": "success", "data": [ "demo.promlabs.com:10000", "demo.promlabs.com:10001", "demo.promlabs.com:10002" ] }
データ書き込み API
Prometheus プロセスの設定ファイルで `remote_write` パラメーターを設定することで、時系列データを MetricStore に取り込むことができます。詳細については、「remote write プロトコルを使用した Prometheus モニタリングデータの取り込み」をご参照ください。MetricStore は Prometheus の remote write プロトコルと互換性があるため、Prometheus プロセスを使用せずに、HTTP 経由で `remote_write` API を直接呼び出して MetricStore にデータを書き込むこともできます。
MetricStore は、remote write プロトコルと互換性のある次の API を提供します。この API は時系列データを解析し、そのデータをバックエンドストレージに書き込みます。
remote write プロトコルを使用して時系列データが SLS MetricStore に書き込まれる場合、SLS はデフォルトで `MetricName` と `Labels` をハッシュキーとして使用します。これにより、異なる時系列からの時系列データが特定のシャードにルーティングされ、ストレージ内のデータ局所性が向上します。
POST https://{project}.{sls-endpoint}/prometheus/{project}/{metricstore}/api/v1/write次のコードに例を示します。
import (
"bytes"
"flag"
"fmt"
"github.com/gogo/protobuf/proto"
"github.com/golang/snappy"
"github.com/prometheus/prometheus/prompb"
"io/ioutil"
"net/http"
"time"
)
func MockRemoteWrite() {
project := flag.String("project", "xxxx", "")
metricStore := flag.String("metricstore", "xxxx", "")
endpoint := flag.String("endpoint", "xxxx", "")
akId := flag.String("akid", "xxxx", "") // AccessKey 情報。
akKey := flag.String("aksecret", "xxxx", "")
flag.Parse()
Url := fmt.Sprintf("https://%s.%s/prometheus/%s/%s/api/v1/write", *project, *endpoint, *project, *metricStore)
timestamp := time.Now().UnixNano()
timeSeries := []prompb.TimeSeries{
{
Labels: []prompb.Label{
{Name: "__name__", Value: "test_metric"},
{Name: "app", Value: "HOST"},
{Name: "device", Value: "vda"},
},
Samples: []prompb.Sample{
{Timestamp: timestamp / 1000000, Value: 100},
{Timestamp: timestamp/1000000 + 10000, Value: 200},
{Timestamp: timestamp/1000000 + 20000, Value: 400},
{Timestamp: timestamp/1000000 + 30000, Value: 300},
},
},
{
Labels: []prompb.Label{
{Name: "__name__", Value: "test_metric"},
{Name: "app", Value: "HOST"},
{Name: "device", Value: "vda"},
{Name: "uid", Value: "123456"},
},
Samples: []prompb.Sample{
{Timestamp: timestamp / 1000000, Value: 100},
{Timestamp: timestamp/1000000 + 10000, Value: 200},
{Timestamp: timestamp/1000000 + 20000, Value: 400},
{Timestamp: timestamp/1000000 + 30000, Value: 600},
},
},
}
data, _ := proto.Marshal(&prompb.WriteRequest{Timeseries: timeSeries})
bufBody := snappy.Encode(nil, data)
rwR, err := http.NewRequest("POST", Url, ioutil.NopCloser(bytes.NewReader(bufBody)))
rwR.Header.Add("Content-Encoding", "snappy")
rwR.Header.Set("Content-Type", "application/x-protobuf")
rwR.SetBasicAuth(*akId, *akKey) // Basic 認証情報を設定します。
if err != nil {
fmt.Println(err.Error())
return
}
start := time.Now().UnixNano() / 1000000 // ms
do, err := client.Do(rwR)
end := time.Now().UnixNano() / 1000000 // ms
if err != nil {
panic(err)
}
status, result := parseResp(do)
fmt.Println("status:", status, "result:", result, "duration:", end-start)
}
func parseResp(resp *http.Response) (status, data string) {
defer resp.Body.Close()
body, err := ioutil.ReadAll(resp.Body) // 本文の内容は完全に読み取る必要があります。
if err != nil {
panic(err)
}
return resp.Status, string(body)
}SDK の例
HTTP 経由でのクエリ API へのアクセス
import (
"flag"
"fmt"
"io/ioutil"
"net/http"
"net/url"
"strconv"
"strings"
"time"
)
const separator = "#"
func http_main() {
project := flag.String("project", "xxxx", "")
metricStore := flag.String("metricstore", "xxxx", "")
endpoint := flag.String("endpoint", "xxxx", "")
akId := flag.String("akid", "xxxx", "")
akKey := flag.String("aksecret", "xxxx", "")
query := flag.String("query", "avg(up)", "")
queryType := flag.String("type", "values", "range or query or labels or values or series")
matches := flag.String("match", "up", "") // # シンボルを使用して複数の match[] パラメーターを連結します。
labelName := flag.String("label", "instance", "")
step := flag.String("step", "1m", "")
fromtime := flag.String("from", "2023-02-15T00:00:00Z", "time 2006-01-02T15:04:05Z07:00")
totime := flag.String("to", "2023-02-15T00:15:00Z", "time 2006-01-02T15:04:05Z07:00")
flag.Parse()
timeFrom, err := time.Parse(time.RFC3339, *fromtime)
if err != nil {
panic(err)
}
timeTo, err := time.Parse(time.RFC3339, *totime)
if err != nil {
panic(err)
}
// URL: https://{project}.{sls-endpoint}/prometheus/{project}/{metricstore}
prometheusEndpoint := fmt.Sprintf("https://%s/prometheus/%s/%s", *project+"."+*endpoint, *project, *metricStore)
var uri string
urlVal := url.Values{}
urlVal.Add("start", strconv.FormatInt(timeFrom.Unix(), 10))
urlVal.Add("end", strconv.FormatInt(timeTo.Unix(), 10))
switch *queryType {
case "range":
urlVal.Add("query", *query)
urlVal.Add("step", *step)
uri = fmt.Sprintf("%s/api/v1/query_range?%v", prometheusEndpoint, urlVal.Encode())
case "query":
urlVal.Add("query", *query)
urlVal.Add("time", strconv.FormatInt(timeTo.Unix(), 10))
uri = fmt.Sprintf("%s/api/v1/query?%v", prometheusEndpoint, urlVal.Encode())
case "labels":
extractAddMatches(*matches, urlVal)
uri = fmt.Sprintf("%s/api/v1/labels?%v", prometheusEndpoint, urlVal.Encode())
case "values":
extractAddMatches(*matches, urlVal)
uri = fmt.Sprintf("%s/api/v1/label/%s/values?%v", prometheusEndpoint, *labelName, urlVal.Encode())
case "series":
extractAddMatches(*matches, urlVal)
uri = fmt.Sprintf("%s/api/v1/series?%v", prometheusEndpoint, urlVal.Encode())
}
req, _ := http.NewRequest(http.MethodGet, uri, nil)
req.SetBasicAuth(*akId, *akKey)
resp, err := http.DefaultClient.Do(req)
if err != nil {
panic(err)
}
buf, err := ioutil.ReadAll(resp.Body)
resp.Body.Close()
if err != nil {
panic(err)
}
fmt.Println(string(buf))
}
func extractAddMatches(matches string, uVal url.Values) {
splits := strings.Split(matches, separator)
for _, match := range splits {
uVal.Add("match[]", match)
}
}Prometheus SDK を使用したクエリ API へのアクセス
この例は、Prometheus client_golang v1.14.0 に基づいています。
import (
"context"
"flag"
"fmt"
"github.com/prometheus/client_golang/api"
v1 "github.com/prometheus/client_golang/api/prometheus/v1"
"net"
"net/http"
"net/url"
"time"
)
func main() {
project := flag.String("project", "xxxx", "")
metricStore := flag.String("metricstore", "xxxx", "")
endpoint := flag.String("endpoint", "xxxx", "")
akId := flag.String("akid", "xxxx", "")
akKey := flag.String("aksecret", "xxxx", "")
flag.Parse()
// URL: https://{project}.{sls-endpoint}/prometheus/{project}/{metricstore}
prometheusEndpoint := fmt.Sprintf("https://%s.%s/prometheus/%s/%s", *project, *endpoint, *project, *metricStore)
client, err := api.NewClient(api.Config{
Address: prometheusEndpoint,
RoundTripper: &http.Transport{
// Basic 認証を設定
Proxy: func(req *http.Request) (*url.URL, error) {
req.SetBasicAuth(*akId, *akKey)
return nil, nil
},
DialContext: (&net.Dialer{
Timeout: 60 * time.Second,
KeepAlive: 60 * time.Second,
}).DialContext,
TLSHandshakeTimeout: 10 * time.Second,
},
})
if err != nil {
panic(err)
}
v1api := v1.NewAPI(client)
ctx, _ := context.WithTimeout(context.Background(), 60*time.Second)
r := v1.Range{
Start: time.Now().Add(-15 * time.Minute),
End: time.Now(),
Step: time.Minute,
}
// 範囲クエリ
result, warnings, err := v1api.QueryRange(ctx, "avg(up)", r)
if err != nil {
panic(err)
}
if len(warnings) > 0 {
fmt.Printf("Warnings: %v %v\n", warnings, result)
}
fmt.Println(result)
// クエリ
result, warnings, err = v1api.Query(ctx, "avg(up)", time.Now())
if err != nil {
panic(err)
}
if len(warnings) > 0 {
fmt.Printf("Warnings: %v %v\n", warnings, result)
}
fmt.Println(result)
// series
series, warnings, err := v1api.Series(ctx, []string{"up"}, time.Now().Add(-15*time.Minute), time.Now())
if err != nil {
panic(err)
}
if len(warnings) > 0 {
fmt.Printf("Warnings: %v %v\n", warnings, result)
}
fmt.Println(series)
// labels
names, warnings, err := v1api.LabelNames(ctx, []string{"up"}, time.Now().Add(-15*time.Minute), time.Now())
if err != nil {
panic(err)
}
if len(warnings) > 0 {
fmt.Printf("Warnings: %v %v\n", warnings, result)
}
fmt.Println(names)
// labelValues
values, warnings, err := v1api.LabelValues(ctx, "instance", []string{"up"}, time.Now().Add(-15*time.Minute), time.Now())
if err != nil {
panic(err)
}
if len(warnings) > 0 {
fmt.Printf("Warnings: %v %v\n", warnings, result)
}
fmt.Println(values)
}レスポンス構造
クエリ API と書き込み API のレスポンス構造は次のとおりです:
{
"status": "success" | "error",
"data": <data>,
// クエリ分析中にエラーが発生した場合、次の 2 つの項目が返されます。
"errorType": "<string>",
"error": "<string>",
// 通常、不完全なクエリに対して警告メッセージが返されます。
"warnings": ["<string>"]
}エラー処理
このセクションでは、一般的なエラーとそのソリューションについて説明します。
認証失敗
次の情報が返された場合、認証は失敗しています。AccessKey を確認し、修正してください。
{ "status": "error", "code": "401", "errorType": "unauthorized", "error": "get query instance error: {\n \"httpCode\": 401,\n \"errorCode\": \"Unauthorized\",\n \"errorMessage\": \"AccessKeyId not found: xxxx\",\n \"requestID\": \"xxxx\"\n}" }次の情報が返された場合、ソース IP アドレスが VPC CIDR ブロックのホワイトリストに含まれていません。IP アドレスを VPC CIDR ブロックのホワイトリストに追加してください。
{ "status": "error", "code": "401", "errorType": "unauthorized", "error": "get query instance error: {\n \"httpCode\": 401,\n \"errorCode\": \"Unauthorized\",\n \"errorMessage\": \"AccessKeyId not found: xxxx\",\n \"requestID\": \"xxxx\"\n}" }
PromQL 文のエラー
次の情報が返された場合、PromQL 文にエラーが含まれています。query パラメーターのクエリ文を修正してください。
--> /api/v1/query_range?query=up[2m]&start=1676700599&end=1676700999&step=60s
{
"status": "error",
"errorType": "bad_data",
"error": "invalid expression type \"range vector\" for range query, must be Scalar or instant Vector"
}タイムアウトエラー
次の情報が返された場合、タイムアウトエラーが発生しました。timeout パラメーターの値を増やしてください。
{
"status": "error",
"errorType": "timeout",
"error": "query timed out in expression evaluation"
}不完全なクエリ
次の情報が返された場合、クエリは不完全です。クエリの時間範囲を狭めてから、もう一度試すことを推奨します。
{
"status": "success",
"data": {
"resultType": "matrix",
"result": [
{
"metric": {},
"values": [
[
1673798460,
"11111111"
],
[
1673799060,
"22222222"
],
[
1673799660,
"33333333"
]
]
}
]
},
"warnings": [
"Request to Sls partial incompleted, incomplete task count : 11, total : 108"
]
}