Konfigurasi SLOs dan aturan alerting untuk aplikasi-Alibaba Cloud Service Mesh-Alibaba Cloud

Untuk mengelola dan memantau tingkat layanan suatu aplikasi, Anda dapat mengonfigurasi tujuan tingkat layanan (SLO) dan aturan peringatan di konsol Service Mesh (ASM). Ini memastikan bahwa aplikasi berjalan sesuai harapan. Jika tingkat layanan turun hingga mencapai atau melampaui ambang batas yang telah ditentukan, ASM akan memberikan pengingat berdasarkan tingkat keparahan masalah. Hal ini membantu Anda mengelola tingkat layanan aplikasi secara lebih efisien dan menangani masalah dengan lebih cepat.

Prasyarat

Kluster Container Service for Kubernetes (ACK) telah ditambahkan ke instance ASM versi 1.15.3 atau yang lebih baru. Untuk informasi lebih lanjut, lihat The cluster is added to the ASM instance..
Gateway ingress telah diterapkan.
Injeksi proxy sidecar otomatis telah diaktifkan. Untuk informasi lebih lanjut, lihat Aktifkan injeksi proxy sidecar otomatis.

Langkah 1: Terapkan aplikasi HTTPBin

Buat file httpbin.yaml dengan konten berikut:

Kembangkan untuk melihat file httpbin.yaml

##################################################################################################
# Layanan httpbin
##################################################################################################
apiVersion: v1
kind: ServiceAccount
metadata:
  name: httpbin
---
apiVersion: v1
kind: Service
metadata:
  name: httpbin
  labels:
    app: httpbin
    service: httpbin
spec:
  ports:
  - name: http
    port: 8000
    targetPort: 80
  selector:
    app: httpbin
---
apiVersion: apps/v1
kind: Deployment
metadata:
  name: httpbin
spec:
  replicas: 1
  selector:
    matchLabels:
      app: httpbin
      version: v1
  template:
    metadata:
      labels:
        app: httpbin
        version: v1
    spec:
      serviceAccountName: httpbin
      containers:
      - image: docker.io/kennethreitz/httpbin
        imagePullPolicy: IfNotPresent
        name: httpbin
        ports:
        - containerPort: 80

Gunakan kubectl untuk terhubung ke kluster ACK dan jalankan perintah berikut guna menerapkan aplikasi HTTPBin.
Untuk informasi lebih lanjut tentang cara menggunakan kubectl untuk terhubung ke kluster ACK, lihat Dapatkan file kubeconfig kluster dan gunakan kubectl untuk terhubung ke kluster.
```
kubectl apply -f httpbin.yaml
```

Langkah 2: Buat layanan virtual dan gateway Istio

Buat file httpbin-gateway.yaml dengan konten berikut:

Kembangkan untuk melihat file httpbin-gateway.yaml

apiVersion: networking.istio.io/v1alpha3
kind: Gateway
metadata:
  name: httpbin-gateway
spec:
  selector:
    istio: ingressgateway
  servers:
  - port:
      number: 80
      name: http
      protocol: HTTP
    hosts:
    - "*"
---
apiVersion: networking.istio.io/v1alpha3
kind: VirtualService
metadata:
  name: httpbin
spec:
  hosts:
  - "*"
  gateways:
  - httpbin-gateway
  http:
  - route:
    - destination:
        host: httpbin
        port:
          number: 8000

Gunakan kubectl untuk terhubung ke instance ASM dan jalankan perintah berikut guna menerapkan layanan virtual dan gateway Istio.
Untuk informasi lebih lanjut tentang cara menggunakan kubectl untuk terhubung ke instance ASM, lihat Gunakan kubectl pada bidang kontrol untuk mengakses sumber daya Istio.
```
kubectl apply -f httpbin-gateway.yaml
```
Di bilah alamat browser Anda, masukkan http://{alamat IP gateway ingress}.
Untuk informasi lebih lanjut tentang cara mendapatkan alamat IP gateway ingress, lihat Gunakan sumber daya Istio untuk merutekan lalu lintas ke versi layanan yang berbeda. Jika Anda dapat melihat halaman aplikasi HTTPBin, maka aplikasi HTTPBin berhasil diterapkan.

Langkah 3: Konfigurasikan SLO

Pada contoh ini, sebuah SLO dikonfigurasikan untuk aplikasi HTTPBin di namespace default untuk menentukan ketersediaan layanan. Tujuannya adalah 99% dengan periode waktu selama 30 hari. Dua tingkat keparahan peringatan dikonfigurasikan: Page dan Tiket. Untuk informasi lebih lanjut tentang konsep terkait SLO, lihat Ikhtisar SLO.

Masuk ke konsol ASM. Di panel navigasi sebelah kiri, pilih Service Mesh > Mesh Management.
Di halaman Mesh Management, klik nama instance ASM. Di panel navigasi sebelah kiri, pilih Observability Management Center > SLO Configuration.
Di bagian atas halaman SLO Configuration, pilih namespace default dari daftar drop-down Namespace dan klik Create di kolom Tindakan layanan httpbin.
Di bagian Basic Information halaman Create, atur Duration ke 30d.
Klik tab SLO rule. Atur Name ke asm-slo, Plugin type ke availability, dan Objective ke 99. Aktifkan Enable alerting rules dan atur Alerting rules name ke asm-alert. Aktifkan Enable alerting rule with Ticket level dan Enable alerting rule with Page level.
(Opsional) Di bagian bawah halaman, klik Preview untuk melihat konfigurasi. Pastikan konfigurasi sudah benar dan klik Submit.
Untuk informasi lebih lanjut tentang bidang dalam file konfigurasi, lihat Deskripsi bidang CRD SLO.
Di bagian bawah halaman, klik Create.

Langkah 4: Lihat aturan Prometheus yang dibuat otomatis

Setelah SLO dikonfigurasi, Anda dapat melihat aturan Prometheus yang dibuat otomatis dengan menemukan layanan httpbin di halaman SLO Configuration dan mengklik View Prometheus rules di kolom Tindakan.

查看Promethe规则

Kembangkan untuk melihat contoh aturan Prometheus

groups:
- name: asm-slo-sli-recordings-httpbin-asm-slo
  rules:
  - record: slo:sli_error:ratio_rate5m
    expr: "(\n(\n  sum(rate(istio_requests_total{ destination_service_name=\"httpbin\",destination_service_namespace=\"default\",response_code=~\"(5..|429)\"
      }[5m])) \n  /          \n  (sum(rate(istio_requests_total{ destination_service_name=\"httpbin\",destination_service_namespace=\"default\"
      }[5m])) > 0)\n) OR on() vector(0)\n)"
    labels:
      asm_slo: asm-slo
      slo_id: httpbin-asm-slo
      slo_service: httpbin
      slo_window: 5m
  - record: slo:sli_error:ratio_rate30m
    expr: "(\n(\n  sum(rate(istio_requests_total{ destination_service_name=\"httpbin\",destination_service_namespace=\"default\",response_code=~\"(5..|429)\"
      }[30m])) \n  /          \n  (sum(rate(istio_requests_total{ destination_service_name=\"httpbin\",destination_service_namespace=\"default\"
      }[30m])) > 0)\n) OR on() vector(0)\n)"
    labels:
      asm_slo: asm-slo
      slo_id: httpbin-asm-slo
      slo_service: httpbin
      slo_window: 30m
  - record: slo:sli_error:ratio_rate1h
    expr: "(\n(\n  sum(rate(istio_requests_total{ destination_service_name=\"httpbin\",destination_service_namespace=\"default\",response_code=~\"(5..|429)\"
      }[1h])) \n  /          \n  (sum(rate(istio_requests_total{ destination_service_name=\"httpbin\",destination_service_namespace=\"default\"
      }[1h])) > 0)\n) OR on() vector(0)\n)"
    labels:
      asm_slo: asm-slo
      slo_id: httpbin-asm-slo
      slo_service: httpbin
      slo_window: 1h
  - record: slo:sli_error:ratio_rate2h
    expr: "(\n(\n  sum(rate(istio_requests_total{ destination_service_name=\"httpbin\",destination_service_namespace=\"default\",response_code=~\"(5..|429)\"
      }[2h])) \n  /          \n  (sum(rate(istio_requests_total{ destination_service_name=\"httpbin\",destination_service_namespace=\"default\"
      }[2h])) > 0)\n) OR on() vector(0)\n)"
    labels:
      asm_slo: asm-slo
      slo_id: httpbin-asm-slo
      slo_service: httpbin
      slo_window: 2h
  - record: slo:sli_error:ratio_rate6h
    expr: "(\n(\n  sum(rate(istio_requests_total{ destination_service_name=\"httpbin\",destination_service_namespace=\"default\",response_code=~\"(5..|429)\"
      }[6h])) \n  /          \n  (sum(rate(istio_requests_total{ destination_service_name=\"httpbin\",destination_service_namespace=\"default\"
      }[6h])) > 0)\n) OR on() vector(0)\n)"
    labels:
      asm_slo: asm-slo
      slo_id: httpbin-asm-slo
      slo_service: httpbin
      slo_window: 6h
  - record: slo:sli_error:ratio_rate1d
    expr: "(\n(\n  sum(rate(istio_requests_total{ destination_service_name=\"httpbin\",destination_service_namespace=\"default\",response_code=~\"(5..|429)\"
      }[1d])) \n  /          \n  (sum(rate(istio_requests_total{ destination_service_name=\"httpbin\",destination_service_namespace=\"default\"
      }[1d])) > 0)\n) OR on() vector(0)\n)"
    labels:
      asm_slo: asm-slo
      slo_id: httpbin-asm-slo
      slo_service: httpbin
      slo_window: 1d
  - record: slo:sli_error:ratio_rate3d
    expr: "(\n(\n  sum(rate(istio_requests_total{ destination_service_name=\"httpbin\",destination_service_namespace=\"default\",response_code=~\"(5..|429)\"
      }[3d])) \n  /          \n  (sum(rate(istio_requests_total{ destination_service_name=\"httpbin\",destination_service_namespace=\"default\"
      }[3d])) > 0)\n) OR on() vector(0)\n)"
    labels:
      asm_slo: asm-slo
      slo_id: httpbin-asm-slo
      slo_service: httpbin
      slo_window: 3d
  - record: slo:sli_error:ratio_rate30d
    expr: |
      sum_over_time(slo:sli_error:ratio_rate5m{asm_slo="asm-slo", slo_id="httpbin-asm-slo", slo_service="httpbin"}[30d])
      / ignoring (slo_window)
      count_over_time(slo:sli_error:ratio_rate5m{asm_slo="asm-slo", slo_id="httpbin-asm-slo", slo_service="httpbin"}[30d])
    labels:
      slo_window: 30d
- name: asm-slo-meta-recordings-httpbin-asm-slo
  rules:
  - record: slo:objective:ratio
    expr: vector(0.99)
    labels:
      asm_slo: asm-slo
      slo_id: httpbin-asm-slo
      slo_service: httpbin
  - record: slo:error_budget:ratio
    expr: vector(1-0.99)
    labels:
      asm_slo: asm-slo
      slo_id: httpbin-asm-slo
      slo_service: httpbin
  - record: slo:time_period:days
    expr: vector(30)
    labels:
      asm_slo: asm-slo
      slo_id: httpbin-asm-slo
      slo_service: httpbin
  - record: slo:current_burn_rate:ratio
    expr: |
      slo:sli_error:ratio_rate5m{asm_slo="asm-slo", slo_id="httpbin-asm-slo", slo_service="httpbin"}
      / on(slo_id, asm_slo, slo_service) group_left
      slo:error_budget:ratio{asm_slo="asm-slo", slo_id="httpbin-asm-slo", slo_service="httpbin"}
    labels:
      asm_slo: asm-slo
      slo_id: httpbin-asm-slo
      slo_service: httpbin
  - record: slo:period_burn_rate:ratio
    expr: |
      slo:sli_error:ratio_rate30d{asm_slo="asm-slo", slo_id="httpbin-asm-slo", slo_service="httpbin"}
      / on(slo_id, asm_slo, slo_service) group_left
      slo:error_budget:ratio{asm_slo="asm-slo", slo_id="httpbin-asm-slo", slo_service="httpbin"}
    labels:
      asm_slo: asm-slo
      slo_id: httpbin-asm-slo
      slo_service: httpbin
  - record: slo:period_error_budget_remaining:ratio
    expr: 1 - slo:period_burn_rate:ratio{asm_slo="asm-slo", slo_id="httpbin-asm-slo",
      slo_service="httpbin"}
    labels:
      asm_slo: asm-slo
      slo_id: httpbin-asm-slo
      slo_service: httpbin
  - record: asm_slo_info
    expr: vector(1)
    labels:
      asm_slo: asm-slo
      slo_id: httpbin-asm-slo
      slo_mode: cli-gen-prom
      slo_objective: "99"
      slo_service: httpbin
      slo_spec: prometheus/v1
      slo_version: dev
- name: asm-slo-alerts-httpbin-asm-slo
  rules:
  - alert: asm-alert
    expr: |
      (
          (slo:sli_error:ratio_rate5m{asm_slo="asm-slo", slo_id="httpbin-asm-slo", slo_service="httpbin"} > (14.4 * 0.01))
          and ignoring (slo_window)
          (slo:sli_error:ratio_rate1h{asm_slo="asm-slo", slo_id="httpbin-asm-slo", slo_service="httpbin"} > (14.4 * 0.01))
      )
      or ignoring (slo_window)
      (
          (slo:sli_error:ratio_rate30m{asm_slo="asm-slo", slo_id="httpbin-asm-slo", slo_service="httpbin"} > (6 * 0.01))
          and ignoring (slo_window)
          (slo:sli_error:ratio_rate6h{asm_slo="asm-slo", slo_id="httpbin-asm-slo", slo_service="httpbin"} > (6 * 0.01))
      )
    labels:
      slo_severity: page
    annotations:
      summary: '{{$labels.slo_service}} {{$labels.asm_slo}} anggaran kesalahan SLO melebihi yang diharapkan.'
      title: (page) {{$labels.slo_service}} {{$labels.asm_slo}} laju pembakaran anggaran kesalahan SLO terlalu cepat.
  - alert: asm-alert
    expr: |
      (
          (slo:sli_error:ratio_rate2h{asm_slo="asm-slo", slo_id="httpbin-asm-slo", slo_service="httpbin"} > (3 * 0.01))
          and ignoring (slo_window)
          (slo:sli_error:ratio_rate1d{asm_slo="asm-slo", slo_id="httpbin-asm-slo", slo_service="httpbin"} > (3 * 0.01))
      )
      or ignoring (slo_window)
      (
          (slo:sli_error:ratio_rate6h{asm_slo="asm-slo", slo_id="httpbin-asm-slo", slo_service="httpbin"} > (1 * 0.01))
          and ignoring (slo_window)
          (slo:sli_error:ratio_rate3d{asm_slo="asm-slo", slo_id="httpbin-asm-slo", slo_service="httpbin"} > (1 * 0.01))
      )
    labels:
      slo_severity: ticket
    annotations:
      summary: '{{$labels.slo_service}} {{$labels.asm_slo}} anggaran kesalahan SLO melebihi yang diharapkan.'
      title: (ticket) {{$labels.slo_service}} {{$labels.asm_slo}} laju pembakaran anggaran kesalahan SLO terlalu cepat.

Apa yang harus dilakukan selanjutnya

Anda dapat mengimpor aturan Prometheus yang dihasilkan ke sistem Prometheus agar SLO berlaku dan menggunakan Grafana untuk melihat metrik terkait SLO. Untuk informasi lebih lanjut, lihat Impor aturan Prometheus yang dihasilkan ke sistem Prometheus agar SLO berlaku dan Gunakan Grafana untuk melihat SLO.