Container Service for Kubernetes:ACK One GitOps と Argo Rollouts を使用したカナリアリリースの実行

オプション 1：手動昇格

このアプローチでは、最初のトラフィックステップの後にカナリアを一時停止し、続行する前に新しいバージョンを検証できます。

トラフィックステップ： 20% → 一時停止 (無期限) → 40% (5 分) → 60% (5 分) → 80% (5 分) → 100%

それぞれ 5 分の 3 つの時間指定ステップがあるため、最初の手動承認後の昇格には約 15 分かかります。

1. rollout.yaml を新しいイメージタグと最初のステップ後の手動一時停止で更新し、コミットしてプッシュします：

   apiVersion: argoproj.io/v1alpha1
   kind: Rollout
   metadata:
     name: rollouts-demo
   spec:
     replicas: 4
     strategy:
       canary:
         canaryService: rollouts-demo-canary
         stableService: rollouts-demo-stable
         trafficRouting:
           nginx:
             stableIngress: rollouts-demo-stable
         steps:
           - setWeight: 20
           - pause: {}          # 無期限の一時停止 — {} を期間に置き換えて手動で進めます
           - setWeight: 40
           - pause: {duration: 5m}
           - setWeight: 60
           - pause: {duration: 5m}
           - setWeight: 80
           - pause: {duration: 5m}
     revisionHistoryLimit: 2
     selector:
       matchLabels:
         app: rollouts-demo
     template:
       metadata:
         labels:
           app: rollouts-demo
       spec:
         containers:
         - name: rollouts-demo
           image: argoproj/rollouts-demo:yellow   # 新しいイメージタグ
           ports:
           - name: http
             containerPort: 8080
             protocol: TCP
           resources:
             requests:
               memory: 32Mi
               cpu: 5m

2. ロールアウトが 20% のトラフィックで一時停止するのを監視します：

   kubectl argo rollouts get rollout rollouts-demo --watch

   期待される出力：期間が設定されていないため、ロールアウトは最初の pause: {} ステップで停止します。再開した後にのみ進行します。

   

3. rollout.yaml の一時停止期間を更新してカナリアリリースを再開し、コミットしてプッシュします：

   steps:
     - setWeight: 20
     - pause: {duration: 10s}   # {} を期間に置き換えて再開します

   その後、リリースが完了するのを監視します：

   kubectl argo rollouts get rollout rollouts-demo --watch

   昇格中の期待される出力：

   

   完了後の期待される出力：

   

オプション 2：Prometheus メトリックによる自動昇格

このアプローチでは、Managed Service for Prometheus を使用して、カナリアの HTTP 成功率を継続的に評価します。分析ウィンドウ全体で成功率が 95% 以上を維持している場合、カナリアは自動的に昇格します。10 回連続でしきい値を下回った場合、リリースは自動的にロールバックされます。

トラフィックステップ： 20% (5 分) → 40% (5 分、ここで分析開始) → 60% (5 分) → 80% (5 分) → 100%

合計プロモーション時間: 約20分。

ステップ 4a：メトリック分析による Rollout の設定

rollout.yaml を新しいイメージタグと分析設定で更新し、コミットしてプッシュします：

strategy:
  canary:
    analysis:
      templates:
      - templateName: success-rate
      startingStep: 2   # 初期のトラフィックが安定した後、40% のステップで分析を開始します
      args:
        - name: service-name
          value: rollouts-demo-stable
    canaryService: rollouts-demo-canary
    stableService: rollouts-demo-stable
    trafficRouting:
      nginx:
        stableIngress: rollouts-demo-stable
    steps:
      - setWeight: 20
      - pause: {duration: 5m}
      - setWeight: 40
      - pause: {duration: 5m}
      - setWeight: 60
      - pause: {duration: 5m}
      - setWeight: 80
      - pause: {duration: 5m}
revisionHistoryLimit: 2
selector:
  matchLabels:
    app: rollouts-demo
template:
  metadata:
    labels:
      app: rollouts-demo
  spec:
    containers:
    - name: rollouts-demo
      image: argoproj/rollouts-demo:blue   # 新しいイメージタグ

ステップ 4b：Managed Service for Prometheus エンドポイントの取得

Managed Service for Prometheus は、次の Kubernetes サービスとして公開されます：

http://{ServiceName}.{Namespace}.svc.{ClusterDomain}:{ServicePort}

デフォルトのクラスター ドメインを使用し、arms-prom 名前空間にデプロイされている ack-arms-prometheus アドオンのエンドポイントは次のとおりです。

http://arms-prom-server.arms-prom.svc.cluster.local:9090

ステップ 4c：AnalysisTemplate の作成

次の内容で analysis.yaml を作成します。successCondition は、5 分間のウィンドウで、すべてのカナリアリクエストに対する 2xx 応答の比率が 95% 以上の場合にカナリアステップをパスさせます。

apiVersion: argoproj.io/v1alpha1
kind: AnalysisTemplate
metadata:
  name: success-rate
spec:
  args:
  - name: service-name
  metrics:
  - name: success-rate
    interval: 5m
    successCondition: result[0] >= 0.95   # 95% 以上のリクエストが成功した場合に昇格
    failureLimit: 10                       # 10 回連続で失敗した場合は中止
    provider:
      prometheus:
        address: http://arms-prom-server.arms-prom.svc.cluster.local:9090
        query: |
          sum(
            irate(nginx_ingress_controller_requests{status=~"(1|2).*", canary!="" ,service="{{args.service-name}}"}[5m]))
            /
            sum(irate(nginx_ingress_controller_requests{canary!="",service="{{args.service-name}}"}[5m])
          )

PromQL クエリは、1xx/2xx カナリアリクエストのレートを、合計カナリアリクエストレートで割ります。canary!="" ラベルセレクターは、カナリア Ingress アノテーションを介してルーティングされるトラフィックをフィルター処理します。これにより、安定版トラフィックではなく、カナリアトラフィックのみが評価されることが保証されます。service ラベルは、クエリの範囲を特定のアプリケーションに限定します。

ステップ 4d：メトリック収集のための継続的なトラフィックの生成

Prometheus が成功率を評価するには、安定したリクエストストリームが必要です。別のターミナルで次のコマンドを実行します。

1. Ingress の外部 IP を取得します：

   kubectl get ingress

   期待される出力：

   NAME                                        CLASS   HOSTS                 ADDRESS         PORTS   AGE
   rollouts-demo-rollouts-demo-stable-canary   nginx   rollouts-demo.local   8.217.XX.XX   80      9h
   rollouts-demo-stable                        nginx   rollouts-demo.local   8.217.XX.XX   80      9h

2. ホストマッピングをローカルの Hosts ファイルに追加します：

   8.217.XX.XX  rollouts-demo.local

3. アプリケーションに継続的なリクエストを送信します：

   while true; do curl -s "http://rollouts-demo.local/" | grep -o "<title>.*</title>"; sleep 200ms; done

ステップ 4e：自動ロールアウトの監視

kubectl argo rollouts get rollout rollouts-demo --watch

期待される出力：

Alibaba Cloud コンソールで成功率メトリックを表示するには：

1. ACK コンソールにログインします。左側のナビゲーションウィンドウで、[クラスター] をクリックします。

2. クラスター名をクリックします。左側ペインで、[操作] > [Prometheus モニタリング] を選択します。

3. [Prometheus モニタリング] ページで、[ネットワークモニタリング] タブをクリックし、次に [Ingress] をクリックします。

   

カナリアリリースが正常に完了した後：