ACK で ECI 弾性スケーリングを設定する - Container Service for Kubernetes

Toleration とノードアフィニティを使用し、優先度に基づくフォールバックを利用して、Pod を Elastic Compute Service (ECS)、ECI、またはその両方へスケジューリングします。

基本概念

Taint：特定の Pod がスケジュールされないようにするノード上のルールです。
Toleration：Pod がノードの Taint を無視できるようにする設定です。
ノードアフィニティ：特定のラベルを持つノードに Pod を引き寄せる Pod のプロパティです。次の 2 種類があります：
- requiredDuringSchedulingIgnoredDuringExecution：ハード要件です。Pod は一致するノードにのみスケジュールされます。
- preferredDuringSchedulingIgnoredDuringExecution：推奨設定です。スケジューラはルールへの一致を試みますが、一致するノードが見つからない場合は、Pod を別の場所にスケジュールします。

詳細については、「Taints and Tolerations」と「Node affinity」をご参照ください。

前提条件

Kubernetes v1.22 以降を実行している ACK マネージド Pro クラスター。
バージョン 2.10.0 以降の ack-virtual-node アドオン (「仮想ノード」をご参照ください)。
仮想ノードスケジューリングポリシーが有効化された、バージョン 5.9 以降の kube-scheduler コンポーネント。
アドオン管理 ページで、[Kube Scheduler] を見つけ、設定をクリックし、[仮想ノードベースの Pod スケジューリングの有効化] が選択されていることを確認します。

設定例

ACK クラスターの仮想ノードには、デフォルトで virtual-kubelet.io/provider=alibabacloud:NoSchedule という Taint が設定されています。仮想ノード (ECI) に Pod をスケジュールするには、この Taint に対する Toleration を追加します。

例：

      tolerations:
      - key: virtual-kubelet.io/provider
        operator: Equal
        value: alibabacloud
        effect: NoSchedule

Toleration とノードアフィニティを組み合わせて、さまざまなリソースニーズに対応するスケジューリングポリシーを作成します。

ECS を優先：デフォルトで ECS を使用し、ECS の容量が不足している場合は ECI にフォールバックします。
ECI 専用：ECI リソースのみを使用します。
ECS 専用：既存の ECS リソースのみを使用します。

ECS を優先

デフォルトの Taint に対する Toleration を追加し、preferredDuringSchedulingIgnoredDuringExecution を使用して type: virtual-kubelet ラベルを持たないノード (ECS ノード) を優先します。

apiVersion: apps/v1
kind: Deployment
metadata:
  name: ecs-prefer
spec:
  replicas: 2
  selector:
    matchLabels:
      app: my-app
  template:
    metadata:
      labels:
        app: my-app
    spec:
      tolerations:
      - key: virtual-kubelet.io/provider
        operator: Equal
        value: alibabacloud
        effect: NoSchedule
      affinity:
        nodeAffinity:
          preferredDuringSchedulingIgnoredDuringExecution:
          - weight: 1
            preference:
              matchExpressions:
              - key: type
                operator: NotIn
                values:
                - virtual-kubelet
      containers:
      - name: my-container
        image: anolis-registry.cn-zhangjiakou.cr.aliyuncs.com/openanolis/nginx:1.14.1-8.6

説明

ノードアフィニティについて：

複数の nodeSelectorTerms は OR で結合されます。つまり、いずれかの matchExpressions が一致すれば Pod がスケジュールされます。1 つの matchExpressions 内の複数の式は AND で結合されます。つまり、すべてが一致する必要があります。
preferredDuringSchedulingIgnoredDuringExecution は ECI 専用フォールバックを保証しません。ECS の容量が十分な場合でも、Pod が ECI に配置される可能性があります。より厳密に制御するには、requiredDuringSchedulingIgnoredDuringExecution と組み合わせてください。

次の YAML は、特定のラベル (label_1=key_1 など) を持つ ECS ノードを優先し、容量が必要な場合は仮想ノードにフォールバックします。

YAML の詳細を表示

apiVersion: apps/v1
kind: Deployment
metadata:
  name: some-ecs-prefer
spec:
  replicas: 2
  selector:
    matchLabels:
      app: my-app
  template:
    metadata:
      labels:
        app: my-app
    spec:
      tolerations:
      - key: virtual-kubelet.io/provider
        operator: Equal
        value: alibabacloud
        effect: NoSchedule
      affinity:
        nodeAffinity:
    # Pod は label_1:key_1 または type:virtual-kubelet ラベルを持つノードにスケジュールされます。
          requiredDuringSchedulingIgnoredDuringExecution:
            nodeSelectorTerms:
            - matchExpressions:
              - key: label_1
                operator: In
                values:
                - key_1
            - matchExpressions:
              - key: type
                operator: In
                values:
                - virtual-kubelet
    # Pod は優先的に label_1:key_1 ラベルを持つノードにスケジュールされ、次に type:virtual-kubelet ラベルを持つノードにスケジュールされます。
          preferredDuringSchedulingIgnoredDuringExecution:
          - weight: 100
            preference:
              matchExpressions:
              - key: label_1
                operator: In
                values:
                - key_1
          - weight: 1
            preference:
              matchExpressions:
              - key: type
                operator: In
                values:
                - virtual-kubelet
      containers:
      - name: my-container
        image: anolis-registry.cn-zhangjiakou.cr.aliyuncs.com/openanolis/nginx:1.14.1-8.6

ECI 専用

デフォルトの仮想ノード Taint に対する Toleration を追加し、requiredDuringSchedulingIgnoredDuringExecution を使用して type: virtual-kubelet ラベルを持つノードを必須とします。

apiVersion: apps/v1
kind: Deployment
metadata:
  name: eci-only
spec:
  replicas: 2
  selector:
    matchLabels:
      app: my-app
  template:
    metadata:
      labels:
        app: my-app
    spec:
      tolerations:
      - key: virtual-kubelet.io/provider
        operator: Equal
        value: alibabacloud
        effect: NoSchedule
      affinity:
        nodeAffinity:
          requiredDuringSchedulingIgnoredDuringExecution:
            nodeSelectorTerms:
            - matchExpressions:
              - key: type
                operator: In
                values:
                - virtual-kubelet
      containers:
      - name: my-container
        image: anolis-registry.cn-zhangjiakou.cr.aliyuncs.com/openanolis/nginx:1.14.1-8.6

ECS 専用

デフォルトでは、仮想ノードに Taint が設定されているため、Pod は ECS ノードにのみスケジュールされます。追加の設定は不要です。

apiVersion: apps/v1
kind: Deployment
metadata:
  name: ecs-only
spec:
  replicas: 2
  selector:
    matchLabels:
      app: my-app
  template:
    metadata:
      labels:
        app: my-app
    spec:
      containers:
      - name: my-container
        image: anolis-registry.cn-zhangjiakou.cr.aliyuncs.com/openanolis/nginx:1.14.1-8.6