Container Service for Kubernetes:Koordinator Descheduler and Kubernetes Descheduler

Antes de começar

Familiarize-se com os recursos, atributos de API e configurações de política (sistema, modelo, plug-in de política e plug-in de evicção) do Kubernetes Descheduler antes de compará-lo ao Koordinator Descheduler.

Relação entre Koordinator Descheduler e Kubernetes Descheduler

Antes da versão 0.25.0, a comunidade do Kubernetes Descheduler propôs o Descheduling Framework. Essa abordagem baseada em plug-ins gerencia o ciclo de vida de desescalonamento com dois objetivos:

• Transformar políticas de desescalonamento e lógica de evicção de pods em plug-ins para garantir maior flexibilidade.

• Implementar um runtime que suporte carregamento de plug-ins, execução e gerenciamento do ciclo de vida de desescalonamento.

Com o lançamento do Kubernetes Descheduler 0.26.0, o Koordinator Descheduler v1.2.0 integrou todas as políticas e o plug-in DefaultEvictor, além de adicionar o evictor MigrationController.

Diferenças de recursos

O Koordinator Descheduler é compatível com a maioria dos casos de uso do Kubernetes Descheduler, mas apresenta diferenças nos métodos de configuração, políticas de desescalonamento, evictores e controle de evicção.

1. O desenvolvimento do Descheduling Framework no Koordinator Descheduler começou antes do Kubernetes Descheduler e utiliza uma API de configuração diferente: v1alpha2/DeschedulerConfiguration.

2. O Koordinator Descheduler inclui o plug-in de política LowNodeLoad para desescalonamento ciente de hotspots com base na utilização real dos nós. Isso fornece resultados mais precisos do que o plug-in nativo LowNodeUtilization, baseado em taxas de alocação de recursos. Consulte Usar desescalonamento ciente de hotspots.

3. O Koordinator Descheduler adiciona o evictor MigrationController, que oferece controle de evicção mais seguro e abrangente. Consulte Configuração do plug-in de evicção.

Exemplos de configuração

Os exemplos a seguir usam a política RemovePodsViolatingNodeTaints (RemovePodsViolatingNodeTaints) para comparar os formatos de configuração do Kubernetes Descheduler e do Koordinator Descheduler. A versão da configuração é definida pelos campos apiVersion e kind.

• Exemplo de configuração do Kubernetes Descheduler

  • Para versões anteriores à v0.27.0, a versão da configuração é descheduler/v1alpha1/DeschedulerPolicy.

    # API attributes.
    apiVersion: "descheduler/v1alpha1"
    kind: "DeschedulerPolicy"
    
    # System configurations.
    nodeSelector: "node=node1"
    maxNoOfPodsToEvictPerNode: 10
    maxNoOfPodsToEvictPerNamespace: 10
    
    # Eviction configurations. In the other two configuration APIs, these parameters are part of the evictor plug-in configuration.
    evictFailedBarePods: false
    evictLocalStoragePods: true
    evictSystemCriticalPods: true
    evictDaemonSetPods: false
    ignorePvcPods: false
    
    # Policy configurations. In the other two APIs, these are provided as descheduling templates and split into plug-in activation and parameter settings.
    strategies:
      "RemovePodsViolatingNodeTaints":
        enabled: true
        params:
          nodeFit: true # The nodeFit parameter must be enabled in each policy. In the other two APIs, nodeFit is part of the evictor plug-in configuration.
          excludedTaints:
            - deschedule=not-allow # Ignore nodes with the taint key="deschedule" and value="not-allow".

  • Para a versão v0.27.0 e posteriores, a versão da configuração é descheduler/v1alpha2/DeschedulerPolicy.

    # API attributes.
    apiVersion: "descheduler/v1alpha2"
    kind: "DeschedulerPolicy"
    
    # System configurations.
    nodeSelector: "node=node1" 
    maxNoOfPodsToEvictPerNode: 10
    maxNoOfPodsToEvictPerNamespace: 10
    # End of system configurations.
    
    # A list of descheduling templates.
    profiles:
    - name: kubernetes-descheduler  # Specify the name of the descheduling template.
        
      # Template configurations. 
      plugins:      
        deschedule:
          enabled:
            - "RemovePodsViolatingNodeTaints" # The data type of the `enabled` field is a list of strings.
        balance:
          disabled: 
            - "*"
      # End of template configurations.         
          
      # A list of plug-in configurations.
      pluginConfig:
        
        # Configuration for the RemovePodsViolatingNodeTaints policy plug-in.    
        - name: RemovePodsViolatingNodeTaints # Node taint validation plug-in configuration.
          args:
            excludedTaints: 
            - deschedule=not-allow # Ignore nodes with the taint key="deschedule" and value="not-allow".
        
        # Configuration for the DefaultEvictor evictor plug-in.  
        - name: "DefaultEvictor"
          args:                
            evictFailedBarePods: false
            evictLocalStoragePods: true
            evictSystemCriticalPods: true
            evictDaemonSetPods: false
            ignorePvcPods: false
            nodeFit: true # The nodeFit parameter is part of the evictor plug-in configuration.

• Exemplo de configuração do Koordinator Descheduler

  A versão da configuração é descheduler/v1alpha2/DeschedulerConfiguration.

  # API attributes.
  apiVersion: descheduler/v1alpha2
  kind: DeschedulerConfiguration
  
  # System configurations.
  dryRun: false  
  deschedulingInterval: 120s 
  nodeSelector: 
    node: node1 # The data type of nodeSelector is different from the other two configuration APIs.
  maxNoOfPodsToEvictPerNode: 10 
  maxNoOfPodsToEvictPerNamespace: 10 
  # End of system configurations.
  
  # A list of descheduling templates.            
  profiles:
  - name: koord-descheduler
    
    # Template configurations.
    plugins:
      deschedule: 
        enabled: 
          - name: RemovePodsViolatingNodeTaints # The data type of the `enabled` field is a list of structs.          
      balance: 
        disabled: 
          - name: "*" 
      evict: # Use the `evict` field to specify the evictor to use.          
        enabled:
          - name: MigrationController # MigrationController is enabled by default. 
          # - name: DefaultEvictor # Optional: DefaultEvictor. 
      filter: # Use the `filter` field to specify the eviction filter to use. 
        enabled:
          - name: MigrationController # MigrationController is enabled by default.
          # - name: DefaultEvictor # Optional: DefaultEvictor.
    # End of template configurations.
            
    # A list of plug-in configurations.
    pluginConfig:
      
      # Configuration for the RemovePodsViolatingNodeTaints policy plug-in.    
      - name: RemovePodsViolatingNodeTaints # Node taint validation plug-in configuration.
        args:
          excludedTaints: 
          - deschedule=not-allow # Ignore nodes with the taint key="deschedule" and value="not-allow".
      
      # Configuration for the DefaultEvictor evictor plug-in.  
      - name: "DefaultEvictor"
        args:                
          evictFailedBarePods: false
          evictLocalStoragePods: true
          evictSystemCriticalPods: true
          evictDaemonSetPods: false
          ignorePvcPods: false
          nodeFit: true # The nodeFit parameter is part of the evictor plug-in configuration.

apiVersion: "descheduler/v1alpha2"
kind: "DeschedulerPolicy"
profiles:
  - name: ProfileName
    pluginConfig:
    - name: "RemovePodsViolatingNodeAffinity"
      args:
        nodeAffinityType:
        - "preferredDuringSchedulingIgnoredDuringExecution"
    plugins:
      deschedule:
        enabled:
          - "RemovePodsViolatingNodeAffinity"

apiVersion: "descheduler/v1alpha2"
kind: "DeschedulerPolicy"
profiles:
  - name: ProfileName
    pluginConfig:
    - name: "RemovePodsViolatingTopologySpreadConstraint"
      args:
        constraints:
          - DoNotSchedule
        topologyBalanceNodeFit: false  
    plugins:
      balance:
        enabled:
          - "RemovePodsViolatingTopologySpreadConstraint"

apiVersion: "descheduler/v1alpha2"
kind: "DeschedulerPolicy"
profiles:
  - name: ProfileName
    pluginConfig:
    - name: "RemovePodsHavingTooManyRestarts"
      args:
        states:
        - "CrashLoopBackOff"
    plugins:
      deschedule:
        enabled:
          - "RemovePodsHavingTooManyRestarts"

apiVersion: "descheduler/v1alpha2"
kind: "DeschedulerPolicy"
profiles:
  - name: ProfileName
    pluginConfig:
    - name: "PodLifeTime"
      args:
        states:
        - "CrashLoopBackOff"
        - "ImagePullBackOff"
    plugins:
      deschedule:
        enabled:
          - "PodLifeTime"

apiVersion: "descheduler/v1alpha2"
kind: "DeschedulerPolicy"
profiles:
  - name: ProfileName
    pluginConfig:
    - name: "RemoveFailedPods"
      args:
        exitCodes:
        - 1
    plugins:
      deschedule:
        enabled:
          - "RemoveFailedPods"

apiVersion: "descheduler/v1alpha2"
kind: "DeschedulerPolicy"
profiles:
  - name: ProfileName
    pluginConfig:
    - name: "DefaultEvictor"
      args:
        evictDaemonSetPods: false
        minReplicas: 2
    - name: "PodLifeTime"
      args:
        maxPodLifeTimeSeconds: 86400
    plugins:
      deschedule:
        enabled:
          - "PodLifeTime"

Migração para o Koordinator Descheduler

Para migrar do Kubernetes Descheduler para o Koordinator Descheduler, siga estas etapas específicas por versão:

1. Desinstale o Kubernetes Descheduler atual. Executar vários desescalonadores em um cluster causa condições de corrida imprevisíveis.

2. Instale e configure o Koordinator Descheduler conforme descrito em Ativar o recurso de desescalonamento.

   1. Configure as definições de nível de sistema no Koordinator Descheduler com base nas Diferenças na configuração do sistema.

   2. Crie um modelo de desescalonamento compatível com o Koordinator Descheduler.

      • Se você usa o Kubernetes Descheduler 0.26.0 ou anterior, apenas a API v1alpha1/DeschedulerPolicy é suportada. Complete a configuração com base nas Diferenças na configuração de modelo.

      • Se você usa uma versão do Kubernetes Descheduler posterior à 0.26.0, confirme qual API de configuração está em uso.

        • Caso a API seja v1alpha1/DeschedulerPolicy, crie um modelo de desescalonamento compatível com o Koordinator Descheduler seguindo as Diferenças na configuração de modelo.

        • Caso a API seja v1alpha2/DeschedulerPolicy, modifique os campos de configuração no Koordinator Descheduler conforme as Diferenças na configuração de modelo.

   3. Configure os plug-ins no Koordinator Descheduler consultando as Diferenças na configuração do plug-in de política e as Diferenças na configuração do plug-in de evicção.

Referências

• Instale o componente ack-koordinator e ative o desescalonamento: Ativar o recurso de desescalonamento.

  Também é possível configurar parâmetros avançados para o Koordinator Descheduler, modelos de desescalonamento, plug-ins de política de desescalonamento e plug-ins de evicção em um ConfigMap. Para mais informações, consulte Configurar parâmetros avançados.

• Visão geral e log de alterações do componente ack-koordinator: ack-koordinator (FKA ack-slo-manager).