Container Service for Kubernetes:Terway での conntrack 構成の最適化

conntrack テーブルサイズを確認する

eBPF conntrack テーブルサイズは、ノードのメモリ容量によって異なります。

ノードの conntrack テーブルサイズを表示するには、次のコマンドを実行します。

1. terway-eniip ポッド名を取得します。

# kubectl describe node <ノード名> | grep terway-eniip
  kube-system                 terway-eniip-xxxx         350m (8%)     1100m (28%)  200Mi (3%)       256Mi (3%)     16h

2. conntrack テーブルサイズをクエリします。

# kubectl exec -it -nkube-system terway-eniip-xxxx -c policy -- cilium status --verbose
...
BPF Maps:   dynamic sizing: on (ratio: 0.002500)
  Name                          Size
  Auth                          524288
  Non-TCP connection tracking   65536
  TCP connection tracking       131072
  Endpoint policy               65535
...

パラメーターの説明:

• dynamic sizing: on: eBPF マップの動的な上限を有効にします。値が off に設定されている場合は、bpf-map-dynamic-size-ratio パラメータを設定して動的調整を有効にするか、bpf-ct-global-any-max、bpf-ct-global-tcp-max、および bpf-nat-global-max パラメータを設定して異なるテーブルのサイズを指定できます。

• ratio: 0.002500: システムメモリ全体の指定された割合に基づく eBPF マップの最大サイズ。

• Non-TCP connection tracking: 非 TCP conntrack テーブルの最大エントリ数。

• TCP connection tracking: TCP conntrack テーブルの最大エントリ数。

conntrack エントリ数を確認する

デフォルトでは、各ノードは Prometheus メトリックポートを公開します。デフォルトポートは 9962 です。次の表に、監視コンポーネントを使用して収集できるメトリックを示します。

デフォルトの監視ポートを変更する

このパラメータの変更方法の詳細については、「Terway ConfigMap のカスタマイズ」の cilium_args パラメータの説明をご参照ください。

eBPF conntrack サイズを調整する

eBPF conntrack と Linux conntrack は機能的に同じです。デフォルト設定は、追加の構成を必要とせずに、ほとんどのビジネスシナリオの要件を満たすことができます。

次のシナリオでは、ビジネス要件に基づいて設定を変更する必要があります。

• 多数の長時間接続が存在する。

• ポッドがインターネットに直接公開されており、多数のハーフオープン接続が存在する可能性がある。

このパラメータの変更方法の詳細については、「Terway ConfigMap のカスタマイズ」の cilium_args パラメータの説明をご参照ください。

bpf-map-dynamic-size-ratio が 0.0025 に設定されている場合、ノードのメモリ容量ごとのマップサイズ:

例

次のサンプル コードブロックでは、bpf-map-dynamic-size-ratio を 0.003 に、bpf-ct-timeout-regular-tcp を 1h に設定しています。

10-terway.conf: |
{
  "cniVersion": "0.4.0",
  "name": "terway",
  "capabilities": {"bandwidth": true},
  "eniip_virtual_type": "IPvlan",
  "cilium_args": "--bpf-map-dynamic-size-ratio=0.003 --bpf-ct-timeout-regular-tcp=1h",
  "type": "terway"
}