Kubernets 1.21.3 El valor recomendado para "clusterCIDR" en "KubeProxyConfiguration"

Question

Logré replicar tu problema. Tengo el mismo error. Es necesario actualizar algunos otros archivos de configuración.

Para cambiar completamente el grupo de IP de pods y nodos, debe actualizar podCIDRlos ClusterCIDRvalores en algunos archivos de configuración:

actualiza ConfigMap kubeadm-confg: ya lo hiciste
actualizar archivo /etc/kubernetes/manifests/kube-controller-manager.yaml- ya lo hiciste
actualice la definición de los nodos con podCIDRel valor adecuado y vuelva a agregarlos al clúster
actualizar ConfigMap kube-proxyen el kube-systemespacio de nombres
agregue un nuevo grupo de IP en Calico CNI y elimine el anterior, vuelva a crear las implementaciones

Actualizar la definición de nodo(s):

Obtener nombre(s) de nodo(s): kubectl get no- en mi caso escontroller
Guarde las definiciones en el archivo:kubectl get no controller -o yaml > file.yaml
Editar file.yaml-> actualizar podCIDRy podCIDRsvalores con su nuevo rango de IP, en su caso10.203.0.0
Elimine la definición de nodo anterior y aplique la nueva:kubectl delete no controller && kubectl apply -f file.yaml

Tenga en cuenta que debe realizar esos pasos para cada nodo de su clúster.

Actualizar ConfigMap kube-proxyen el kube-systemespacio de nombres

Obtener la configuración actual de kube-proxy:kubectl get cm kube-proxy -n kube-system -o yaml > kube-proxy.yaml
Editar kube-proxy.yaml-> actualizar ClusterCIDRvalor con su nuevo rango de IP, en su caso10.203.0.0
Elimine el antiguo y aplique el nuevo kube-proxyConfigMap:kubectl delete cm kube-proxy -n kube-system && kubectl apply -f kube-proxy.yaml

Agregue un nuevo grupo de IP en Calico y elimine el anterior:

Descargue el binario Calico y hágalo ejecutable:

sudo curl -o /usr/local/bin/calicoctl -O -L  "https://github.com/projectcalico/calicoctl/releases/download/v3.20.0/calicoctl"
sudo chmod +x /usr/local/bin/calicoctl

Agregar nuevo grupo de IP:

calicoctl create -f -<<EOF
apiVersion: projectcalico.org/v3
kind: IPPool
metadata:
  name: my-new-pool
spec:
  cidr: 10.203.0.0/16
  ipipMode: Always
  natOutgoing: true
EOF

Compruebe si hay un nuevo grupo de IP:calicoctl get ippool -o wide

Obtenga la configuración para deshabilitar el grupo de IP antiguo ->calicoctl get ippool -o yaml > pool.yaml

Edite la configuración: -> agregue disabled:truefor default-ipv4-ippoolen pool.yaml:

apiVersion: projectcalico.org/v3
items:
- apiVersion: projectcalico.org/v3
  kind: IPPool
  metadata:
    creationTimestamp: "2021-08-12T07:50:24Z"
    name: default-ipv4-ippool
    resourceVersion: "666"
  spec:
    blockSize: 26
    cidr: 10.201.0.0/16
    ipipMode: Always
    natOutgoing: true
    nodeSelector: all()
    vxlanMode: Never
    disabled: true

Aplicar nueva configuración:calictoctl apply -f pool.yaml

Salida exceptuada del calicoctl get ippool -o widecomando:

NAME                  CIDR            NAT    IPIPMODE   VXLANMODE   DISABLED   SELECTOR   
default-ipv4-ippool   10.201.0.0/16   true   Always     Never       true       all()      
my-new-pool           10.203.0.0/16   true   Always     Never       false      all()

Vuelva a crear los pods que están en 10.201.0.0la red (en cada espacio de nombres, incluido kube-systemel espacio de nombres): simplemente elimínelos y deberían volver a crearse instantáneamente en un nuevo rango de grupo de IP, por ejemplo:
```
kubectl delete pod calico-kube-controllers-58497c65d5-rgdwl -n kube-system
kubectl delete pods coredns-78fcd69978-xcz88  -n kube-system
kubectl delete pod nginx-deployment-66b6c48dd5-5n6nw
etc..
```
También puede eliminar y aplicar implementaciones.

Después de aplicar esos pasos, no hay ninguna advertencia sobre clusterCIDRel valor al agregar un nuevo nodo. Los nuevos pods se crean en el rango de grupo de IP adecuado.

Fuente:

Answer 1