Kubernets 1.21.3 O valor recomendado para “clusterCIDR” em “KubeProxyConfiguration”

Question

Consegui replicar seu problema. Eu recebi o mesmo erro. É necessário atualizar alguns outros arquivos de configuração.

Para alterar completamente o pool de IP de pods e nós, você precisa atualizar podCIDRos ClusterCIDRvalores em alguns arquivos de configuração:

atualize o ConfigMap kubeadm-confg- você já fez isso
atualizar arquivo /etc/kubernetes/manifests/kube-controller-manager.yaml- você já fez isso
atualizar a definição do(s) nó(s) com podCIDRo valor adequado e adicioná-los novamente ao cluster
atualizar o ConfigMap kube-proxyno kube-systemnamespace
adicione novo pool de IP no Calico CNI e exclua o antigo, recrie as implantações

Atualizar definição de nó(s):

Obtenha o(s) nome(s) do(s) nó(s): kubectl get no- no meu caso écontroller
Salve as definições no arquivo:kubectl get no controller -o yaml > file.yaml
Editar file.yaml-> atualizar podCIDRe podCIDRsvalores com seu novo intervalo de IP, no seu caso10.203.0.0
Exclua a definição de nó antiga e aplique a nova:kubectl delete no controller && kubectl apply -f file.yaml

Observe que você precisa seguir essas etapas para cada nó do seu cluster.

Atualizar ConfigMap kube-proxyno kube-systemnamespace

Obtenha a configuração atual de kube-proxy:kubectl get cm kube-proxy -n kube-system -o yaml > kube-proxy.yaml
Editar kube-proxy.yaml-> atualizar ClusterCIDRvalor com seu novo intervalo de IP, no seu caso10.203.0.0
Exclua o antigo e aplique o novo kube-proxyConfigMap:kubectl delete cm kube-proxy -n kube-system && kubectl apply -f kube-proxy.yaml

Adicione um novo pool de IP no Calico e exclua o antigo:

Baixe o binário Calico e torne-o executável:

sudo curl -o /usr/local/bin/calicoctl -O -L  "https://github.com/projectcalico/calicoctl/releases/download/v3.20.0/calicoctl"
sudo chmod +x /usr/local/bin/calicoctl

Adicione novo pool de IP:

calicoctl create -f -<<EOF
apiVersion: projectcalico.org/v3
kind: IPPool
metadata:
  name: my-new-pool
spec:
  cidr: 10.203.0.0/16
  ipipMode: Always
  natOutgoing: true
EOF

Verifique se há novo pool de IP:calicoctl get ippool -o wide

Obtenha a configuração para desabilitar o pool de IP antigo ->calicoctl get ippool -o yaml > pool.yaml

Edite a configuração: -> adicione disabled:truefor default-ipv4-ippoolem pool.yaml:

apiVersion: projectcalico.org/v3
items:
- apiVersion: projectcalico.org/v3
  kind: IPPool
  metadata:
    creationTimestamp: "2021-08-12T07:50:24Z"
    name: default-ipv4-ippool
    resourceVersion: "666"
  spec:
    blockSize: 26
    cidr: 10.201.0.0/16
    ipipMode: Always
    natOutgoing: true
    nodeSelector: all()
    vxlanMode: Never
    disabled: true

Aplicar nova configuração:calictoctl apply -f pool.yaml

Saída excedida do calicoctl get ippool -o widecomando:

NAME                  CIDR            NAT    IPIPMODE   VXLANMODE   DISABLED   SELECTOR   
default-ipv4-ippool   10.201.0.0/16   true   Always     Never       true       all()      
my-new-pool           10.203.0.0/16   true   Always     Never       false      all()

Recrie pods que estão na 10.201.0.0rede (em todos os namespaces, incluindo kube-systemnamespace): basta excluí-los e eles deverão ser recriados instantaneamente em um novo intervalo de pool de IP, por exemplo:
```
kubectl delete pod calico-kube-controllers-58497c65d5-rgdwl -n kube-system
kubectl delete pods coredns-78fcd69978-xcz88  -n kube-system
kubectl delete pod nginx-deployment-66b6c48dd5-5n6nw
etc..
```
Você também pode excluir e aplicar implantações.

Depois de aplicar essas etapas, não há aviso sobre clusterCIDRo valor ao adicionar um novo nó. Novos pods são criados no intervalo de pool de IP adequado.

Fonte:

Answer 1