Kubelet 실행 실패: 서비스 연결 확인: CRI v1 런타임 API가 엔드포인트에 대해 구현되지 않았습니다.

Question 1

오늘도 같은 문제가 발생했습니다. 관련이 있는 것 같습니다.이 변화K8s 1.26에서요.

해결책은 Containerd 1.6을 설치하는 것이지만... 아직 APT 패키지가 없는 것 같습니다. :( . Ubuntu 22.10 이상에 대한 1.6+ 패키지만 찾을 수 있었습니다.

가능한 해결 방법:

위 링크에 나열된 것 - 이전 버전의 kubelet(1.25) 실행

apt remove --purge kubelet
apt install -y kubeadm kubelet=1.25.5-00

바이너리를 다운로드하고 교체하여 컨테이너를 1.6 이상으로 수동 업그레이드

wget https://github.com/containerd/containerd/releases/download/v1.6.12/containerd-1.6.12-linux-amd64.tar.gz
tar xvf containerd-1.6.12-linux-amd64.tar.gz
systemctl stop containerd
cd bin
cp * /usr/bin/
systemctl start containerd

현재 두 가지 옵션을 모두 테스트하고 있는데 제대로 작동하는 것 같습니다. 바라건대, (아주 가까운) 미래에 우리는 containerd일을 더 쉽게 할 수 있는 1.6+ apt 패키지를 얻을 것입니다 :)

세 번째 옵션을 추가하도록 편집합니다(지금까지 가장 쉬운 것 같습니다).

Docker 저장소에는 Containerd 1.6 이상용 패키지가 있습니다. 따라서 Docker 저장소를 추가하고 거기에서 Containerd.io를 설치할 수도 있습니다.

sudo mkdir -p /etc/apt/keyrings
curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo gpg --dearmor -o /etc/apt/keyrings/docker.gpg
echo   "deb [arch=$(dpkg --print-architecture) signed-by=/etc/apt/keyrings/docker.gpg] https://download.docker.com/linux/ubuntu \
  $(lsb_release -cs) stable" | sudo tee /etc/apt/sources.list.d/docker.list > /dev/null
sudo apt update
sudo apt install containerd.io

Answer

오늘도 같은 문제가 발생했습니다. 관련이 있는 것 같습니다.이 변화K8s 1.26에서요.

해결책은 Containerd 1.6을 설치하는 것이지만... 아직 APT 패키지가 없는 것 같습니다. :( . Ubuntu 22.10 이상에 대한 1.6+ 패키지만 찾을 수 있었습니다.

가능한 해결 방법:

위 링크에 나열된 것 - 이전 버전의 kubelet(1.25) 실행

apt remove --purge kubelet
apt install -y kubeadm kubelet=1.25.5-00

바이너리를 다운로드하고 교체하여 컨테이너를 1.6 이상으로 수동 업그레이드

wget https://github.com/containerd/containerd/releases/download/v1.6.12/containerd-1.6.12-linux-amd64.tar.gz
tar xvf containerd-1.6.12-linux-amd64.tar.gz
systemctl stop containerd
cd bin
cp * /usr/bin/
systemctl start containerd

현재 두 가지 옵션을 모두 테스트하고 있는데 제대로 작동하는 것 같습니다. 바라건대, (아주 가까운) 미래에 우리는 containerd일을 더 쉽게 할 수 있는 1.6+ apt 패키지를 얻을 것입니다 :)

세 번째 옵션을 추가하도록 편집합니다(지금까지 가장 쉬운 것 같습니다).

Docker 저장소에는 Containerd 1.6 이상용 패키지가 있습니다. 따라서 Docker 저장소를 추가하고 거기에서 Containerd.io를 설치할 수도 있습니다.

sudo mkdir -p /etc/apt/keyrings
curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo gpg --dearmor -o /etc/apt/keyrings/docker.gpg
echo   "deb [arch=$(dpkg --print-architecture) signed-by=/etc/apt/keyrings/docker.gpg] https://download.docker.com/linux/ubuntu \
  $(lsb_release -cs) stable" | sudo tee /etc/apt/sources.list.d/docker.list > /dev/null
sudo apt update
sudo apt install containerd.io

Question 2

나는 이것으로 약간 어려움을 겪었고 @Bogd의 답변이 나를 올바른 길로 인도했습니다. 설명하기에는 너무 길기 때문에 Flannel을 사용하여 새로운 Ubuntu 22.04 노드에서 안정적인 Kubernetes 1.26 마스터를 구성하는 단계는 다음과 같습니다.

sudo apt-get update
sudo apt install apt-transport-https curl

컨테이너 설치(참조:https://docs.docker.com/engine/install/ubuntu/)

sudo mkdir -p /etc/apt/keyrings
curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo gpg --dearmor -o /etc/apt/keyrings/docker.gpg
echo "deb [arch=$(dpkg --print-architecture) signed-by=/etc/apt/keyrings/docker.gpg] https://download.docker.com/linux/ubuntu $(lsb_release -cs) stable" | sudo tee /etc/apt/sources.list.d/docker.list > /dev/null
sudo apt-get update
sudo apt-get install containerd.io

컨테이너 구성 만들기

sudo mkdir -p /etc/containerd
sudo containerd config default | sudo tee /etc/containerd/config.toml

/etc/containerd/config.toml 편집

sudo nano /etc/containerd/config.toml SystemdCgroup = true로 설정
sudo systemctl restart containerd

쿠버네티스 설치

curl -s https://packages.cloud.google.com/apt/doc/apt-key.gpg | sudo apt-key add
sudo apt-add-repository "deb http://apt.kubernetes.io/ kubernetes-xenial main"
sudo apt install kubeadm kubelet kubectl kubernetes-cni

스왑 비활성화

sudo swapoff -a

스왑 항목이 있는지 확인하고 제거하세요.

sudo nano /etc/fstab

kubeinit에서 "/proc/sys/net/bridge/bridge-nf-call-iptables가 존재하지 않습니다" 오류를 방지하세요(참조https://github.com/kubernetes/kubeadm/issues/1062). docker가 6단계에서도 설치된 경우에는 필요하지 않습니다.

sudo modprobe br_netfilter
sudo nano /proc/sys/net/ipv4/ip_forward ip_forward 파일의 항목을 편집하고 1로 변경합니다. (또는 사용 sysctl -w net.ipv4.ip_forward=1- @dpjanes 덕분에 주석 참조)

Flannel과 함께 사용하기 위한 kubeinit

sudo kubeadm init --pod-network-cidr=10.244.0.0/16

kubadm 명령에 따라 구성에 복사

mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config

플란넬 적용(참조https://github.com/flannel-io/flannel)

kubectl apply -f https://raw.githubusercontent.com/flannel-io/flannel/v0.20.2/Documentation/kube-flannel.yml

이제 모두 실행되어야 합니다.

kubectl get pods --all-namespaces

NAMESPACE      NAME                                  READY   STATUS    RESTARTS   AGE
kube-flannel   kube-flannel-ds-mcjmm                 1/1     Running   0          76s
kube-system    coredns-787d4945fb-fb59g              1/1     Running   0          8m8s
kube-system    coredns-787d4945fb-t25tj              1/1     Running   0          8m8s
kube-system    etcd-kube-master                      1/1     Running   0          8m19s
kube-system    kube-apiserver-kube-master            1/1     Running   0          8m19s
kube-system    kube-controller-manager-kube-master   1/1     Running   0          8m19s
kube-system    kube-proxy-2hz29                      1/1     Running   0          8m8s
kube-system    kube-scheduler-kube-master            1/1     Running   0          8m19s

Answer

나는 이것으로 약간 어려움을 겪었고 @Bogd의 답변이 나를 올바른 길로 인도했습니다. 설명하기에는 너무 길기 때문에 Flannel을 사용하여 새로운 Ubuntu 22.04 노드에서 안정적인 Kubernetes 1.26 마스터를 구성하는 단계는 다음과 같습니다.

sudo apt-get update
sudo apt install apt-transport-https curl

컨테이너 설치(참조:https://docs.docker.com/engine/install/ubuntu/)

sudo mkdir -p /etc/apt/keyrings
curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo gpg --dearmor -o /etc/apt/keyrings/docker.gpg
echo "deb [arch=$(dpkg --print-architecture) signed-by=/etc/apt/keyrings/docker.gpg] https://download.docker.com/linux/ubuntu $(lsb_release -cs) stable" | sudo tee /etc/apt/sources.list.d/docker.list > /dev/null
sudo apt-get update
sudo apt-get install containerd.io

컨테이너 구성 만들기

sudo mkdir -p /etc/containerd
sudo containerd config default | sudo tee /etc/containerd/config.toml

/etc/containerd/config.toml 편집

sudo nano /etc/containerd/config.toml SystemdCgroup = true로 설정
sudo systemctl restart containerd

쿠버네티스 설치

curl -s https://packages.cloud.google.com/apt/doc/apt-key.gpg | sudo apt-key add
sudo apt-add-repository "deb http://apt.kubernetes.io/ kubernetes-xenial main"
sudo apt install kubeadm kubelet kubectl kubernetes-cni

스왑 비활성화

sudo swapoff -a

스왑 항목이 있는지 확인하고 제거하세요.

sudo nano /etc/fstab

kubeinit에서 "/proc/sys/net/bridge/bridge-nf-call-iptables가 존재하지 않습니다" 오류를 방지하세요(참조https://github.com/kubernetes/kubeadm/issues/1062). docker가 6단계에서도 설치된 경우에는 필요하지 않습니다.

sudo modprobe br_netfilter
sudo nano /proc/sys/net/ipv4/ip_forward ip_forward 파일의 항목을 편집하고 1로 변경합니다. (또는 사용 sysctl -w net.ipv4.ip_forward=1- @dpjanes 덕분에 주석 참조)

Flannel과 함께 사용하기 위한 kubeinit

sudo kubeadm init --pod-network-cidr=10.244.0.0/16

kubadm 명령에 따라 구성에 복사

mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config

플란넬 적용(참조https://github.com/flannel-io/flannel)

kubectl apply -f https://raw.githubusercontent.com/flannel-io/flannel/v0.20.2/Documentation/kube-flannel.yml

이제 모두 실행되어야 합니다.

kubectl get pods --all-namespaces

NAMESPACE      NAME                                  READY   STATUS    RESTARTS   AGE
kube-flannel   kube-flannel-ds-mcjmm                 1/1     Running   0          76s
kube-system    coredns-787d4945fb-fb59g              1/1     Running   0          8m8s
kube-system    coredns-787d4945fb-t25tj              1/1     Running   0          8m8s
kube-system    etcd-kube-master                      1/1     Running   0          8m19s
kube-system    kube-apiserver-kube-master            1/1     Running   0          8m19s
kube-system    kube-controller-manager-kube-master   1/1     Running   0          8m19s
kube-system    kube-proxy-2hz29                      1/1     Running   0          8m8s
kube-system    kube-scheduler-kube-master            1/1     Running   0          8m19s

Question 3

cri 인터페이스가 비활성화되어 있는지 확인하려면 /etc/containerd/config.toml 구성 파일을 확인하세요. 예: 비활성화_플러그인 = ["cri"]. 확인한 결과, 비활성화_플러그인 = ["cri"] 구성이 비활성화_플러그인 = [""]로 변경된 것으로 나타났습니다. 그런 다음 컨테이너 서비스를 다시 시작하고 다시 시작합니다. systemctl restart Containerd.

Answer

cri 인터페이스가 비활성화되어 있는지 확인하려면 /etc/containerd/config.toml 구성 파일을 확인하세요. 예: 비활성화_플러그인 = ["cri"]. 확인한 결과, 비활성화_플러그인 = ["cri"] 구성이 비활성화_플러그인 = [""]로 변경된 것으로 나타났습니다. 그런 다음 컨테이너 서비스를 다시 시작하고 다시 시작합니다. systemctl restart Containerd.

Question 4

Kubernetes는 v1.20 이후 Docker를 컨테이너 런타임으로 사용하지 않으므로 Kubernetes 최신 버전에서는 지원되는 Docker용 CRI API를 작성하지 않았습니다. Mirantis가 Docker용으로 개발한 CRI를 사용하여 아래 단계를 사용하여 이 작업을 수행할 수 있습니다.

아래 URL에서 cri-dockerd를 설치하십시오:

https://github.com/Mirantis/cri-dockerd

git clone https://github.com/Mirantis/cri-dockerd.git

# Run these commands as root
###Install GO###
wget https://storage.googleapis.com/golang/getgo/installer_linux
chmod +x ./installer_linux
./installer_linux
source ~/.bash_profile

cd cri-dockerd
mkdir bin
go build -o bin/cri-dockerd
mkdir -p /usr/local/bin
install -o root -g root -m 0755 bin/cri-dockerd /usr/local/bin/cri-dockerd
cp -a packaging/systemd/* /etc/systemd/system
sed -i -e 's,/usr/bin/cri-dockerd,/usr/local/bin/cri-dockerd,' /etc/systemd/system/cri-docker.service
systemctl daemon-reload
systemctl enable cri-docker.service
systemctl enable --now cri-docker.socket

참고: 각 명령을 개별적으로 설치합니다. 대량 실행에서는 입력하는 데 -y 또는 yes가 필요한 명령이 거의 없기 때문에 오류가 발생하는 경우가 있습니다.

이제 아래를 사용하여 kube 관리자 클러스터를 시작합니다.

kubeadm init --pod-network-cidr=192.168.0.0/16 --cri-socket=unix:///var/run/cri-dockerd.sock

Answer

Kubernetes는 v1.20 이후 Docker를 컨테이너 런타임으로 사용하지 않으므로 Kubernetes 최신 버전에서는 지원되는 Docker용 CRI API를 작성하지 않았습니다. Mirantis가 Docker용으로 개발한 CRI를 사용하여 아래 단계를 사용하여 이 작업을 수행할 수 있습니다.

아래 URL에서 cri-dockerd를 설치하십시오:

https://github.com/Mirantis/cri-dockerd

git clone https://github.com/Mirantis/cri-dockerd.git

# Run these commands as root
###Install GO###
wget https://storage.googleapis.com/golang/getgo/installer_linux
chmod +x ./installer_linux
./installer_linux
source ~/.bash_profile

cd cri-dockerd
mkdir bin
go build -o bin/cri-dockerd
mkdir -p /usr/local/bin
install -o root -g root -m 0755 bin/cri-dockerd /usr/local/bin/cri-dockerd
cp -a packaging/systemd/* /etc/systemd/system
sed -i -e 's,/usr/bin/cri-dockerd,/usr/local/bin/cri-dockerd,' /etc/systemd/system/cri-docker.service
systemctl daemon-reload
systemctl enable cri-docker.service
systemctl enable --now cri-docker.socket

참고: 각 명령을 개별적으로 설치합니다. 대량 실행에서는 입력하는 데 -y 또는 yes가 필요한 명령이 거의 없기 때문에 오류가 발생하는 경우가 있습니다.

이제 아래를 사용하여 kube 관리자 클러스터를 시작합니다.

kubeadm init --pod-network-cidr=192.168.0.0/16 --cri-socket=unix:///var/run/cri-dockerd.sock

Kubelet 실행 실패: 서비스 연결 확인: CRI v1 런타임 API가 엔드포인트에 대해 구현되지 않았습니다.

답변1

답변2

답변3

답변4

관련 정보