Я пытаюсь запустить сценарий Docker в Docker внутри кластера Kubernetes, управляемого Azure (AKS).
Я смонтировал сокет docker unix в pod. Я намерен использовать aks pods в качестве агентов azure devops для сборки и тестирования моего проекта. Для этого требуется база данных и wiremock, работающий в docker, что означает, что он создаст сеть docker
Ниже вы можете увидеть мою текущую конфигурацию:
Name: my-devopsagent-javaagent-64855bb796-smpkz
Namespace: my-devops-agents
Priority: 0
Node: aks-default-21935887-vmss000000/10.128.0.4
Start Time: Mon, 16 Dec 2019 14:09:04 +0200
Labels: app=my-devopsagent-javaagent
pod-template-hash=64855bb796
Annotations: <none>
Status: Running
IP: 10.128.0.28
IPs: <none>
Controlled By: ReplicaSet/my-devopsagent-javaagent-64855bb796
Containers:
my-devopsagent-javaagent:
Container ID: docker://ffffff26c3b4a92678a95f446c0ada685986f30c56138109b080
Image: mycontainerregistry.azurecr.io/mycompany/devopsagent/javaagent:latest
Image ID: docker-pullable://mycontainerregistry.azurecr.io/mycompany/devopsagent/javaagent@sha256:4422edb12d1b4bbff92bc36e7d33715222daab6ef3439cfffffff
Port: <none>
Host Port: <none>
State: Running
Started: Mon, 16 Dec 2019 14:09:06 +0200
Ready: True
Restart Count: 0
Environment:
AZP_AGENT_NAME: CONTAINER_JAVA_AGENT
AZP_URL: https://dev.azure.com/mycompany
AZP_POOL: Default
AZP_TOKEN: <set to the key 'pat' in secret 'pat'> Optional: false
Mounts:
/var/run/docker.sock from dockersock (rw)
/var/run/secrets/kubernetes.io/serviceaccount from default-token-2msgf (ro)
Conditions:
Type Status
Initialized True
Ready True
ContainersReady True
PodScheduled True
Volumes:
dockersock:
Type: HostPath (bare host directory volume)
Path: /var/run/docker.sock
HostPathType:
default-token-2msgf:
Type: Secret (a volume populated by a Secret)
SecretName: default-token-2msgf
Optional: false
QoS Class: BestEffort
Node-Selectors: <none>
Tolerations: node.kubernetes.io/not-ready:NoExecute for 300s
node.kubernetes.io/unreachable:NoExecute for 300s
Events: <none>
Я получаю сообщение об ошибке
ERRO[0000] 'overlay' is not supported over overlayfs
error creating libpod runtime: 'overlay' is not supported over overlayfs: backing file system is unsupported for this graph driver
Есть идеи, как решить эту проблему?
PS Я также попробовал первый комментарий вдокер в докерепроблема, то есть я пытался смонтировать /bin/docker, что привело к другим проблемам
решение1
Чтобы запустить docker в docker, /var/lib/docker
файловая система не может быть контейнерной файловой системой, которая создана с помощью overlayfs. Вместо этого вы должны смонтировать ее из внешнего тома в поддерживаемую файловую систему на внешнем хосте, либо xfs
с помощью , ftype=1
либо ext4
. Это задокументировано вhttps://docs.docker.com/storage/storagedriver/#поддерживаемые-резервные-файловые-системы
Для этого можно использовать именованный том на хосте, поскольку /var/lib/docker на файловой системе хоста будет на поддерживаемой FS. Например, мой собственный DinD CLI выглядит так:
docker run -d --rm --privileged \
-v "dind-${port}:/var/lib/docker" \
-v "dind-${port}-ccerts:/certs/client" -e DOCKER_TLS_CERTDIR=/certs \
-v "$HOME:$HOME" \
--name "dind-${port}" -p "127.0.0.1:${port}:2376" \
"docker:${opt_t}-dind"
Обратите внимание, что первое монтирование тома представляет собой нечто вроде того dind-1234:/var/lib/docker
, что создает именованный том для этого каталога в контейнере.