Kubernetes imagePullSecrets不工作;得到“图像未找到”

Question

我在AWS上运行了一个现成的Kubernetes集群，安装了kube-up脚本。我想运行一些私有Docker Hub存储库中的容器。但我一直收到“未找到”的错误：

 > kubectl get pod
NAME                      READY     STATUS                                        RESTARTS   AGE
maestro-kubetest-d37hr    0/1       Error: image csats/maestro:latest not found   0          22m

我创建了一个包含.dockercfg文件的秘密。我通过运行here发布的脚本确认它有效：

 > kubectl get secrets docker-hub-csatsinternal -o yaml | grep dockercfg: | cut -f 2 -d : | base64 -D > ~/.dockercfg
 > docker pull csats/maestro
latest: Pulling from csats/maestro

我已经确认我没有使用the new format of .dockercfg script，我看起来像这样：

> cat ~/.dockercfg
{"https://index.docker.io/v1/":{"auth":"REDACTED BASE64 STRING HERE","email":"[email protected]"}}

我试过running the Base64 encode on Debian instead of OS X，那里没有运气。 （它产生的字符串与预期的相同。）

这是我的复制控制器的YAML：

---
kind: "ReplicationController"
apiVersion: "v1"
metadata:
  name: "maestro-kubetest"
spec:
  replicas: 1
  selector:
    app: "maestro"
    ecosystem: "kubetest"
    version: "1"
  template:
    metadata:
      labels:
        app: "maestro"
        ecosystem: "kubetest"
        version: "1"
    spec:
      imagePullSecrets:
        - name: "docker-hub-csatsinternal"
      containers:
        - name: "maestro"
          image: "csats/maestro"
          imagePullPolicy: "Always"

      restartPolicy: "Always"
      dnsPolicy: "ClusterFirst"

kubectl version：

Client Version: version.Info{Major:"1", Minor:"0", GitVersion:"v1.0.3", GitCommit:"61c6ac5f350253a4dc002aee97b7db7ff01ee4ca", GitTreeState:"clean"}
Server Version: version.Info{Major:"1", Minor:"0", GitVersion:"v1.0.3", GitCommit:"61c6ac5f350253a4dc002aee97b7db7ff01ee4ca", GitTreeState:"clean"}

有任何想法吗？

Answer 1

Docker在config.json中生成一个~/.docker/文件它看起来像：

{
    "auths": {
        "index.docker.io/v1/": {
            "auth": "ZmFrZXBhc3N3b3JkMTIK",
            "email": "[email protected]"
        }
    }
}

你真正想要的是：

{"https://index.docker.io/v1/": {"auth": "XXXXXXXXXXXXXX", "email": "[email protected]"}}

注意事项：

• 1）没有auths包装
• 2）URL前面有https://
• 3）它是一行

然后你base64编码并用作.dockercfg名称的数据

apiVersion: v1
kind: Secret
metadata: 
  name: registry
data:
  .dockercfg: XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX==
type: kubernetes.io/dockercfg

再次注意.dockercfg线是一行（base64倾向于生成多行字符串）

Answer 2

您可能会看到“未找到图像”的另一个可能原因是您的密码的命名空间与容器的命名空间不匹配。

例如，如果您的部署yaml看起来像

apiVersion: extensions/v1beta1
kind: Deployment
metadata:
  name: mydeployment
  namespace: kube-system

然后你必须确保Secret yaml使用匹配的命名空间：

apiVersion: v1
kind: Secret
metadata:
  name: mysecret
  namespace: kube-system
data:
  .dockerconfigjson: ****
type: kubernetes.io/dockerconfigjson

如果没有为您的机密指定命名空间，它将最终在默认命名空间中，并且不会被使用。没有警告信息。我只是在这个问题上花了好几个小时，所以我想我会在这里分享它，希望我可以节省别人的时间。

Answer 3

您可能会看到此错误的另一个原因是使用了与群集版本不同的kubectl版本（例如，对于1.8.x群集使用kubectl 1.9.x）。

由kubectl create secret docker-registry命令生成的秘密格式在版本之间发生了变化。

1.8.x群集期望具有以下格式的秘密：

{  
   "https://registry.gitlab.com":{  
      "username":"...",
      "password":"...",
      "email":"...",
      "auth":"..."
   }
}

但1.9.x kubectl生成的秘密具有以下格式：

{  
   "auths":{  
      "https://registry.gitlab.com":{  
         "username":"...",
         "password":"...",
         "email":"...",
         "auth":"..."
      }
   }
}

因此，请仔细检查您的机密的.dockercfg数据的值，并验证它是否与您的kubernetes集群版本所期望的格式相匹配。

Answer 4

我遇到了同样的问题。我注意到的是在示例中（https://kubernetes.io/docs/user-guide/images/#specifying-imagepullsecrets-on-a-pod）.dockercfg具有以下格式：

{ 
   "https://index.docker.io/v1/": { 
     "auth": "ZmFrZXBhc3N3b3JkMTIK", 
     "email": "[email protected]" 
   } 
}

虽然我的机器中的docker生成的那个看起来像这样：

{
    "auths": {
        "https://index.docker.io/v1/": {
            "auth": "ZmFrZXBhc3N3b3JkMTIK",
            "email": "[email protected]"
        }
    }
}

通过检查源代码，我发现实际上有一个测试这个用例（https://github.com/kubernetes/kubernetes/blob/6def707f9c8c6ead44d82ac8293f0115f0e47262/pkg/kubelet/dockertools/docker_test.go#L280）

我确认你，如果你只是采取和编码“auths”，如在例子中，它将适合你。

可能应该更新文档。我将在github上提出一张票。