Docker：从私有 GitHub 存储库获取

问题描述 投票：0回答：6

我正在尝试运行一个容器，该容器将从我在私有 GitHub 存储库上拥有的包中公开 golang 服务。

由于我正在使用 GCE，所以我的起始图像是 google/debian:wheezy。

安装所有必需的依赖项和工具后，我正在运行

RUN go get github.com/<my_org>/<my_package>

其中包是私人仓库。

我添加了 GitHub SSH 密钥，以允许从私有存储库克隆到 docker 文件：

ADD priv/id_rsa /root/.ssh/id_rsa
ADD priv/id_rsa.pub /root/.ssh/id_rsa.pub

尽管如此，当 go 尝试克隆存储库时，我在 go get 过程中遇到了错误：

# cd .; git clone https://github.com/<my_org>/<my_package> /gopath/src/github.com/<my_org>/<my_package>
Cloning into '/gopath/src/github.com/<my_org>/<my_package>'...
fatal: could not read Username for 'https://github.com': No such device or address
package github.com/<my_org>/<my_package>: exit status 128

为了调试问题，我从 Dockerfile 运行：

RUN ssh-keyscan -t rsa github.com 2>&1 >> /root/.ssh/known_hosts

这告诉我存在一些问题。看起来验证私钥没问题，但公钥上发生了一些奇怪的事情。这是完整的 ssh-keyscan 结果：

OpenSSH_6.0p1 Debian-4+deb7u2, OpenSSL 1.0.1e 11 Feb 2013
Pseudo-terminal will not be allocated because stdin is not a terminal.
debug1: Reading configuration data /etc/ssh/ssh_config
debug1: /etc/ssh/ssh_config line 19: Applying options for *
debug1: Connecting to github.com [192.30.252.129] port 22.
debug1: Connection established.
debug1: permanently_set_uid: 0/0
debug1: identity file /root/.ssh/id_rsa type 1
debug1: Checking blacklist file /usr/share/ssh/blacklist.RSA-2048
debug1: Checking blacklist file /etc/ssh/blacklist.RSA-2048
debug1: identity file /root/.ssh/id_rsa-cert type -1
debug1: identity file /root/.ssh/id_dsa type -1
debug1: identity file /root/.ssh/id_dsa-cert type -1
debug1: identity file /root/.ssh/id_ecdsa type -1
debug1: identity file /root/.ssh/id_ecdsa-cert type -1
debug1: Remote protocol version 2.0, remote software version libssh-0.6.0
debug1: no match: libssh-0.6.0
debug1: Enabling compatibility mode for protocol 2.0
debug1: Local version string SSH-2.0-OpenSSH_6.0p1 Debian-4+deb7u2
debug1: SSH2_MSG_KEXINIT sent
debug1: SSH2_MSG_KEXINIT received
debug1: kex: server->client aes128-ctr hmac-sha1 none
debug1: kex: client->server aes128-ctr hmac-sha1 none
debug1: sending SSH2_MSG_KEX_ECDH_INIT
debug1: expecting SSH2_MSG_KEX_ECDH_REPLY
debug1: Server host key: RSA 16:27:ac:a5:76:28:2d:36:63:1b:56:4d:eb:df:a6:48
debug1: Host 'github.com' is known and matches the RSA host key.
debug1: Found key in /root/.ssh/known_hosts:1
Warning: Permanently added the RSA host key for IP address '192.30.252.129' to the list of known hosts.
debug1: ssh_rsa_verify: signature correct
debug1: SSH2_MSG_NEWKEYS sent
debug1: expecting SSH2_MSG_NEWKEYS
debug1: SSH2_MSG_NEWKEYS received
debug1: Roaming not allowed by server
debug1: SSH2_MSG_SERVICE_REQUEST sent
debug1: SSH2_MSG_SERVICE_ACCEPT received
debug1: Authentications that can continue: publickey
debug1: Next authentication method: publickey
debug1: Offering RSA public key: /root/.ssh/id_rsa
debug1: Server accepts key: pkalg ssh-rsa blen 279
debug1: key_parse_private_pem: PEM_read_PrivateKey failed
debug1: read PEM private key done: type <unknown>
debug1: read_passphrase: can't open /dev/tty: No such device or address
debug1: Trying private key: /root/.ssh/id_dsa
debug1: Trying private key: /root/.ssh/id_ecdsa
debug1: No more authentication methods to try.
Permission denied (publickey).

我已经在 priv/public 密钥上尝试了 chmod 600 和 chmod 700，但这没有帮助。

有什么线索吗？有没有人成功运行 go get 从 docker 上的 debian 上的私人存储库获取？

github go docker google-compute-engine boot2docker
6个回答
15
投票

我经过一番摸索后发现了这一点。这不是一个理想的解决方案，因为它涉及安装 SSH，以及在容器中构建私钥。此示例基于官方 Docker golang 镜像（Debian Wheezy）：

与您的示例的主要区别在于您需要 git config 命令来强制使用 ssh，而不是默认的 https。

FROM golang

RUN apt-get update && apt-get install -y ca-certificates git-core ssh

ADD keys/my_key_rsa /root/.ssh/id_rsa
RUN chmod 700 /root/.ssh/id_rsa
RUN echo "Host github.com\n\tStrictHostKeyChecking no\n" >> /root/.ssh/config
RUN git config --global url.ssh://[email protected]/.insteadOf https://github.com/

ADD . /go/src/github.com/myaccount/myprivaterepo

RUN go get github.com/myaccount/myprivaterepo
RUN go install github.com/myaccount/myprivaterepo
13
投票

go get
正在尝试使用https，完全忽略ssh。

您必须设置

~/.netrc
：

ADD priv/.netrc /root/.netrc

netrc 的样子：

machine github.com login github-username password github-password

参考：

7
投票

在最新版本的 golang (v1.11) 中现在有 modules。

引用来源：

模块是相关 Go 包的集合，它们作为一个单元一起进行版本控制。大多数情况下，单个版本控制存储库完全对应于单个模块。

使用最新版本的 golang 将允许您拥有私有存储库中的依赖项。本质上，通过运行 

$ go mod vendor
命令将为所有外部依赖项在本地创建一个 
vendor
目录。现在确保您的 docker 镜像具有 Golang v1.11，您将使用以下内容更新您的 Dockerfile：

WORKDIR /<your repository>

COPY . ./
6
投票

详细阐述 OneOfOne 的 

~/.netrc
答案，这就是我在 Linux 上使用 Jenkins 所做的事情：

FROM golang:1.6

ARG GITHUB_USER=$GITHUB_USER
ARG GITHUB_PASS=$GITHUB_PASS

# Copy local package files to the container's workspace.
ADD . /go/src/github.com/my-org/my-project
WORKDIR /go/src/github.com/my-org/my-project/

# Build application inside the container.
RUN echo "machine github.com\n\tlogin $GITHUB_USER\n\tpassword $GITHUB_PASS" >> ~/.netrc && \
    go get github.com/tools/godep && \
    go get github.com/onsi/ginkgo/ginkgo && \
    godep restore && \
    ginkgo -r --randomizeAllSpecs --randomizeSuites --failOnPending && \
    godep go install && \
    rm -f ~/.netrc

ENTRYPOINT /go/bin/my-project

EXPOSE 8080

docker构建命令是：

docker build \
    --build-arg GITHUB_USER=xxxxx \
    --build-arg GITHUB_PASS=yyyyy \
    -t my-project .

这两个 

ARG
指令映射 
--build-arg
，以便 docker 可以在 Dockerfile 中使用它们。

RUN
的第一行和最后一行创建和删除
~/.netrc
。

在 Jenkins 中，我在构建命令中使用与 git pull 相同的凭据。

在此策略中，密码在 docker 构建过程中不会回显，也不会保存在 docker 镜像的任何层上。另请注意，gingko 测试结果会在构建过程中打印到控制台。

5
投票

我在 GitHub 中遇到了这个问题，并使用个人访问令牌修复了它：

  1. 使用 
    ARG
    作为您的 Dockerfile 变量（输入）
  2. 使用 GitHub 个人访问令牌配置您的 git

GITHUB_PAT
是 GitHub 个人访问令牌：

FROM golang:1.17 as builder

ARG GITHUB_PAT

WORKDIR /your-app
COPY go.mod .
COPY go.sum .
RUN git config --global url."https://${GITHUB_PAT}:[email protected]/".insteadOf "https://github.com/"
RUN go mod download
COPY . .
RUN go build -ldflags '-w -s' -o ./out ./main.go


FROM golang:1.17

WORKDIR /app

COPY --from=builder /your-app/out ./
WORKDIR /app/

ENTRYPOINT [ "./out" ]
0
投票

使用

docker build
秘密和多阶段构建的另一种方法：

出于安全原因，我们使用多阶段构建，因此

ssh
的
id_rsa
秘密文件不会保留在部署映像中。而且，好吧，让图像更精简。

  • Dockerfile
    ：
# Stage 1: build the app

FROM golang:1.21 AS build-stage

WORKDIR /app

COPY . ./

# allow access to the private repos
RUN mkdir ~/.ssh
RUN --mount=type=secret,id=idrsa cp /run/secrets/idrsa ~/.ssh/id_rsa
RUN git config --global --add url."ssh://[email protected]".insteadOf "https://github.com"
ENV GIT_SSH_COMMAND="ssh -i ~/.ssh/id_rsa -o UserKnownHostsFile=/dev/null -o StrictHostKeyChecking=no"

# download go packages
RUN go mod download

# build the app
RUN go build -o /service

# Stage 2: deploy the application binary into a lean image

FROM gcr.io/distroless/base-debian11 AS build-release-stage

COPY --from=build-stage /service /service
...


  • docker build
    ：
docker build \
    --secret id=idrsa,src=$HOME/.ssh/id_rsa \
    ...
最新问题
© www.soinside.com 2019 - 2024. All rights reserved.