在CI中运行时，docker-compose竞争条件

Question

我有一个docker-compose冒险测试我在CI中运行....当同一个项目的两个版本同时执行时，构建通常会失败。我确信这些构建在同一台具有共享docker socket的机器上同时执行。似乎docker-compose试图重用/访问来自另一个实例的容器，并最终处于某种竞争状态。

我已经尝试了各种标志来解决这个问题，但仍然会失败。目前的旗帜是：

--exit-code-from smoke --remove-orphans --force-recreate
using --exit-code-from implies --abort-on-container-exit

如何使这两个构建容器实例彼此隔离？

以下是失败的示例：

+ make smoke
ls: /var/lib/docker/volumes/0_3542251907521744511_default/_data: No such file or directory
ls: '/var/lib/docker/volumes/0_3542251907521744511_default/_data'/src/github.myco.com/viper-ace/psn-router/'}: No such file or directory
docker-compose version 1.23.2, build 1110ad0 docker-py version: 3.6.0 CPython version: 2.7.15 OpenSSL version: LibreSSL 2.7.4
docker-compose -f smoke-test/docker-compose.yaml up --exit-code-from smoke --remove-orphans --force-recreate
using --exit-code-from implies --abort-on-container-exit
Recreating mock-maker ... 
Recreating mock-maker ... done
Recreating psn-router ... 
Recreating psn-router-500 ... 
Recreating psn-router-500 ... done
Recreating psn-router     ... done
Recreating smoke          ... 
Attaching to mock-maker, psn-router-500, psn-router, smoke
mock-maker                 | > [email protected] start /usr/src/app
psn-router-500             | 2019-04-11T16:36:21.411Z level=INFO, code=0000, src=psn-router/server.go:87, s=psn-router, hostname=psn-router-instance, c=UNKNOWN, site=UNKNOWN, m="Listen and Serve: http://127.0.0.1:8080"
mock-maker                 | > node mock-maker.js
psn-router                 | 2019-04-11T16:36:21.441Z level=INFO, code=0000, src=psn-router/server.go:87, hostname=psn-router-instance, c=UNKNOWN, site=UNKNOWN, s=psn-router, m="Listen and Serve: http://127.0.0.1:8080"
mock-maker                 | MockMaker app listening at http://:::80
Unexpected API error for psn-router (HTTP code 404)
Response body:
{"message":"No such container: 89460559a3e81a230f5647d52997c5b05bf94f3bdc8e268ca9654d3945ca675d"}
Recreating smoke          ... done
Stopping psn-router-500   ... 
Stopping mock-maker       ... 
Stopping psn-router-500   ... done
Stopping mock-maker       ... done
No such container: 8dec60de6fb3657c0a70e9d53aa27e385b9bd50c24e6cb332d1a7cc373bb7afa
Aborting on container exit...
make: *** [Makefile:22: smoke] Error 

这是docker-compose文件：

services:
  mock-maker:
    container_name: "mock-maker"
    image: registry.myco/viper-ace/mock-maker:0.11.0
  psn-router-500-endpoint:
    container_name: "psn-router-500"
    image: "${DOCKER_IMAGE}"
    depends_on:
      - mock-maker
    environment:
      - ENDPOINT= http://mock-maker/endpoint500 
  psn-router:
    container_name: "psn-router"
    image: "${DOCKER_IMAGE}"
    depends_on:
      - mock-maker
    environment:
      - ENDPOINT= http://mock-maker/endpoint200 
  smoke:
    container_name: "smoke"
    image: registry.myco/http-blackbox-test-tool:2.0.2
    depends_on:
      - psn-router
    volumes:
       - ${SMOKE_TEST_DIR}:/smoke-test
    environment:
      - TEST_DIR=/smoke-test

制定目标：

smoke:
    @echo $(shell docker-compose version)
    SMOKE_TEST_DIR=$(CODE_DIR)/smoke-test DOCKER_IMAGE=${DOCKER_IMAGE} docker-compose -f smoke-test/docker-compose.yaml up --exit-code-from smoke --remove-orphans --force-recreate

Answer 1

您面临的问题是由于docker-compose使用称为项目名称的内容来将容器“链接”到特定的docker-compose调用。

以下是docker-compose文档中有关项目名称的内容：

COMPOSE_PROJECT_NAME

设置项目名称。启动时，此值将与服务名称一起添加到容器中。例如，如果您的项目名称是myapp并且它包含两个服务db和web，则Compose将分别启动名为myapp_db_1和myapp_web_1的容器。

设置此选项是可选的。如果未设置此项，COMPOSE_PROJECT_NAME将默认为项目目录的基本名称。另请参见-p命令行选项。

所以在你的情况下发生的事情是，如果你有两个docker-compose命令试图在同一台机器上使用相同的目录同时运行，那么它们都有项目名称：smoke_test。

这意味着如果同时发生两次make smoke调用，他们都会看到带有smoke_test前缀的容器，并尝试管理/重新创建它们，因为他们认为它们属于它们，而实际上它们可能不属于它们。

解：

最简单的解决方案是使用make smoke的--project-name标志为docker-compose的每次调用指定一个唯一的项目名称。

一种方法是：

docker-compose --project-name $(data +'%s') -f smoke-test/docker-compose.yaml up --exit-code-from smoke --remove-orphans --force-recreate

这样，每次调用docker-compose都会将其容器与make smoke的其他同时调用隔离开来。

另外，我认为生成唯一项目名称的首选方法是使用内置编号，而不是使用unix时间戳。

希望这会有所帮助。