在docker swarm模式下为多个nginx服务配置反向代理

Question

我正在配置一个 docker swarm 集群，我最初的计划是设置 3 个 nginx 副本作为我的反向代理和负载均衡器。 我想我找到了问题所在，nginx的3个副本将向我的容器发出请求，而容器将其视为无效请求。

根本错误（我认为）

无效的 HTTP_HOST 标头：“archive.tomhanfriends.com、archive.tomhanfriends.com、archive.tomhanfriends.com”。根据 RFC 1034/1035，提供的域名无效。

为了让 nginx 副本在 docker swarm 集群中工作，我是否缺少一些配置或设置？以下是我的设置。

---

Nginxs Docker

version: '3.8'
services:
  nginx:
    image: docker.io/nginx:latest
    restart: unless-stopped
    ports:
      - '80:80'
      - '443:443'
    volumes:
      - ./nginx/data/conf/conf.d:/etc/nginx/conf.d
      - ./nginx/data/conf/ssl:/etc/nginx/ssl
      - ./nginx/data/logs:/var/log/nginx
      - ./nginx/data/www:/usr/share/nginx/html
    deploy:
      replicas: 3
      placement:
        constraints:
          - node.role == manager
      restart_policy:
        condition: on-failure
        delay: 5s
        max_attempts: 3
        window: 120s
    networks:
      - infrastructure
      - ops
networks:
  infrastructure:
    external: true
  ops:
    external: true

Nginx 大会

user  nginx;
worker_processes  auto;

error_log  /var/log/nginx/error.log warn;
pid        /var/run/nginx.pid;


events {
    worker_connections  1024;
}


http {
    tcp_nopush on;
    tcp_nodelay on;
    types_hash_max_size 2048;
    server_tokens off;

    include       /etc/nginx/mime.types;
    default_type  application/octet-stream;

    ssl_protocols TLSv1 TLSv1.1 TLSv1.2 TLSv1.3; # Dropping SSLv3, ref: POODLE
    ssl_prefer_server_ciphers on;

    log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" "$http_x_forwarded_for"';

    access_log  /var/log/nginx/access.log  main;

    sendfile        on;
    #tcp_nopush     on;

    keepalive_timeout  65;

    #gzip  on;
    gzip on;

    gzip_vary on;
    gzip_proxied any;
    gzip_comp_level 6;
    gzip_buffers 16 8k;
    gzip_http_version 1.1;
    gzip_types text/plain text/css application/json application/javascript text/xml application/xml application/xml+rss text/javascript;

    proxy_connect_timeout 300s;
    proxy_read_timeout 300s;
    proxy_send_timeout 300s;
    proxy_buffer_size 128k;
    proxy_buffers 4 128k;
    proxy_busy_buffers_size 256k;
    proxy_temp_file_write_size 256k;
    proxy_headers_hash_max_size 1024;
    proxy_headers_hash_bucket_size 128;
    proxy_redirect off;
    proxy_set_header Host $host;
    proxy_set_header X-Real-IP $remote_addr;
    proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;

    include /etc/nginx/conf.d/*.conf;
}

archivebox nginxconf

server {
    listen 80;
    listen 443 ssl;
    charset utf-8;
    server_name archive.tomhanfriends.com;
    .... omit for ssl
    location / {
        **proxy_pass http://ops_archivebox:8000/;**
        proxy_set_header Upgrade $http_upgrade;
        proxy_set_header Connection "Upgrade";
        proxy_set_header Host $host;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;proxy_set_header Host $host;
        proxy_set_header Host $http_host;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header X-Scheme $scheme;
        proxy_set_header X-Forwarded-Proto $scheme;
        proxy_redirect off;
    }

    error_page   500 502 503 504  /50x.html;
    location = /50x.html {
        root   html;
    }

}

我已检查以下内容

• [x] dns 配置有效，ping 有效
• [x] nginx 配置文件检查有效，nginx -t
• [x] docker swarm 服务正常工作，在同一网络中，能够通话
• [x] nginx 的 docker compose 可以工作了
• [x] 用于 archivebox 的 docker compose 可以工作`

Answer 1

弄清楚了，如果有人在这里找到它，请回答一些问题。

主要错误：

无效的 HTTP_HOST 标头：“archive.tomhanfriends.com、archive.tomhanfriends.com、archive.tomhanfriends.com”。根据 RFC 1034/1035，提供的域名无效。

根据第二条建议计算出来，需要仔细检查nginx cfg文件。

关于docker swarm中的多个nginx容器：

就像一个魅力，我认为 docker swarm 的入口将处理流量

关于容器和端口的反向代理：

简单docker模式下，同一个网络，使用containder_name:port_expose，swarm模式下，使用service_name:port_expose来传递代理。