worker_connections 不够用 - Nginx、docker

worker_connections 不够用 - Nginx、docker

在我的生产服务器中,我们有几个上游,它们是使用 nginx 在反向代理后面运行的 docker 容器。其中一个容器是 mqtt 代理 (mosquitto),我们使用它通过 websockets 进行连接。这是我们的 nginx.conf 文件:

worker_processes 1;

events {
  worker_connections  1024;
}

http {
    upstream br-frontend {
        server br-frontend:3000;
    }

    upstream br-backend {
        server br-backend:5000;
    }

    upstream mosquitto {
        server mosquitto:9001;
    }

    map $http_upgrade $connection_upgrade {
        default upgrade;
        '' close;
    }

    ssl_certificate /etc/nginx/certs/server.crt;
    ssl_certificate_key /etc/nginx/certs/server.key;

    server {
        listen 443 ssl default_server;
        server_name _;

        location / {
            proxy_pass http://br-frontend/;
        }

        location /api {
            proxy_pass http://br-backend;
        }

        location /swagger.json {
            proxy_pass http://br-backend/swagger.json;
        }

        location /swaggerui {
            proxy_pass http://br-backend/swaggerui;
        }

        location /mosquitto-ws {
            proxy_pass http://mosquitto;
            proxy_http_version 1.1;
            proxy_set_header Upgrade $http_upgrade;
            proxy_set_header Connection $connection_upgrade;
        }
    }

    server {
        listen 80 default_server;
        server_name _;
        return 301 https://$host$request_uri;
    }
}

昨天,我们的生产服务器因以下错误而崩溃。我读到过我可以增加 worker_connections 的数量,但我不认为这是最好的解决方案。我还在其他问题中读到过我的 nginx.conf 文件中可能存在无限循环,但我看不到它。

2018/12/14 00:23:12 [alert] 6#6: 1024 worker_connections are not enough
2018/12/14 00:23:13 [alert] 6#6: *14666 1024 worker_connections are not enough while connecting to upstream, client: *.*.*.*, server: _, request: "GET /mosquitto-ws HTTP/1.1", upstream: "http://172.21.0.5:9001/mosquitto-ws", host: "****"

更新: docker-compose.yml

version: '3'
services:
    mongodb:
      image: mongo:latest
      volumes:
        - './data/db:/data/db'
        - './data/configdb:/data/configdb'
      ports:
        - 27017:27017
    br-backend-express:
      working_dir: /app
      command: npm run execute-prod
      image: ${ACR}/br-backend-express:${tag}
      ports:
        - "5000:5000"
      depends_on:
        - mongodb
    mosquitto:
      image: ${ACR}/mosquitto:${tag}
      depends_on:
        - br-backend-express
    br-bridge:
      working_dir: /app
      image: ${ACR}/br-bridge:${tag}
      command: npm run execute-prod
      depends_on:
        - mosquitto
        - mongodb

    br-frontend:
      image: ${ACR}/br-frontend:${tag}

    nginx:
      image: ${ACR}/nginx:${tag}
      ports:
        - 443:443
        - 80:80
      depends_on:
        - br-frontend
        - br-backend-express

任何帮助都将不胜感激。谢谢。

答案1

根据Nginx 文档worker_connections“…设置工作进程可以打开的最大同时连接数。应该记住的是,这个数字包括所有连接(例如连接使用代理服务器等等),而不仅仅是与客户的联系。……”

鉴于您的配置使用代理连接,所以在足够密集的流量下,Nginx 开始缺少免费连接也就不足为奇了。

它还提到worker_rlimit_nofile需要进行调整,所以也要注意这一点。

最后,虽然这与问题没有直接关系,但我还是建议使用它worker_processes auto来在可用核心之间更好地分配 Nginx 负载。

相关内容