记一次生产故障,nginx503

问题概述: web页面进行login操作,控制台报503
系统版本: Centos 6.8
服务架构:前端两个nginx代理服务器,可外网,中间两台业务服务器,使用docker起两组服务 后端3台redis(哨兵),和三台mongo

问题分析:由控制台报503可知是服务器内部原因,可能是网络或者服务方面。

解决步骤:

  1. 首先先从网络方面开始查,看外网区两台nginx是否接收到页面请求。结果:收到请求
  2. 判定nginx服务器到两台应用服务器是否连通可通过查看容器内部nginx是否有请求。结果:没有
    基本可以断定是前端nginx到后端容器nginx不通。以为是防火墙问题,通过iptables -L 查看并没有限制,使用22可以过去,判断不是防火墙问题,那就只能是docker服务的问题了。
    解决办法:备份容器内所有文件到本地,重启docker服务后,重启容器内服务,测试正常
    docker低版本可能存在这个问题,更换网络或者调整设备时,产生与外部服务不通的情况。

你可能感兴趣的:(NGINX,docker,运维,问题记录)