docker nginx 进程用户_一次docker中的nginx进程响应慢问题定位记录

有个ft测试的环境，其中nginx使用docker发布的。测试用例是curl的时候，没有获得nginx的响应。

docker ps

CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES

e39be26bc976 cdn-release-docker.artnj.zte.com.cn/img-for-ottci/python:latest "/bin/bash -c /home/s" 12 minutes ago Up 12 minutes 22/tcp, 9220/tcp RF_THUMBNAIL

a7f8ff2c2fac ft_thumbnail:V5.01.01.01 "/usr/sbin/init" 12 minutes ago Up 12 minutes FT_thumbnail

4881975f8e10 cdn-release-docker.artnj.zte.com.cn/img-for-ottci/python:latest "/bin/bash -c /home/s" 31 minutes ago Up 31 minutes 22/tcp, 9220/tcp RF_filepackager

bfdc3beaf7e4 ft_filepackager:V5.01.01.01 "/usr/sbin/init bash" 31 minutes ago Up 31 minutes

进入容器，看一下具体信息：

docker exec -it bfdc3beaf7e4 bash

敲一下top命令，可以发现多个nginx的work进程的cpu很高。

bash-4.2# top

TERM environment variable not set.

bash-4.2#

bash-4.2# echo TERM

TERM

bash-4.2# echo $TERM

dumb

bash-4.2# export M

bash-4.2# export TERM=dumb

bash-4.2# top

top - 09:28:13 up 81 days, 7:01, 0 users, load average: 17.46, 44.24, 34.20

Tasks: 49 total, 2 running, 47 sleeping, 0 stopped, 0 zombie

%Cpu(s): 2.2 us, 4.4 sy, 0.0 ni, 93.4 id, 0.0 wa, 0.0 hi, 0.0 si, 0.0 st

KiB Mem : 26321361+total, 48650644 free, 24579464 used, 18998350+buff/cache

KiB Swap: 0 total, 0 free, 0 used. 23644137+avail Mem

PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND

1435 root 20 0 9855.0m 44528 3236 R 93.3 0.0 24:27.53 nginx

bash-4.2# strace -p 1435

bash: strace: command not found

由于并没有将strace命令一起打包到这个镜像中，所以需要在容器外和容器内的进程对应起来。然后查看对应的进程信息：

[root@localhost ~]# docker top bfdc3beaf7e4 |grep -i nginx

root 26807 22109 0 17:33 ? 00:00:00 wget -T 10 -t 1 -O /home/zxcdn/agent/plugin/stat/../../crontab/nginxstatus.tmp http://127.0.0.1:6620/NGINXSTATUS

root 30753 16121 0 16:53 ? 00:00:00 nginx: master process /home/zxcdn/ottcache/nginx/sbin/nginx -p /home/zxcdn/ottcache/nginx

root 30754 30753 72 16:53 ? 00:29:28 nginx: worker process

有很多nginx的work进程，而且进程名相同，只截取部分。nginx开启的work进程是64个，所以有一大片。那怎么对应呢？有个小技巧，就是在容器里运行ps -ef |grep -i nginx |grep -i worker，然后对应的顺序，在容器外和docker top |grep -i nginx |grep -i worker是一致的。

在容器外找到对应的cpu高的进程滞后，先看一下这个进程是用户态cpu高还是内核态cpu高，可以使用

pidstat -p 30754 1 来确定，然后本文刚好是内核态cpu高，则可以使用strace 来看为什么该进程cpu高了。本文是因为对应的lua代码的覆盖率的频率设置太低，而且lua脚本有个地方触发了循环，导致了频繁操作read和write。

open("/home/devops/luacov/luacov.stats.out", O_WRONLY|O_CREAT|O_TRUNC, 0666) = 18

fstat(18, {st_mode=S_IFREG|0644, st_size=0, ...}) = 0

mmap(NULL, 4096, PROT_READ|PROT_WRITE, MAP_PRIVATE|MAP_ANONYMOUS, -1, 0) = 0x7f5178ddc000

write(18, "398:/home/zxcdn/ottcac 0 0 0 0 0"..., 4096) = 4096

write(18, " 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0"..., 4096) = 4096

write(18, "0 0 0 0 0 0 0 0 0 0 0 0 3 3 0 0 "..., 4096) = 4096

write(18, " 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0"..., 4096) = 4096

write(18, "1 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 "..., 4096) = 4096

write(18, "0 0 0 0 0 0 0 1 0 0 0 0 0 0 1 0 "..., 4096) = 4096

write(18, "28 0 0 0 0 0 114 114 114 0 114 0"..., 4096) = 4096

write(18, "0 0 0 0 0 0 0 0 0 0 0 0 889 0 0 "..., 4096) = 4096

write(18, " 0 0 0 0 0 0 0 0 0 0 480 0 0 480"..., 4096) = 4096

write(18, " 0 0 0 0 354 354 0 0 0 0 0 0 0 0"..., 4096) = 4096

write(18, "0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 "..., 204) = 204

close(18) = 0

munmap(0x7f5178ddc000, 4096) = 0

close(20) = 0

close(22) = 0

open("/home/devops/luacov/luacov.stats.out", O_RDONLY) = 18

fstat(18, {st_mode=S_IFREG|0644, st_size=41164, ...}) = 0

mmap(NULL, 4096, PROT_READ|PROT_WRITE, MAP_PRIVATE|MAP_ANONYMOUS, -1, 0) = 0x7f5178ddc000

read(18, "398:/home/zxcdn/ottcac 0 0 0 0 0"..., 4096) = 4096

read(18, " 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0"..., 4096) = 4096

read(18, "0 0 0 0 0 0 0 0 0 0 0 0 3 3 0 0 "..., 4096) = 4096

read(18, " 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0"..., 4096) = 4096

read(18, "1 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 "..., 4096) = 4096

read(18, "0 0 0 0 0 0 0 1 0 0 0 0 0 0 1 0 "..., 4096) = 4096

read(18, "28 0 0 0 0 0 114 114 114 0 114 0"..., 4096) = 4096

read(18, "0 0 0 0 0 0 0 0 0 0 0 0 889 0 0 "..., 4096) = 4096

read(18, " 0 0 0 0 0 0 0 0 0 0 480 0 0 480"..., 4096) = 4096

read(18, " 0 0 0 0 354 354 0 0 0 0 0 0 0 0"..., 4096) = 4096

read(18, "0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 "..., 4096) = 204

滚动 docker 中的 nginx 日志

Nginx 自己没有处理日志的滚动问题,它把这个球踢给了使用者.一般情况下,你可以使用 logrotate 工具来完成这个任务,或者如果你愿意,你可以写各式各样的脚本完成同样的任务.本文笔者介绍如何滚 ...

解决docker中使用nginx做负载均衡时并发过高时的一些问题

# 解决docker中使用nginx做负载均衡时并发过高时的一些问题 1.问题产生原因: 由于通过nginx作为负载均衡服务,在访问并发数量达到一定量级时jmeter报错. nginx日志关键信息:a ...

为 docker 中的 nginx 配置 https

没有 https 加持的网站会逐渐地被浏览器标记为不安全的,所以为网站添加 https 已经变得刻不容缓.对于商业网站来说,花钱购买 SSL/TLS 证书并不是什么问题.但对于个人用户来说,如果能有免 ...

转载：2.1 运行中的Nginx进程间的关系《深入理解Nginx》(陶辉)

原文:https://book.2cto.com/201304/19624.html 在正式提供服务的产品环境下,部署Nginx时都是使用一个master进程来管理多个worker进程,一般情况下,w ...

Docker中运行nginx并挂载本地目录到镜像中

1.1 从hup上pull镜像1.2 创建将要挂载的目录1.3 先要有配置文件才能启动容器1.3.1 vim /data/nginx/conf/nginx.conf1.3.2 vim /data/ng ...

docker中使用nginx容器代理其他容器

Nginx is an HTTP and reverse proxy server, a mail proxy server, and a generic TCP/UDP proxy server, ...

docker中安装nginx，部署前端代码

最近在学习docker,初次接触,难免遇到磕磕碰碰,遂将其整理成博客,以便日后查看. 1.拉取nginx镜像 直接从官方镜像库拉取简单粗暴: docker pull nginx 2.运行 docker ...

Docker中使用nginx镜像

1.到网易蜂巢查看nginx https://c.163yun.com/hub#/m/home/ 复制nginx镜像地址为:docker pull hub.c.163.com/library/ngin ...

随机推荐

Scalaz(33)－ Free ：算式－Monadic Programming

在任何模式的编程过程中都无法避免副作用的产生.我们可以用F[A]这种类型模拟FP的运算指令:A是可能产生副作用的运算,F[_]是个代数数据类型ADT(Algebraic Data Type),可以实现 ...

Mysql错误处理

有几种错误处理的声明形式: § 如果任何错误(不是 后继续执行: DECLARE CONTINUE HANDLER FOR SQLEXCEPTION ; § 如果发生任何错误(不是 NOT FOUND ...

Need to add a caption to a jpg, python can't find the image

importImage,ImageDraw,ImageFont, os, glob list = glob.glob('*.jpg')for infile in list:print infile f ...

UnityEditorWindow自建窗口扩展

这里主要记录UnityEditorWindow的创建,以及常用的API接口样式 1,创建UnityEditorWindow 在Unity目录中,创建一个名为Editor的文件夹(任何位置),然后创建如 ...

SQLI DUMB SERIES-19

(1)根据题意,从Referer入手 (2)报错注入与上一关相同.如爆库名: 'and extractvalue(1,concat(0x7e,(select database()),0x7e)) an ...

FZU 2150 Fire Game (bfs+dfs)

Problem Description Fat brother and Maze are playing a kind of special (hentai) game on an N*M board ...

Spring整合strus2简单应用总结

本身strus2没接触过,所以这块学的一知半解,正常不整合的还没学(接着学) step: 1.创建web工程 2.在/WEB-INF/lib引入jar包 asm-3.3.jarasm-commons- ...

(转)史上最全的MSSQL复习笔记

1.什么是SQL语句 sql语言:结构化的查询语言.(Structured Query Language),是关系数据库管理系统的标准语言. 它是一种解释语言:写一句执行一句,不需要整体编译执行.语法 ...