apache 无法启动故障排查

今天在F5上逛，发现某个ip下面的机器的80和443端口down了。

于是手动重启，结果发现apachectl start,可以正常启动，apachectl startssl却不行
查看log

[Wed Apr 16 08:54:52 2008] [warn] pid file /usr/local/apache/logs/httpd.pid overwritten -- Unclean shutdown of previous Apache run?
[Fri Jun 13 11:59:24 2008] [alert] httpd: Could not determine the server's fully qualified domain name, using 127.0.0.1 for ServerName
semget: 设备上没有空间

网上查了半天也无解。试图删除/usr/local/apache/logs/httpd.pid再重启也不行。
问同事才知道

使用ipcs查看系统的信号量，发现是信号量sem已经满了，所以导致startssl无法启动。

据说是如果apache没有正常Stop掉的话，它的信号量是不会自动清除的，导致其一直滞留在内存中

于是，用以下命令清除sem信号量后，apache就可以正常启动了：

for i in `ipcs  | grep nobody | awk '{print $2}'`; do ipcrm -s $i; done

看来，以后我们需要慎用killall -9 httpd，尽量使apache能正常的stop

[root@l_192_168_131_164 log]# ipcs
------ Shared Memory Segments --------
key        shmid      owner      perms      bytes      nattch     status      
0x00000000 7143424    root      600        184324     74         dest          
------ Semaphore Arrays --------
key        semid      owner      perms      nsems      
0x00000000 0          nobody    600        1          
0x00000000 32769      nobody    600        1          
0x00000000 65538      nobody    600        1          
。。。。。。。。。
。。。。。。。。。
0x00000000 98307      nobody    600        1          
------ Message Queues --------
key        msqid      owner      perms      used-bytes   messages  

可以看到很多
清除了就可以了
for i in `ipcs  | grep nobody | awk '{print $2}'`; do ipcrm -s $i; done

然后再查看

[root@l_192_168_132_089 /root]# ipcs
------ Shared Memory Segments --------
key        shmid      owner      perms      bytes      nattch     status      
0x00000000 8552448    root      600        184324     74         dest          
------ Semaphore Arrays --------
key        semid      owner      perms      nsems      
0x00000000 8486912    nobody    600        1          
------ Message Queues --------
key        msqid      owner      perms      used-bytes   messages  

没有那么多了。

再重新启动apache，这次正常启动了

另外一个问题，就是日志是用中文输出的，对应的错误提示在网上无法搜到，而对应的英文

semget: 设备上没有空间
semget: No space left on device

在google上很容易找到结果。看来以后要把服务器的默认语言设置为英文才行。

 

#export LC_ALL=en_US
#locale