NGINX日志

Nginx使用总结

安装及调试三、NginxRewrite四、NginxRedirect五、Nginx目录自动加斜线:六、NginxLocation七、Nginxexpires八、Nginx防盗链九、Nginx访问控制十、Nginx
mike_caoyong·2014-09-09 23:47

python 分析处理nginx日志

临时帮公司研发同事处理nginx日志，凑合了一个脚本，用着还行，执行效率，还可以吧，一个G的文件，一分钟内就可以处理完成，供大家参考。#!
wangganyu188·2014-09-09 17:01

python 分析处理nginx日志

临时帮公司研发同事处理nginx日志，凑合了一个脚本，用着还行，执行效率，还可以吧，一个G的文件，一分钟内就可以处理完成，供大家参考。#!
wangganyu188·2014-09-09 17:01

resin access log导致的锁问题一例

在nginx层面做httpcode的监控，发现有4xx比例高的的报警：分析nginx日志，发现是由于499比例高导致xxx xxxxx - [29/Oct/2012:04:10:03 +0800] "GET
菜菜光·2014-09-02 22:14

resin access log导致的锁问题一例

在nginx层面做httpcode的监控，发现有4xx比例高的的报警：分析nginx日志，发现是由于499比例高导致xxx xxxxx - [29/Oct/2012:04:10:03 +0800] "GET
菜菜光·2014-09-02 22:14

Storm实践

业务场景：读取nginx日志，根据$HOST、$PATH、$Cluste、$APP来统计PV，UV，错误码，响应时间等进程模型：Spout：读取日志，解析日志，根据配置的规则对日志过滤和分类，同时对记录打上分钟为单位的标签
anghlq·2014-08-30 10:00

阿里简单日志服务器的使用

        使用阿里云的队列服务器来存储nginx的日志，用来检测用户的访问量等情况，首先WEB服务器的nginx日志存放格式如下： "$host" "$remote_addr" "$time_local
990653058·2014-08-29 10:56

shell脚本分析 nginx日志访问次数最多及最耗时的页面(慢查询）

当服务器压力比较大，跑起来很费力时候。我们经常做站点页面优化，会去查找那些页面访问次数比较多，而且比较费时。找到那些访问次数高，并且比较耗时的地址，就行相关优化，会取得立竿见影的效果的。下面是我在做优化时候，经常用到的一段shell脚本。这个也可以算是，统计web页面的slowpage慢访问页面，象mysqlslowquery。以下是我的：nginx配制log_formatmain'$remote
e421083458·2014-08-20 16:01

Apache/Nginx 访问日志分析脚本（1）

/1191027脚本功能：脚本采用python2.7编写，用来分析Apahce的访问日志  脚本用法：脚本名 Apache的访问日志 [想要显示的行数] 更新： 1.第二版：增加显示指定的行数2.增加Nginx
ihanxiao2100·2014-08-19 13:00

Nginx log error：client sent invalid userid cookie

今天就来看一个nginx日志收集过程中的case。
xrzs·2014-08-16 19:00

Nginx日志切割

VPS评测与排名站习惯使用LinuxVPS，并且毕竟钟爱LNMP这个一键脚本安装Nginx、MySQL、PHPweb环境(参照VPS搭建网站WEB服务器环境之LNMP篇)，不过LNMP有选择记录Nginx
wendi_0506·2014-08-14 16:00

修改nginx的日期格式

开发有要求需要修改nginx日志中的时间格式2010-08-2317:27:11Nginx的默认日志时间格式为23/Aug/2010:17:26:44+08001.修改src/http/modules/
ihanxiao2100·2014-08-10 18:00

nginx日志中添加cookie信息

在要添加的server中添加获取cookie的信息server{               listen         80;               server_name    jxjymember.cdeledu.com;               set$JXJYMEMBERCookie"";               #此处如果想取全部cookie可以写成          
cdel_liqi·2014-08-07 09:40

nginx日志中添加cookie信息

在要添加的server中添加获取cookie的信息server{listen80;server_namejxjymember.cdeledu.com;set$JXJYMEMBERCookie"";#此处如果想取全部cookie可以写成#if($http_cookie~*"(.*)$"){if($http_cookie~*"JXJYMEMBERCookie=([A-Za-z0-9_]*)"){set
cdel_liqi·2014-08-07 09:40

nginx日志切割脚本,python实现

#自搭建了个人博客有需要交流学习的可以访问www.wpython.com#!/usr/bin/env python   import datetime,os,sys,shutil   log_path = '/alidata/log/nginx/access/' log_file = 'www.wpython.com.log'   yesterday = (datetime.datetime.no
xqq1993·2014-08-06 18:18

nginx日志切割脚本,python实现

#自搭建了个人博客有需要交流学习的可以访问www.wpython.com#!/usr/bin/env python import datetime,os,sys,shutil log_path = '/alidata/log/nginx/access/'log_file = 'www.wpython.com.log' yesterday = (datetime.datetime.now() - d
Tablib·2014-08-06 18:18

nginx日志切割

#!/bin/bash#cut nginx logsnginx_sbin="/workspace/ngx_openresty/nginx/sbin/nginx"log_files_path="/workspace/ngx_openresty/nginx/access_logs"log_file_name="access_duomi1"cut_log_files_dir="/logs"time=`d
caozhangming·2014-08-06 14:15

nginx日志切割

#!/bin/bash #cut nginx logs nginx_sbin="/workspace/ngx_openresty/nginx/sbin/nginx" log_files_path="/workspace/ngx_openresty/nginx/access_logs" log_file_name="access_duomi1" cut_log_files_dir="/logs" t
caozhangming·2014-08-06 14:15

nginx访问日志,错误日志参数说明

说明：nginx日志主要有两种：访问日志、错误日志。
杭州山不高·2014-08-06 14:20

nginx访问日志,错误日志参数说明

说明：nginx日志主要有两种：访问日志、错误日志。
gaojinshan·2014-08-06 14:00

linux下awstats配合jawstats分析nginx日志

      awstats与jawstats是两款日志型的分析软件，可以一图形化的形式展现网站的PV，UV，IP访问情况等信息，awstats是apache的天然小伙伴，支持性是最好的，也最易配置，但是在nginx作为web服务器已然形成一种趋势的今天，如何让其与awstats整合到一起，将是本日志主要着笔的内容：     首先，分别下载awstats和jawstats     wgethttp:
fairplay_li·2014-08-05 17:00

nginx日志分割小脚本

nginx的日志一直是写在一个文件上面，运行久了之后文件会非常大，因此我们有必要对nginx的日志进行分割：   1 2 3 4 5 6 7 8 9 10 11 #! /bin/bash ACCESS_LOG=/data/nginx/www.log ERROR_LOG=/data/nginx/error.lo
·2014-08-02 11:00

关于hive RegexSerDe的源码分析

最近有个业务建表使用了RegexSerDe，之前虽然也它来解析nginx日志，但是没有做深入的了解。这次看了下其实现方式。
huaixixi1988·2014-08-01 16:19

诡异的磁盘空间100%报警分析得出df -h与du -sh的根本性差别

前言：早晨磁盘报警刚清空完tomcat和nginx日志，使用的命令是类似echo"">show_web-error.log或者>show_web-debug.log清空语句，然后rm-rf掉一些tar.gz
mchdba·2014-07-31 09:00

关于hive RegexSerDe的源码分析

 最近有个业务建表使用了RegexSerDe，之前虽然也它来解析nginx日志，但是没有做深入的了解。这次看了下其实现方式。
菜菜光·2014-07-30 22:39

关于hive RegexSerDe的源码分析

最近有个业务建表使用了RegexSerDe，之前虽然也它来解析nginx日志，但是没有做深入的了解。这次看了下其实现方式。
菜菜光·2014-07-30 22:39

nginx日志配置指令详解

本文总结了nginx日志相关的配置如access_log、log_format、open_log_file_cache、log_not_found、log_subrequest、rewrite_log、
凉白开·2014-07-23 08:02

Perl统计nginx日志信息并分析每个小时的数据

#!/usr/bin/perl # name: logcalc.pl # calc the amount of access url use strict; use warnings; use diagnostics; use File::Basename; my ($arg, $arg_only); my $FILE; my ($year, $month, $day, $mon); my 
lucifercn·2014-07-18 18:00

nginx配置 开启nginx日志

  配置 Nginx 先来看一个实际的配置文件：   user root; worker_processes 1; #error_log logs/error.log; #error_log logs/error.log notice; #error_log logs/error.log info; pid logs/ngin
liyonghui160com·2014-07-18 16:00

logrotate 进行nginx日志分割

下面我们以分割nginx日志为例介绍一下使用logrotate分割日志实例。logrotate简单介绍logrotate使用cron按时调度执行，日志的执行过程原理为
newjueqi·2014-07-16 17:00

NGINX日志切割

vi rotatelog.sh#!/bin/bash#Thisscriptrunat00:00#TheNginxlogspathlogs_path="/usr/local/webserver/nginx/logs/"mkdir-p${logs_path}$(date-d"yesterday"+"%Y")/$(date-d"yesterday"+"%m")/mv${logs_path}access.
lcdmusic·2014-07-11 16:00

Nginx学习之九：实践学习指南

nginx日志配置10. apache和nginx支持SSI配置12. 
boonya·2014-07-09 17:00

hive导入nginx日志

阅读更多将nginx日志导入到hive中的方法1在hive中建表CREATETABLEapachelog(ipaddressSTRING,identdSTRING,userSTRING,finishtimeSTRING
wbj0110·2014-07-09 11:00

hive导入nginx日志

将nginx日志导入到hive中的方法 1 在hive中建表   CREATE TABLE apachelog (ipaddress STRING
wbj0110·2014-07-09 11:00

hive导入nginx日志

将nginx日志导入到hive中的方法 1 在hive中建表   CREATE TABLE apachelog (ipaddress STRING
wbj0110·2014-07-09 11:00

hive导入nginx日志

将nginx日志导入到hive中的方法 1 在hive中建表   CREATE TABLE apachelog (ipaddress STRING
wbj0110·2014-07-09 11:00

将nginx日志中的蜘蛛记录删除掉

#!/bin/sh if[-r$1];then   #DeleteBaiduspider   baidu=$(grep-c'Baiduspider'$1)   if[$baidu-gt0];then     sed-i'/Baiduspider/d'$1     echo"matchBaiduspider$baiduline."   else     echo"Baiduspidernotfoun
江边望海·2014-07-06 17:00

在Linux系统的Centos6.3中使用GoAccess可视化的分析Nginx日志文件

1.安装GoAccess需要一些系统支持库yuminstallglib2glib2-develGeoIP-devel ncurses-develzlibzlib-devel2.如果yum库找不到Geo-IP那么需要单独安装了.cd/usr/local/src wgethttp://geolite.maxmind.com/download/geoip/api/c/GeoIP-1.4.6.tar.gz
江边望海·2014-07-06 10:00

被遗忘的Logrotate

我发现很多人的服务器上都运行着一些诸如每天切分Nginx日志之类的CRON脚本，大家似乎遗忘了Logrotate，争相发明自己的轮子，这真是让人沮丧啊！
xiaoxinyu316·2014-07-02 14:00

ubantu命令行安装nginx

sudoapt-getinstallnginxUbuntu安装之后的文件结构大致为：所有的配置文件都在/etc/nginx下，并且每个虚拟主机已经安排在了/etc/nginx/sites-available下程序文件在/usr/sbin/nginx
神码·2014-06-24 19:00

Nginx日志处理

今天对线上nginxaccess.log日志进行了如下处理，以便分析每5分钟统计访问次数，并加入ganglia监控，通过web展示，做法如下：1.首先nginx的日志需要做日志切割，切割脚本如下：cat nginx_log.sh #!/bin/sh #2014-06-06 by wu savepath_log=/home/buddy/logs/ nglogs=/usr/local/nginx/lo
康少·2014-06-18 15:00

实战6 Nginx的web日志导入到MongoDB数据库

一、获取Cookid二、nginx日志截取三、nginx的日志导入 一、获取Cookid二、nginx日志截取感谢群友的帮助：雪落纷飞-1009556020#!
郑彦生·2014-06-17 19:17

常用APP等日志分割与nginx日志分析脚本合集

针对app,resin,tomcat日志分割脚本appname：填写app（包含resin/tomcat）的名字;key：过滤日志关键字，避免删除其他不必要的文件;cleanday：日志保存的周期，缺省保存30天;cleanlog:删除日志的记录保存的目录核心命令:find命令去查找日志目录下含关键字的日志文件,然后利用for循环去删除$cleanday之前的日志文件#!/bin/bash  to
运维技术·2014-06-17 17:00

如何开发打点统计系统

所以我这次就果断使用分析nginx日志的方法来做打点（这个方法
轩脉刃·2014-06-06 18:00

nginx 错误日志

1、日志简介nginx日志主要有两种：访问日志和错误日志。访问日志主要记录客户端访问nginx的每一个请求，格式可以自定义；错误日志主要记录客户端访问nginx出错时的日志，格式不支持自定义。
zhj14007·2014-05-30 16:30

nginx 错误日志

1、日志简介nginx日志主要有两种：访问日志和错误日志。访问日志主要记录客户端访问nginx的每一个请求，格式可以自定义；错误日志主要记录客户端访问nginx出错时的日志，格式不支持自定义。
zhj14007·2014-05-30 16:30

Nginx日志切割脚本

1nginx是yum方式安装，系统会自动生成nginx日志切割计划任务在/etc/logrotate.d/nginx下，把自动生成的计划任务删除，自己编写切割脚本，并传到统一存放日志的服务器上。
菜鸟snake·2014-05-28 16:31

nginx关闭favicon.ico、robots.txt日志记录配置

nginx日志最近发生大量访问favicon.ico无法找到的404错误日志，小编感觉很影响服务器性能，对于一个高并发的服务器每一个错误都会影响性能，所以需要关闭访问favicon.ico的日志记录功能
·2014-05-28 14:46

Oracle-No.02 数据库设计可扩展性研究

背景：在统计分析项目开发过程中，需要分析nginx日志统计用户请求，将nginx日志信息入库，在起初设计表结构的时候，考虑不周全，录入了一个月的数据之后，领导改需求，需要录入一个新的字段数据，对数据库表结构进行修改
蓝汀华韶·2014-05-27 14:00

Apache/Nginx 访问日志分析脚本

脚本功能：脚本采用python2.7编写，用来分析Apahce的访问日志脚本用法：脚本名Apache的访问日志[想要显示的行数]更新：1.第二版：增加显示指定的行数2.增加Nginx日志分析脚本脚本执行效果如下
vfast_wuwei·2014-05-21 16:57
上一页 37 38 39 40 41 42 43 44 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他