E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
NGINX日志
统计Apache或
nginx日志
里访问次数最多的前十个IP
nginxawk '{print $1}' urlogfile | sort | uniq -c | sort -nr -k1 | head -n 10 awk '{print $1}' /usr/local/nginx/logs/localhost.access.log | sort | uniq -c | sort -nr -k1 | head -n 10Apachecd /var/log/h
xoyabc
·
2015-08-26 09:32
apache
nginx
使用rsyslog收集
nginx日志
发送给ELK Stack
nginx_access.log/error.log--->rsyslog--->logstash--->ES
MrYx3en
·
2015-08-25 16:00
清理web服务器磁盘脚本,shell,py,初学python。
环境:web服务器,没装别的程序,基本占磁盘的就是nginxlog文件思路:当磁盘超过80%,删除3天之前的
nginx日志
shell:#!
back熊孩子
·
2015-08-25 14:27
shell
python
清理磁盘
清理web服务器磁盘脚本,shell,py,初学python。
环境:web服务器,没装别的程序,基本占磁盘的就是nginxlog文件思路:当磁盘超过80%,删除3天之前的
nginx日志
shell:#!
back熊孩子
·
2015-08-25 14:27
shell
python
清理磁盘
Flume 收集
Nginx日志
到Hdfs Tail-to-hdfs sink
转载URL:http://blog.csdn.net/luyee2010/article/details/22159445nginx,access.log日志约8000条/s,每100w条数据约253M,需要2minagent1.sources=source1 agent1.sinks=sink1 agent1.channels=channel1 #Describe/configurespool
nysyxxg
·
2015-08-21 11:00
数据库相关问题集锦(持续更新)
phpmyadmin安装好页面打开空白问题(页面空白,源代码显示正常):查看
nginx日志
,发现2015/08/2417:25:29[crit]25592#0:*254open()"/var/lib/nginx
小鑫
·
2015-08-18 17:00
PHP连接Nginx服务器并解析
Nginx日志
的方法
php与nginx整合PHP-FPM也是一个第三方的FastCGI进程管理器,它是作为PHP的一个补丁来开发的,在安装的时候也需要和PHP源码一起编译,也就是说PHP-FPM被编译到PHP内核中,因此在处理性能方面更加优秀;同时它在处理高并发方面也比spawn-fcgi引擎好很多,因此,推荐Nginx+PHP/PHP-FPM这个组合对PHP进行解析。FastCGI的主要优点是把动态语言和HTTPS
低调小一
·
2015-08-16 12:46
tengine获取后端真实IP
修改
Nginx日志
格式vinginx.conflog_formatmain'realip:$http_x_forwarded_forslbip:$rem
xiao987334176
·
2015-08-13 17:43
nginx
tengine
获取后端真实IP
Linux系统管理
tengine获取后端真实IP
修改
Nginx日志
格式vinginx.conflog_format main 'realip:$http_x_forwarded_forslbip:$r
xiao987334176
·
2015-08-13 17:43
nginx
tengine
获取后端真实IP
恢复误删除的
nginx日志
昨天遇到了一个面试题--如何恢复误删除的
nginx日志
,当时我也只是回答出了大概的思路和步骤。晚上抽时间模拟下误删除和恢复的场景。
xxlzrw
·
2015-08-12 21:36
nginx日志
恢复nginx日志
恢复误删除的
nginx日志
昨天遇到了一个面试题--如何恢复误删除的
nginx日志
,当时我也只是回答出了大概的思路和步骤。晚上抽时间模拟下误删除和恢复的场景。
xxlzrw
·
2015-08-12 21:36
nginx日志
恢复nginx日志
Linux
恢复误删除的
nginx日志
昨天遇到了一个面试题--如何恢复误删除的
nginx日志
,当时我也只是回答出了大概的思路和步骤。晚上抽时间模拟下误删除和恢复的场景。
xxlzrw
·
2015-08-12 21:36
nginx日志
恢复nginx日志
使用elasticsearch与kibana来分析
nginx日志
小结
最近由于项目中有很多业务功能需要借助搜索引擎才能实现(比如有业务是按照User_ID分表,但是又需要在部分地方采用entity_id的维度查询,为了避免同一业务数据需要存储两份导致一序列的问题,这样的问题就用搜索引擎来实现),甚至也想把所有涉及到DB使用like的操作用elasticsearch来实现,借此彻底避免人为或者恶意SQL注入风险的存在,刚好团队中有兄弟熟悉elasticsea
zhangzhaokun
·
2015-08-11 23:00
elasticsearch
kibana
大数据
nginx日志
切割最好做法,直接配置文件里。
43 if ($time_iso8601 ~ "^(\d{4})-(\d{2})-(\d{2})T(\d{2}):(\d{2}):(\d{2})") 44 { 45 set $year $1; 46 set $month $2; 47 set $day $3; 48
疯狂的单纯酱
·
2015-08-11 11:00
nginx的日志配置
nginx日志
相关的配置有log_format、access_log、open_log_file_cache、log_not_found、log_subrequest、rewrite_log
whereismatrix
·
2015-08-07 20:00
nginx
nginx日志
每天自动分割
Nginx日志
文件
资料来源:https://www.centos.bz/2011/03/split-nginx-logfile-eveyday/Nginx产生的日志都是存在一个文件,随着网站运行时间越长,日志文件的大小也在不断增长,这对我们想分析当天日志非常的不方便,所以需要每天把日志文件分割出来,并以时间命名。创建日志分割脚本1、登录SSH,创建cut_logs.sh文件vi /root/cut_logs.sh2
hiqj
·
2015-08-05 14:00
Nginx日志
Nginx日志
主要分为两种:访问日志和错误日志。
流浪鱼
·
2015-07-28 14:00
nginx
Nginx日志
分割处理
一、配置
nginx日志
location/html/{ root /home/web; index index.htmlindex.htm; access_log /var
YU_Z_W
·
2015-07-23 17:00
nginx
日志
分割
基于Lua+Kafka+Heka的Nginx Log实时监控系统
所以,能不能把
Nginx日志
利用起来,实时监控每个业务的访问趋势、用户行为、请求质量和后端异常呢,这就是本文要探讨的主题。
ronin47
·
2015-07-21 18:00
kafka
lua
Heka的Nginx
Log实时监控系统
nginx日志
管理之logrotate
第一个部分:
Nginx日志
nginx是当前互联网中使用非常多的web服务,它能够实现负载均衡、反向代理、缓存等等功能,但我要是这些,并不是本篇的内容,本篇主要是介
schlovewsy
·
2015-07-20 15:22
logrotate
nginx日志
nginx日志
管理之logrotate
第一个部分:
Nginx日志
nginx是当前互联网中使用非常多的web服务,它能够实现负载均衡、反向代理、缓存等等功能,但我要是这些,并不是本篇的内容,本篇主要是介绍nginx
schlovewsy
·
2015-07-20 15:22
logrotate
nginx日志
nginx
nginx日志
管理之logrotate
第一个部分:
Nginx日志
nginx是当前互联网中使用非常多的web服务,它能够实现负载均衡、反向代理、缓存等等功能,但我要是这些,并不是本篇的内容,本篇主要是介
schlovewsy
·
2015-07-20 15:22
logrotate
nginx日志
nginx日志
配置指令详解
这篇文章主要介绍了
nginx日志
配置指令详解,nginx有一个非常灵活的日志记录模式,每个级别的配置可以有各自独立的访问日志,需要的朋友可以参考下 <iframe id=&
kavy
·
2015-07-20 10:00
nginx
基于Lua+Kafka+Heka的Nginx Log实时监控系统
所以,能不能把
Nginx日志
利用起来,实时监控每个业务的访问趋势、用户行为、请求质量和后端异常呢,这就是本文要探讨的主题。
ronin47
·
2015-07-20 10:00
kafka
lua
Heka的Nginx
Log实时监控系统
基于Lua+Kafka+Heka的Nginx Log实时监控系统
所以,能不能把
Nginx日志
利用起来,实时监控每个业务的访问趋势、用户行为、请求质量和后端异常呢,这就是本文要探讨的主题。
ronin47
·
2015-07-20 02:00
kafka
lua
heka
nginx日志
按照天进行分割
由于nginx的日志本身只是支持按照server_name或者大小进行划分,对于习惯了apache的按照一个网站每天一个日志的我来说是不可以接受的,于是从网上找了几个nginx按天分割的方法发现都是互相抄袭的,特别是里面有一个命令是kill-9`catnginx.pid`,需要杀掉nginx子进程,我觉得不靠谱。我忽然想到我以前在做openstack的云存储开发时,对rsyslog的日志进行分割的
HarborChung
·
2015-07-19 22:00
nginx
脚本
Access
nginx日志
分割 for linux
nginx日志
分割 for linux 默认情况下,nginx是不分割访问日志的,久而久之,网站的日志文件将会越来越大,占用空间不说,如果有问题要查看网站的日志的话,庞大的文件也将很难打开,于是便有了下面的脚本
HarborChung
·
2015-07-19 22:00
nginx
linux
脚本
elk+redis 搭建
nginx日志
分析平台
elk+redis 搭建
nginx日志
分析平台 logstash
ronin47
·
2015-07-19 20:00
elasticsearch
kibana
logstash
cronolog日志切割
apache、tomcat、
nginx日志
切割使用cronolog源代码包:cronolog-1.6.2.tar.gztar zxvf cronolog-1.6.2.tar.gzcd cronolog-
caidui
·
2015-07-19 03:36
apache
tomcat
nginx
log
cronolog
cronolog日志切割
apache、tomcat、
nginx日志
切割使用cronolog源代码包:cronolog-1.6.2.tar.gztar zxvf cronolog-1.6.2.tar.gzcd cronolog-
caidui
·
2015-07-19 03:36
apache
tomcat
log
Scala 将时间字符串转为时间戳
今天需要将
Nginx日志
中的时间字符串转为时间戳,再加以分析,由于刚学Scala不久,Java也只是一知半解,所以在时间转换的时候浪费了一些时间,故在此备忘,也希望能帮到有需要的同学。
dai451954706
·
2015-07-17 17:00
scala
时间转换
nginx日志
按照天进行分割
阅读更多由于nginx的日志本身只是支持按照server_name或者大小进行划分,对于习惯了apache的按照一个网站每天一个日志的我来说是不可以接受的,于是从网上找了几个nginx按天分割的方法发现都是互相抄袭的,特别是里面有一个命令是kill-9`catnginx.pid`,需要杀掉nginx子进程,我觉得不靠谱。我忽然想到我以前在做openstack的云存储开发时,对rsyslog的日志进
HarborChung
·
2015-07-17 10:00
nginx
access
脚本
nginx日志
按照天进行分割
阅读更多由于nginx的日志本身只是支持按照server_name或者大小进行划分,对于习惯了apache的按照一个网站每天一个日志的我来说是不可以接受的,于是从网上找了几个nginx按天分割的方法发现都是互相抄袭的,特别是里面有一个命令是kill-9`catnginx.pid`,需要杀掉nginx子进程,我觉得不靠谱。我忽然想到我以前在做openstack的云存储开发时,对rsyslog的日志进
HarborChung
·
2015-07-17 10:00
nginx
access
脚本
nginx日志
分割 for linux
阅读更多
nginx日志
分割forlinux默认情况下,nginx是不分割访问日志的,久而久之,网站的日志文件将会越来越大,占用空间不说,如果有问题要查看网站的日志的话,庞大的文件也将很难打开,于是便有了下面的脚本使用方法
HarborChung
·
2015-07-17 10:00
nginx
linux
脚本
elk+redis 搭建
nginx日志
分析平台
elk+redis搭建
nginx日志
分析平台logstash,elasticsearch,kibana怎么进行nginx的日志分析呢?
ronin47
·
2015-07-17 08:00
logstash
elasticsearch
kibana
统计
nginx日志
中访客的IP和次数,并且实时写入redis中。
具体实现的代码如下:#!/usr/bin/python #coding=utf-8 #__author__ = 'chenhuachao' #------------------------------- #created by chenhuachao on 2015/7/15 #------------------------------- import re from time import
leizhu900516
·
2015-07-15 10:08
统计
nginx日志
中访客的IP和次数,并且实时写入redis中。
具体实现的代码如下:#!/usr/bin/python #coding=utf-8 #__author__ = 'chenhuachao' #------------------------------- #created by chenhuachao on 2015/7/15 #------------------------------- import re from time import
leizhu900516
·
2015-07-15 10:08
统计
nginx日志
中访客的IP和次数,并且实时写入redis中。
具体实现的代码如下:#!/usr/bin/python#coding=utf-8#__author__ = 'chenhuachao'#-------------------------------#created by chenhuachao on 2015/7/15#-------------------------------import refrom time import sleep i
leizhu900516
·
2015-07-15 10:08
linux
基于Lua+Kafka+Heka的Nginx Log实时监控系统
所以,能不能把
Nginx日志
利用起来,实时监控每个业务的访问趋势、用户行为、请求质量和后端异常呢,这就是本文要探讨的主题。
ronin47
·
2015-07-15 08:00
nginx
log
监控分析
基于Lua+Kafka+Heka的Nginx Log实时监控系统
所以,能不能把
Nginx日志
利用起来,实时监控每个业务的访问趋势、用户行为、请求质量和后端异常呢,这就是本文要探讨的主题。
ronin47
·
2015-07-15 08:00
nginx
log
监控分析
nginx日志
IP统计
命令统计apache或
nginx日志
中访问最多的100个ip及访问次数,这个在以前做日志统计的时候经常用到awk'{print$1}'日志地址|sort|uniq-c|sort-n-k1-r|head-n100
yawei555
·
2015-07-13 15:07
nginx日志IP
nginx日志
IP统计
命令统计apache或
nginx日志
中访问最多的100个ip及访问次数,这个在以前做日志统计的时候经常用到awk'{print$1}'日志地址|sort|uniq-c|sort-n-k1-r|head-n100
yawei555
·
2015-07-13 15:07
nginx日志IP
基于Lua+Kafka+Heka的Nginx Log实时监控系统
所以,能不能把
Nginx日志
利用起来,实时监控每个业务的访问趋势、用户行为、请求质量和后端异常呢,这就是本文要探讨的主题。
weixin_34100227
·
2015-07-11 19:44
lua
后端
数据库
基于Lua+Kafka+Heka的Nginx Log实时监控系统
所以,能不能把
Nginx日志
利用起来,实时监控每个业务的访问趋势、用户行为、请求质量和后端异常呢,这就是本文要探讨的主题。
马隆博
·
2015-07-11 00:00
监控
nginx
heka
kafka
lua
纯手工玩转 Nginx 日志
纯手工玩转
Nginx日志
转自http://blog.eood.cn/nginx_logs
Nginx日志
对于大部分人来说是个未被发掘的宝藏,总结之前做某日志分析系统的经验,和大家分享一下
Nginx日志
的纯手工分析方式
skykingf
·
2015-07-08 19:00
在Centos中使用goaccess查看
Nginx日志
在Nginx的配置文件中配置一下access日志: log_format access ‘$remote_addr – $remote_user [$time_local] “$request” ‘‘$status $body_bytes_sent “$http_referer” ‘‘”$http_user_agent” $http_x_forwarded_for’; ac
·
2015-07-08 14:00
centos
ELK最新版实战配置检索
nginx日志
说明: 本文只是对相应的功能进行简介,并不会具体介绍部署方案,因为所有的包都是使用的tar.gz格式解压直接可用的,如果有什么不懂的地方或是本人有说错的地方,欢迎大家提问和质疑,也欢迎大家一起交流学习。环境: OS:ubuntu14.0 Kernel:3.13.0-24-generic logstash:1.5.1 elasticsearch:1.6.0 kibana:4.1 nginx:1.9.
bawoshiji
·
2015-07-08 11:05
kibana4.1
logstash1.5.1
ELK最新版实战配置检索
nginx日志
说明: 本文只是对相应的功能进行简介,并不会具体介绍部署方案,因为所有的包都是使用的tar.gz格式解压直接可用的,如果有什么不懂的地方或是本人有说错的地方,欢迎大家提问和质疑,也欢迎大家一起交流学习。环境: OS:ubuntu14.0 Kernel:3.13.0-24-generic logstash:1.5.1 elasticsearch:1.6.0 kibana:4.1 nginx:1.9.
bawoshiji
·
2015-07-08 11:05
logstash1.5.1
kibana4.1
ELK最新版实战配置检索
nginx日志
说明:本文只是对相应的功能进行简介,并不会具体介绍部署方案,因为所有的包都是使用的tar.gz格式解压直接可用的,如果有什么不懂的地方或是本人有说错的地方,欢迎大家提问和质疑,也欢迎大家一起交流学习。环境:OS:ubuntu14.0Kernel:3.13.0-24-genericlogstash:1.5.1elasticsearch:1.6.0kibana:4.1nginx:1.9.1tomcat
Leon_zhang50773
·
2015-07-08 11:05
logstash1.5.1
kibana4.1
日志管理
GoAccess
nginx日志
分析工具
最近维护的网站老是有搜索引擎来恶意访问,搞我们网站打开很慢,OMG老总发话了,必须要搞定。曾经在nginx.conf文件中做过滤,but这样做过,但是会影响收录,纠结啊........if ($http_user_agent ~* "Gecko|YoudaoBot|baiduspider|Googlebot|soso|bing|sogou|yahoo|sohu-search|yodao|roboz
dihaifeng
·
2015-07-07 11:01
sogou
上一页
33
34
35
36
37
38
39
40
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他