NGINX日志

nginx日志切割

编辑shell脚本mahao@ubuntu:/etc/nginx$sudomkdirshellmahao@ubuntu:/etc/nginx$cdshell/mahao@ubuntu:/etc/nginx/shell$sudovimrunlog.sh#!/bin/bash#这里指定自己的日志文件路径LOG_PATH=/var/log/nginx/test_locals_com_access.log
Marhal·2019-04-26 14:33

nginx 日志配置

nginxaccess_lognginx日志说明不同用户防卫Nginx会把每个用户访问往咱的日志信息记录到指定的日志文件里，供网站管理员分析用户浏览行为等，此功能又ngx_http_log_module
leone_smith·2019-04-25 17:27

ELK-filebeat+logstash采集nginx日志

ELK-filebeat+logstash采集nginx日志文章目录ELK-filebeat+logstash采集nginx日志前言采集访问日志第一种方式：修改nginx访问日志输出格式为json修改nginxfilebeat
陈袁·2019-04-24 13:09

nginx 日志分析

1、日志简介nginx日志主要有两种：访问日志和错误日志。访问日志主要记录客户端访问nginx的每一个请求，格式可以自定义；错误日志主要记录客户端访问nginx出错时的日志，格式不支持自定义。
Salian·2019-04-15 17:53

nginx location

blog.csdn.net/gzh0222/article/details/7845981负载均衡策略http://nginx.org/en/docs/http/load_balancing.htmlnginx
edaire·2019-04-15 17:49

nginx location

blog.csdn.net/gzh0222/article/details/7845981负载均衡策略http://nginx.org/en/docs/http/load_balancing.htmlnginx
edaire·2019-04-15 17:49

快速掌握Nginx(四) —— Nginx日志切片和常用配置总结

1.Nginx日志管理1.日志简单介绍Nginx提供了日志记录的功能，日志文件在对我们管理网站十分有用，通过访问日志(access_log)我们可以获取请求来源、客户端信息、请求的资源等信息；通过错误日志
捞月亮的猴子·2019-04-13 17:00

ELK使用filter收集nginx日志-07

修改nginx日志格式log_formathanye'$proxy_add_x_forwarded_for$remote_user[$time_local]"$request"$http_host''[
hanye韩也·2019-04-11 17:25

logstash写入到kafka和从kafka读取日志

收集nginx日志放到kafka修改nginx日志格式：[nginx日志格式修改](https://blog.51cto.com/9025736/2373483)input{file{type=>"nginx-access"path
hanye韩也·2019-04-09 15:25

Ubuntu安装Nginx

sudoapt-getinstallnginx更新源$sudoapt-getupdate更新已安装的包$sudoapt-getupgrade名称目录配置文件/etc/nginx/nginx.conf程序文件/usr/sbin/nginx
XDiong·2019-04-03 15:26

利用ELK分析Nginx日志生产实战(高清多图)

注：本文系原创投稿本文以api.mingongge.com.cn域名为测试对象进行统计,日志为crm.mingongge.com.cn和risk.mingongge.com.cn请求之和(此二者域名不具生产换环境统计意义)，生产环境请根据具体需要统计的域名进行统计。由于涉及生产线上服务器，故本文部分服务器IP做了打码处理。一、服务介绍1.1、ELKELK是三个开源软件的缩写，分别表示：Elasti
cpongo2·2019-04-01 11:47

关于localhost访问特别快而nginx配置代理后转发特别慢的解决

解决过程定位肯定是nginx的问题，查看nginx日志发现，正常的
段大人·2019-03-29 14:34

nginx日志配置笔记：if条件

1、特定条件写日志：参照：https://stackoverflow.com/questions/19011719/how-to-write-only-logs-with-200-statushttp://nginx.org/en/docs/http/ngx_http_map_module.htmlhttp{map$status$normal{~^21;default0;}map$status$a
9394952·2019-03-28 15:00

nginx日志配置笔记：if条件

1、特定条件写日志：参照：https://stackoverflow.com/questions/19011719/how-to-write-only-logs-with-200-statushttp://nginx.org/en/docs/http/ngx_http_map_module.htmlhttp{map$status$normal{~^21;default0;}map$status$a
d9394952·2019-03-28 15:46

多重 nginx 反向代理获取客户端真实 ip

模块，nginx的access_log里记录的IP会是反向代理服务器的IP，PHP中$_SERVER['REMOTE_ADDR']的值也是反向代理的IP而安装了realip模块，并且配置正确，就可以让nginx
ConfusedSnail·2019-03-28 11:45

nginx服务器报错502 bad gateway!

服务器进行公众号粉丝数据同步以及批量推送报错502根据错误信息可以判定是后端的问题，502错误的原因有很多种，但总的来说就是服务器处理不过来了1.首先查看服务器日志1）先查nginx日志，不熟悉的可以从
晓锋不懂你·2019-03-27 18:56

四种解决Nginx出现403 forbidden 报错的方法

我是在在本地用虚拟机中通过yum安装nginx的，安装一切正常，但是访问时报403，于是查看nginx日志，路径为/var/log/nginx/error.log。
防2885060591防·2019-03-25 15:25

Kafka史上最详细原理总结

基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎，web/nginx
一位程序员小生的奋斗史·2019-03-22 15:48

Kafka史上最详细原理总结

基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎，web/nginx
一位程序员小生的奋斗史·2019-03-22 15:48

shell练习题

shell练习题基础计算判断循环其他基础1.按照时间生成文件2018-05-22.log将每天的磁盘使用状态写入到对应日期的文件统计Nginx日志中每个IP的访问量有多少,日志如下:192.168.56.1
最爱下一站·2019-03-21 20:27

懒人用日志分析-awstats的docker应用

刚刚来到新的工作环境，接到一个任务，需要对一段nginx日志进行分析，但公司并没有搭建日志分析系统，自己搭一个又浪费时间，于是在网络上溜达了一下，找到了docker版本的awstats。
luots·2019-03-21 11:37

thinkphp 5.0 index.php被替换成首页内容，被注入恶意代码

后来查看了nginx日志。日志在/home/wwwlogs/域名.log发现了某个上传图片的目录下，竟然有.php文件。
phpervip·2019-03-11 09:34

thinkphp 5.0 index.php被替换成首页内容，被注入恶意代码

后来领导查看了nginx日志。日志在/home/wwwlogs/域名.log发现了某个上传图片的目录下，竟然有.php文件。
phpervip·2019-03-11 09:31

PHP统计Nginx日志的User Agent数据

转载请注明文章出处：https://tlanyan.me/stat-user-...即将用到爬虫，于是打算收集一下UserAgent(UA)数据。接着马上想到自己网站的访问日志不就是现成的优质数据源吗？于是愉快的决定写个脚本统计一下Nginx访问日志中的UA信息。这类简单操作，用脚本语言就足够，毫无疑问肯定要用最熟悉的PHP。打开vim就开撸，十几分钟下来，功能简单的统计脚本就搞定了。脚本目前有三
tlanyan·2019-03-10 00:00

nginx日志 打印 post body

背景当客户端要上传的日志内容比较大时，在url里加参数就会显得比较冗余，这时就需要在body里，通过post的方式上传，如果post的内容是json的话，更容易扩展。修改配置文件nginx.conf主要修改的内容如下，具体位置参见后面的示例1、log_formatpost_log'$remote_addr-$remote_user[$time_local]"$request"''$status$b
weixin_g632637774·2019-03-08 16:19

nginx日志自动每日切割脚本

1、脚本内容#!/bin/bash#日志文件存放目录logs_path="/var/log/nginx/e/"#pid文件pid_path="/run/nginx.pid"#重命名日志文件mv${logs_path}access.log${logs_path}access_$(date-d"yesterday"+"%Y%m%d").log#向nginx主进程发送信号以重新打开日志kill-USR1
StonePanda·2019-03-07 00:00

利用PHP如何统计Nginx日志的User Agent数据

前言即将用到爬虫，于是打算收集一下UserAgent(UA)数据。接着马上想到自己网站的访问日志不就是现成的优质数据源吗？于是愉快的决定写个脚本统计一下Nginx访问日志中的UA信息。这类简单操作，用脚本语言就足够，毫无疑问肯定要用最熟悉的PHP。打开vim就开撸，十几分钟下来，功能简单的统计脚本就搞定了。脚本目前有三个功能：1.找出所有的UA信息并排序；2.统计操作系统数据；3.统计浏览器数据。
tlanyan·2019-03-06 11:47

Nginx服务器配置

Nginxsudoapt-getinstallnginx安装后文件所有的配置文件都在/etc/nginx下，并且每个虚拟主机已经安排在了/etc/nginx/sites-available下程序文件在/usr/sbin/nginx
大地瓜_·2019-03-04 15:49

nginx日志切割

当我们网站正常工作的时候，每次访问，我们的access.log日志文件都会去记录，时间一长，这个日志文件肯定会变得很大，撑爆我们的磁盘空间，这个时候呢我们要把这个日志文件进行切割，按日去记录，然后规定删除多少天之前的日志文件。nginx没有像Apache那样的切割工具。需要我们去写一个脚本来实现[root@localhostvhosts]#vim/usr/local/sbin/nginx_logr
2513246·2019-02-28 22:16

nginx日志切割脚本

#nginx日志切割并删除7天前日志#!
运维胡一刀·2019-02-27 15:32

nginx日志分割脚本

/bin/bash#该脚本用于nginx日志分割，方便日志分析#access.log日志所在目录ACCESS_LOGS_PATH=/usr/local/nginx/logs#error.log日志所在目录
cjm712·2019-02-22 22:15

Kafka史上最详细原理总结 ----看完绝对不后悔

基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎，web/nginx
二十-帅帅·2019-02-20 14:36

Nginx常规小脚本

nginx日志清理清理日志#!/bin/bashmv/usr/local/nginx/logs/access.log/usr/local/nginx/logs/access.log.
猪蹄胖·2019-02-13 22:14

使用ELK同时处理apache和Nginx日志

场景模拟server1ELK部署收集处理日志server2apache部署filebeat安装提供访问日志给ELKserver3nginx部署filebeat安装提供访问日志给ELK如果在同一服务器实验主机修改apache或nginx的默认端口apache的部署访问参考《使用elk处理apache访问日志》部署nginx节省时间采用yum安装方式[root@server3 ~]# yum -y i
FlyingPikachu·2019-02-11 13:43

关于收集日志的一些思考

前言我一直负责公司的nginx日志收集，现在每天的pv数在10亿级别，存储大概1T（*2默认的elasticsearch5分片2副本）不到，因为开始的时候nginx日志也是逐渐收集的，因为是第一次做问题也比较多
圣诞使者·2019-02-06 19:00

Ubuntu 安装 nginx

nginxsudoapt-getinstallnginxUbuntu安装之后的文件结构大致为：所有的配置文件都在/etc/nginx下，并且每个虚拟主机已经安排在了/etc/nginx/sites-available下程序文件在/usr/sbin/nginx
IvenOne·2019-01-25 18:36

Nginx+Lua脚本+Redis 实现自动封禁访问频率过高IP

前言:由于公司前几天短信接口被一直攻击,并且攻击者不停变换IP,导致阿里云短信平台上的短信被恶意刷取了几千条,然后在Nginx上对短信接口做了一些限制临时解决方案:1、查看Nginx日志发现被攻击的IP
首长爱吃面·2019-01-25 17:04

https 报错net::ERR_CONNECTION_RESET http却可以访问

nginx日志没有接受到请求前端控制台出现（下图）偶尔可以提交成功（很少）切换至http后一切正常最终解决方案，nginx切换到1.14，nginx配置切换到http2.0协议
coding小杰·2019-01-25 14:11

虎牙直播张波：掘金Nginx日志

OpenResty在虎牙的应用场景主要WAF和流控等方面，我今天主要分享的是“Nginx日志”，因为这在虎牙产生过巨大的价值，简单来说，我们最终做到的效果就是每年节省数百上千万的成本。
又拍云·2019-01-25 10:00

从一起丢包故障来谈谈 nginx 中的 tcp keep-alive

查看nginx日志，对应请求返回499；查看网关日志，没有收到对应的请求。从日志分析，问题应该处在nginx或者spring-cloud-gateway上。nginx版本：1.14.2，spring
pggsnap·2019-01-24 00:00

nginx日志按天分割

#!/bin/bash#RotatetheNginxlogstopreventasinglelogfilefromconsumingtoomuchdiskspace.LOGS_PATH=/data/logs/nginxYESTERDAY=$(date-d"yesterday"+%Y-%m-%d)cd/data/logs/nginx/ACCESS_FILE_LIST=`ls*_access.log`
黄三爷·2019-01-23 09:38

AJAX中出现OPTIONS请求

背景之前有一个项目使用Zepto来发送ajax请求,查看Nginx日志或使用ChromeDevTools查看请求发送情况时,会看到每次调后台API的请求之前,都会发送一个OPTIONS请求,无论API要求请求的方法是
hyupeng1006·2019-01-21 19:50

Pandas分析Nginx日志求pv, uv

安装所需Python库$pipinstallnumpypandasmatplotlib注：所有工作都在Python3中实践（Python2应该也没有问题）Nginx日志格式$remote_addr-$remote_user
hugoren·2019-01-17 11:40

Linux服务器Tomcat日志清理、nginx日志清理

前言由于tomcat下catalina.out日志文件随着时间增长会越来越大，导致服务器磁盘存储空间不足，需要定时清理该日志文件。曾经用过某某切割工具，但是并不好用，所以自己参照网上的一些资料写了一个脚本，特分享如下。第一步按照日期备份catalina.out日志文件（nginx的日志文件也采用相同的方式），建立clear_logs.sh文件#!/bin/bashdatename=$(date-d
空空如也忄·2019-01-17 10:46

python spark streaming 从 kafka获取nginx日志，秒级统计url pv，并写入mysql

mysql建库建表>createdatabasenginx;>usenginx>createtableurl_access(idintNOTNULLAUTO_INCREMENTprimarykey,timestampvarchar(256),urlvarchar(256),pvlong);#!/usr/bin/envpython#-*-coding:utf-8-*-#@Time:2019/01/0
chinasiyu·2019-01-09 23:03

python kafka消息传入spark streaming 实时计算打印

实现了从kafka取nginx日志，并在本地打印出来#!
chinasiyu·2019-01-09 18:34

HTTP X-Forwarded-For 头部字段的应用

在运维工作中，经常会遇到X-Forwarded-For这个字段，比如nginx、haproxy、缓存代理、甚至好点的网络7层网络设备都可以修改这个字段，这个字段对记录客户端的真实IP地址非常有用，在分析nginx
cuizhiliang·2019-01-08 19:55

nginx配置proxy_pass出现502/13: Permission denied问题解决

通过查看nginx日志：connect()to127.0.0.1:9090failed(13:Permissiondenied)whileconnectingtoupstream,client解决方案查看系统
jiangshanwe·2019-01-04 13:09

奥塔在线：CentOS下查看crontab定时任务输出日志

前期部署服务时，已经通过定时任务+sh命令分割了Nginx日志，并按时间进行清理，怎么会日志有这么大。带着困惑，开始检查原因。1、检查定时任务定时任务2、检查服务是否执行定时服务状态
赖皮鹏·2019-01-04 11:02

使用Python统计时间窗内请求数量

时间戳文件内容如下：804528001804528001804528006采集Nginx时间戳方法可参看博文：使用Python解析nginx日志文件正文获取所有时间戳文件importglobdefreadfile
seawish·2019-01-03 15:34
上一页 20 21 22 23 24 25 26 27 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他