NGINX日志

Shell 中常用 Date 日期的计算

在使用Crontab定时任务和Shell脚本切割Nginx日志文件时，要用到时间戳、当月、上月、下月、上月初、上月末、下月初、下月末等等，其中有些日期不能直接获取，需要经过一定的计算才能得到。
天問_专注于大前端技术·2023-03-18 00:41

Kafka文件存储机制那些事

1.Kafka是什么Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统(也可以当做MQ系统)，常见可以用于web/nginx
尼小摩·2023-03-16 21:05

2020-10-10 架构师第15周作业

192.168.7.22ES：192.168.7.23kibana：192.168.7.23采用的拓扑：logstash-->ES-->kibana（二）实施步骤:（1）logstsh具体配置：1，配置nginx
一心1977·2023-03-16 03:15

Nginx架构模型及常用配置

文章目录一、Nginx简介二、Nginx架构设计2.1Nginx模块化设计2.2Nginx多进程模型2.3Nginx的epoll模式三、Nginx配置文件四、Nginx日志4.1访问日志4.2错误日志五
不才不才不不才·2023-03-15 02:22

模块十七_kafka

1.Kafka介绍Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多生产者、多订阅者，基于zookeeper协调的分布式日志系统（也可以当做MQ系统），常见可以用于web/nginx
西西弗斯XD·2023-03-10 19:02

记一次fastdfs报错，line: 896, redirect again

image.png于是查看fastdfs的nginx日志发现如下报错：[2020-03-3011:34:21]WARNING-file:/home/hn_fastdfs/fastdfs-nginx-module
非著名不专业运维·2023-03-09 11:17

nginx日志分片切割、不记录不读取问题 pyLogmanage

当你使用定时任务对日志进行切割后,linux还是为nginx保留切割前的文件,很多教程都说用kill或restart的方法,实际上nginx提供了重新打开日志的命令:$nginx-sreopenpythondjango在配合使用uwsgi的话，可以在所在项目uwsgi.ini，新增配置[uwsgi]master=truetouch-logreopen={你的日志路径}/touchforlog只要在
郭百度·2023-03-09 10:07

第一章 Kafka快速实战与基本原理

，基于zookeeper协调的分布式消息系统，它最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、Storm/Spark流式处理引擎，web/nginx
猿小羽·2023-02-20 23:11

【全】nginx中间件原理实践学习笔记

NGINX中间件学习nginx中间件学习nginx安装与运行Nginx解析过程Nginx进程模型Worker抢占机制Nginx.conf核心配置文件结构配置文件讲解Nginx常用命令Nginx日志切割（
〆是凌风呀·2023-02-05 01:14

nginx入门到精通高清视频课程资料笔记齐全服务器零基础适用

课程目录：01-nginx介绍及编译安装02nginx信号量03nginx虚拟主机配置04nginx日志管理05-nginx定时任务完成日志切割06-Location详解之精准匹配07-Location
网络虚拟产品杂货铺·2023-02-02 19:57

Nginx日志配置和及切割

#系统日志，如不开启，看不到定时任务日志/etc/init.d/rsyslogstart#定时任务开启/etc/rc.d/init.d/crondstart编写日志脚本：vilogcut.sh#!/bin/bash#设置日志文件存放目录LOG_HOME="/usr/local/nginx/logs/"#备分文件名称LOG_PATH_BAK="$(date-dyesterday+%Y%m%d%H%M
Yuszha·2023-01-30 20:09

Docker安装nginx

所以此处需要进行到自己心仪的盘中创建文件夹（本次说明在/home）mkdirnginx&&cd$_&&mkdir-p{ssl,config,logs}ssl放域名对应证书config放nginx配置文件logs放nginx
喝咖啡的蚂蚁·2023-01-27 07:05

Nginx 使用GoAccessLog分析access.log

1.借鉴Ubuntu安装goaccess进行Nginx日志分析goaccess.ioLinux下GoAccess的安装与全部用法第十二讲:用GoAccess实现可视化并实时监控access日志xnip2
孙瑞锴·2023-01-26 20:35

#637481#基于django和neo4j的日志分析系统

，并进行图表展示，下面是做的时候梳理的一些需求：用户注册登录，登录后进入首页，首页就是一个类型选择下拉框，一个上传文件的button，然后有个button可以点击解析可以支持四种文件解析，分别为：1、nginx
qa浪涛·2022-12-29 20:55

Nginx日志按日分割方法

本文使用logrotate工具对Nginx日志进行按日的自动切割，操作系统为Centos7.6，步骤如下：1.编写针对Nginx的logrotate脚本如下（保存在/etc/logrotate.d/)/
shanghaimoon·2022-12-27 07:18

学习笔记:从0开始学习大数据-38.综合实训一：nginx日志分析

前面的学习大数据运行环境搭建后，可以开始综合实训了，因为各种事务，大数据学习进程几乎停滞了一年时间，这次受新冠状肺炎病毒疫情影响，呆在家里，才有点时间继续，这次比较完整地测试nginx日志大数据分析处理过程
领尚·2022-12-23 11:01

Nginx教程(1)

常见的服务器1.3反向代理1.4Nginx的安装与运行1.5Nginx的进程模型1.6Nginx处理Web请求机制解析1.7Nginx核心配置文件nginx.conf解析1.8Nginx常用命令解析1.9Nginx
jakiechaipush·2022-12-19 08:07

[nginx] nginx报错修复

表象（nginx日志）upstreamsenttoobigheaderwhilereadingresponseheaderfromupstream在浏览器中查看报错请求显示502BadGateway解决方式
·2022-12-17 10:39

Nginx日志中访问最多的10个IP及访问次数

awk是处理文本文件的一个应用程序.我们可以通过awk来计算IP的访问次数awk'{print$1}'./access.log|sort|uniq-c|sort-nr|head-n10{print$1}就是将某一行（一条记录）中以空格为分割符的第一个字段打印出来。sort命令用于将文本文件内容加以排序,uniq命令用于检查及删除文本文件中重复出现的行列，-c按出现次数为行添加前缀，一般与sort命
·2022-12-14 14:58

grafana监控nginx日志

先展示下grafana的一张大图。看图还是比较炫酷的，那怎么才能够展示这样的大屏，咱们一步一步拆解用到组件：nginx，filebeat，logstash，elasticsearch，grafana流程图如下：1、nginx代理设置log_formatelklog'$remote_addr-$remote_user[$time_local]"$host"$server_port"$request"
冰帆<·2022-12-12 10:47

1、Kafka基本概念及专业术语介绍

基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、低延迟的实时系统、Storm/Spark流式处理引擎，web/nginx
苹水相峰·2022-12-10 20:55

windows清理nginx日志

nginx日志文件太大了，容易影响性能，可以直接删除，nginx会自动创建，但是有可能在直接删除的时候删除不了，nginx一运行又重新生成了。
我在学习呢·2022-12-07 00:39

log nginx 客户端请求大小_超详细！Nginx 日志配置实践

前言Nginx日志对于统计、系统服务排错很有用。Nginx日志主要分为两种：access_log(访问日志)和error_log(错误日志)。
Nic机长·2022-12-07 00:08

centos nginx日志文件太大，处理方案

公司服务器突然502错误，然后发现所有服务都没问题，最后发现硬盘满了，导致了nginx服务器写不了日志所以报了502错误，删除一些不用的文件后即可解决。通过df-h命令可以查看centos硬盘内存的一些详情查看具体文件/文件夹有多大，通过以下命令du-h--max-depth=1文件名/文件夹名#查看空间占用$df-h#定位Nginx$whichnginx/usr/local/nginx/logs
angen2018·2022-12-07 00:32

Nginx日志统一化

本系列故事纯属虚构，如有雷同实属巧合为了完成对Nginx服务器的日志分析，小B对Q公司的Nginx日志做了统一化要求。
「已注销」·2022-12-07 00:24

高并发场景大量TIME_WAIT导致虚拟机响应变慢

一、事件现象抢兑时，大量用户准点抢兑商品，后端nginx存在大量请求返回5**二、事件分析1、查看nginx日志发现nginx添加了检测模块，当后端tcp连接响应超时的话，会将故障节点移除集群checkinterval
riant110·2022-12-06 18:42

Kafka史上最详细原理总结

基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎，web/nginx
JIMC7788·2022-12-05 17:20

搭建LNMP实现分离

目录nginx理论nginx日志格式：log_formatnginx日志格式的变量nginx的location安装LNMP1.安装nginx2.安装mysql（mariadb）3.安装PHP应用安装搭建
大虾好吃吗·2022-12-04 11:05

【lnmp+ELK+Nginx+GeoIP】超详细新版ELK8.5.0解析收集Nginx日志并实现数据可视化与IP地址地图可视化教程-2022年11月版

超详细新版ELK8.5.0+lnmp1.9解析收集Nginx日志并实现数据可视化与IP地址地图可视化教程-2022年11月版前言1、基础环境和所需要的软件包1.1服务器配置（仅供参考）1.2所需要的软件包与下载方式方式一
海皇海皇吹·2022-11-24 12:11

记一次java后台服务不可用

一、现象客户反馈服务不可用二、排查1、查看java进程是否存在psaux|grepjava2、查看nginx日志[02/Aug/2022:12:10:32+0800]"POST/api/loginHTTP
jameshi·2022-11-15 18:39

解决Selinux阻止Nginx访问服务

问题开启Selinux后，Nginx非默认目录的时候会被Selinux阻止，看nginx日志为13:Permissiondenied2022/11/1201:18:19[error]8776#8776:
岑吾·2022-11-12 15:41

[渗透测试笔记] 52.告别初级，日薪2k的蓝队hw中级定级必备笔记

文章目录权限维持横向移动内网渗透域渗透溯源CS和msf联动提权工具免杀webshell管理工具常用windows命令DMZvenom和proxchains代理流程应急响应web日志Apache日志Tomcat日志IIS日志Nginx
H4ppyD0g·2022-10-14 22:12

使用Docker快速部署ELK分析Nginx日志实践

一、背景笔者所在项目组的项目由多个子项目所组成，每一个子项目都存在一定的日志，有时候想排查一些问题，需要到各个地方去查看，极为不方便，此前听说有ELK这种神器，搜索了一下，发现利用docker搭建似乎并不麻烦，于是进行了一番尝试，结果还比较顺利，将此过程完整记录下来，希望留给有需要的读者进行参考。二、操作概要服务安装与运行数据导入与校验绘图配置与展示三、服务安装与运行安装ELK有很多种方式，比如源
ludongguoa·2022-10-13 17:45

后台日志报500 Internal Server Error错误，但是日志里面没有报错信息的解决方法

500InternalServerError错误的解决方法接客户反馈，公司一个正在运行的项目中某些页面会有错误，但是没有错误信息，通过查看network发现，nginx报500InternalServerError错误，查看nginx
·2022-09-28 12:01

Kafka快速入门------kafka的基础知识

基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、Storm/Spark流式处理引擎，web/nginx
Peihj2021·2022-09-12 10:03

nginx.conf 配置文件结构说明

会涉及到nginx操作目录或文件的一些权限，默认为**nobody**userroot;worker进程工作数设置，一般来说CPU有几个，就设置几个，或者设置为N-1也行worker_processes1;nginx
一年春又来·2022-09-11 07:01

【Nginx】Nginx核心文件结构分析

，会涉及到nginx操作目录或文件的一些权限，默认为nobodyuserroot;worker进程工作数设置，一般来说CPU有几个，就设置几个，或者设置为N-1也行worker_processes1;nginx
大唐雨夜·2022-09-11 07:30

Linux操作文档——分析和排查系统故障（日志）

文章目录一、日志系统1、概念2、分类二、分析日志文件1、主要日志文件2、日志文件分析3、action(动作)日志记录的位置三、日志的采集1、一般日志采集2、Nginx日志采集3、日志切割四、排除系统启动类故障
增发真人·2022-09-08 00:59

Loki 收集Nginx日志以 grafana 可视化展示

背景通常用ELK来收集Nginx日志的，对于服务器较少的用elk则显得太重了，可以用loki+Promtail+grafana代替。Loki类似elasticsearch，用于存储。
戴国进·2022-09-03 08:37

Kafka原理入门到精通详解

基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎，web/nginx
卢子墨·2022-08-26 21:37

LAMP架构之Nginx（2）：nginx作为web服务器的管理和优化

四.nginx限流（1）控制并发数(2)控制访问请求数量（3）控制服务器单次可处理的请求数（4）控制传输带宽五.nginx浏览器端优化（1）自动索引功能（2）如何设置缓存的有效期（3）中文乱码六.nginx
王多鱼我是你二爷·2022-08-19 05:24

0基础就可以上手的Spark脚本开发-for Java

Python量化交易实战入门级手把手带你打造一个易扩展、更安全、效率更高的量化交易系统前言最近由于工作需要，要分析大几百G的Nginx日志数据。之前也有过类似的需求，但那个时候数据量不多。
虚幻私塾·2022-08-15 07:28

简单聊聊 Kafka

简单聊聊Kafka1、简介 Kafka是一种高吞吐量的、分布式的、基于zookeeper协调的发布订阅消息系统，常用于web/nginx日志、访问日志、消息服务等，Kafka起初由LinkedIn公司开发
daydreamed·2022-08-04 09:08

Kafka — 全面解析Kafka以及消息传输流程（一）

常见用于web/nginx日志、访问日志，消息服务等。主要应用场景是：日志收集系统和消息系统。
RachelHwang·2022-07-31 07:53

nginx转发遇到的问题

修改之前的配置：location/test/{proxy_passhttp://cc文件服务:9000/test/;proxy_set_headerHost$http_host;}查看nginx日志，发现状态码
孙嵓·2022-07-26 10:17

0基础就可以上手的Spark脚本开发-for Java

前言最近由于工作需要，要分析大几百G的Nginx日志数据。之前也有过类似的需求，但那个时候数据量不多。一次只有几百兆，或者几个G。
LingBrown·2022-07-16 11:00

kafka快速实战与基本原理详解

基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、Storm/Spark流式处理引擎，web/nginx
bijian-bijian·2022-07-13 08:47

七、shell脚本语言文本处理awk（三）

11.4、next11.5、system()11.6、打印结果写到文件11.7、管道连接shell命令12、awk的printf语句12.1、printf语句示例13、自定义函数14、需求案例14.1、NGINX
jiang0615csdn·2022-07-11 17:11

大数据之Kafka介绍

基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎，web/nginx
仔细是个好习惯·2022-06-05 11:31

nginx-基础知识

基础知识一反向代理二nginx的进程模型解析三nginx处理web请求机制解析四nginx核心配置文件nginx.conf4.1user4.2worker_processes4.3nginx日志级别4.4pid4.5
落花VS流水·2022-06-01 10:42
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他