日志清理

[问题已处理]-logrotate的daily任务执行成功但日志没有切割

logrotatedaily任务执行成功但日志没有切割昨天修改了几台nginx的日志清理规则。加入了logroate,但是同样的规则有些服务器进行了日志切割有些服务器没有进行日志切割。
爷来辣·2020-08-15 17:35

kafka日志配置

2、日志要有清理策略kafka日志路径配置：文件地址：bin/kafka-run-class.sh新增配置项：LOG_DIR="/data/kafka/logs"kafka日志清理策略：1、修改日志输出级别
省吾身·2020-08-15 03:26

CDH5.14定期清理指南

目录：1、将HDFS备份数降低2、删除无用HDFS数据和Hbase表格3、设置kafka的日志时间4、删除本机无用文件5、清理Trash回收站6、Balancer重新平衡7、Cloudera监控日志清理
北京小辉·2020-08-14 15:46

自动化运维落实到位的三点基础及常用工具对比

程序员眼中的自动化运维可能是可以自助申请资源，可以点点点的进行应用发布；应用运维人员眼中的自动化运维可能是自动的监控每个应用的状态有简单的问题就按照约定的动作去自愈，复杂的问题通知给我，我去处理或者是过期的日志清理等
songroom·2020-08-14 12:40

mysql日志清理

mysql>SHOWMASTERLOGS;此命令显示目前二进制日志的数目。然后mysql>PURGEMASTERLOGSTO‘binary-log.xxx’;mysql>flushlogs;mysql>resetmaster;除了命令中给出的日志之后的外，其他的二进制日志全部删除。具体如下:PURGEMASTERLOGSPURGE{MASTER|BINARY}LOGSTO‘log_name’PUR
build_thinking·2020-08-14 09:40

mongodb优化

文章目录查询优化：字段优化、加入索引MongoDB连接内存优化和连接数优化控制WiredTiger引擎使用内存上限日志清理查询优化：字段优化、加入索引库名:lx创建索引:db.lx.createIndex
考古学家lx·2020-07-30 21:26

mysql 二进制日志 BINARY LOG 清理

关键字：mysql、log、二进制日志、二进制文件、log日志清理、binlog日志MySQL日志没有做优化切割和日期限制的话，日志文件会不断的生成，越来越大越来越多，知道撑爆磁盘内存为止方法一、举例说明
ぃ小小宇宙·2020-07-30 04:39

日志清理脚本-V0.0.3（增加多目录清理、正则表达式匹配、调试模式；部分细节优化）

需求背景解决某些中间件或者应用日志无法自动清理的情况，比如：Nacos的access日志清理，临时目录文件清理等。
蒋李恒·2020-07-29 13:00

生产环境日志清理脚本

一、需求生产上有40多个微服务部署的应用，每个应用都会产生日志，随着时间的增长，日志量不断增大，现需要清理。有两个重要的应用日志需保留90天，其它应用保留20天。二、模拟产生日志文件[root@ansible-awx~]#morefile_create.sh#/bin/bashforkin{1..10}domkdir-p/tmp/file_log/log_dir"$k"foriin{03..06}
loong576·2020-07-17 22:09

oracle各类日志清理

oracle各类日志清理(一般oracle软件目录约10G左右)一般先进$ORACLE_BASE目录，查看哪个目录占用较大空间，并层层深入，定位到占用较大的目录，判断文件类型并清理。
cuankun4601·2020-07-15 21:15

Kafka日志清理之Log Deletion

欢迎支持笔者新作：《深入理解Kafka:核心设计与实践原理》和《RabbitMQ实战指南》，同时欢迎关注笔者的微信公众号：朱小厮的博客。欢迎跳转到本文的原文链接：https://honeypps.com/mq/log-deletion-of-kafka-log-retention/Kafka将消息存储在磁盘中，为了控制磁盘占用空间的不断增加就需要对消息做一定的清理操作。Kafka中每一个分区par
朱小厮·2020-07-13 15:14

情景linux--如何解决服务器日志过多导致的磁盘空间不足？

这位同事把日志清理了，并请群里的相关人员看下是否需要重启各自的服务。
软件测试技能栈·2020-07-12 15:39

nginx日志清理的自动任务

一、创建日志切分脚本文件vi/data/aikube/scripts/cut_nginx_log.sh内容为：#/bin/bash#取前一天:要求计划任务应该在0点之后执行yesterday=`date-d'-1day'+%Y-%m-%d`#分割后的日志保存路径(结尾不加斜杠)log_bak_path='/data/aikube/nginx-logs'#nginx日志文件路径(结尾不加斜杠)ng_
radish.-·2020-07-12 14:06

centos7-nginx 日志清理

nginx日志文件需要手动清理分割，因此写个脚本实现自动化；创建脚本文件clear_log.shcd/usr/local/nginx/sbinviclear_log.sh输入如下内容#!/bin/bash#先复制原来的错误日志文件，请根据自己实际的日志路径填写cp/usr/local/nginx/logs/error.log/usr/local/nginx/logs/error-$(date-d"
sunzq55·2020-07-12 11:26

Centos7搭建Java环境，并设置项目自启动脚本、定时数据库备份/日志清理脚本

开发环境下载，提供nginx-1.12.2、jdk-8u162、Jenkins下载建个文件夹，作为开发环境存放路径cd/usrmkdirdevelopmentEnvironmentcd/一.java1.解压包tar-zxvfjdk-8u162-linux-x64.tar.gz-C/usr/developmentEnvironment2.配置环境变量vim/etc/profileexportJAVA
活好女·2020-07-11 04:37

spark 日志清理问题

jar包在spark的standalone的cluster模式下执行报错如下：2018-06-0416:08:37ERRORClientEndpoint:70-Exceptionfromclusterwas:java.io.IOException:Failedtocreatedirectory/usr/lib/spark/work/driver-20180604160832-0001java.io
shuai_fan·2020-07-10 02:59

db2 日志清理命令相关

1、归档日志当db2数据库使用归档日志（通过修改参数LOGARCHMETH1可以改成是归档还是循环日志）的时候，日志数量定期不清理，将会越积越多，最后必定会磁盘爆满，访问数据库出问题。归档日志分为三种活动日志、联机存档日志和脱机存档日志。1)活动日志:该日志包含尚未提交或回滚的事务单元的相关信息，以及已提交但尚未写入数据库文件的事务的信息。2)联机存档日志:活动日志中所有改动对正常处理已不需要，即
wxwpxh·2020-07-09 01:55

Docker容器日志清理

docker容器导致主机磁盘空间满了如何清理Docker容器日志？如何找出docker容器日志文件容器日志一般存放在/var/lib/docker下面，可使用如下命令查看各个日志的文件大小ls-lh$(find/var/lib/docker/containers/-name*-json.log)如何清理日志如果docker容器正在运行，那么使用rm-rf方式删除日志后，通过df-h会发现磁盘空间并
yshenhn·2020-07-07 14:29

ORACLE 定时清理归档日志详细过程

1、RM方式清理归档日志清理归档日志，可以人为的删除已经归档好的日志文件，然后再调用rman里面RMAN>crosscheckarchivelogall;来去数据库里面删除归档记录；也可以通过ra
cedar0007·2020-07-07 04:06

《Pc客户端开发经理之路》直播通知

分享内容：详细聊一聊FlamingoClient（https://github.com/balloonwj/flamingo）整体框架界面库网络框架与通信协议注册与登录功能自动升级功能日志类（日志逻辑、日志清理逻辑
analogous_love·2020-07-07 03:23

spark中日志清理

spark开启history-server之后，app日志会保存在制定的目录下，若yarn开启日志收集，也需要进行app-logs的自动清理##yarn日志收集yarn.log-aggregation.retain-seconds=1209600yarn.log-aggregation.retain-check-interval-seconds=86400##spark-history日志spar
xubc·2020-07-05 16:44

Linux 系统 /var/log/journal/ 垃圾日志清理

CentOS系统中有两个日志服务，分别是传统的rsyslog和systemd-journalsystemd-journald是一个改进型日志管理服务，可以收集来自内核、系统早期启动阶段的日志、系统守护进程在启动和运行中的标准输出和错误信息，还有syslog的日志。该日志服务仅仅把日志集中保存在单一结构的日志文件/run/log中，由于日志是经历过压缩和格式化的二进制数据，所以在查看和定位的时候很迅
阳光岛主·2020-07-05 13:35

Linux系统内存日志清理

每当服务器的日志太多，导致内存不足，影响我们正常访问，下面三个步骤方便我们快速定位服务器中分区内存的不足的原因：free-h/-m:可以查看空间使用的大小，可利用的空间还有多少；df-l:发现可以分区硬盘是否爆满了，于是就知道内存使用问题；du-sh*:一路检查当前分区下的那些文件或者目录的内存占领太多了，过多不必要的代码文件日志可以定期删除或者手动删除；对于Tomcat里的日志和mysql的日志
Deram_川少·2020-07-05 04:35

Tableau 技巧（81）：服务器日志清理和级别设置

本期《举个栗子》，阿达要给大家分享的Tableau技巧是：服务器日志清理和级别设置。为方便学习，我们将
阿达_优阅达·2020-07-02 12:54

MySql 大数据处理 性能提升 日志清理

对于Oracle数据库truncatetable后空间没有释放解决方法：查询数据库表使用情况，发现一张无用的表，占60G，查询语句如下。www.2cto.comselectsegment_name,sum(bytes)/1024/1024/1024fromdba_segmentswhereowner='TEST'groupbysegment_nameorderby2desctruncatetabl
Alex许恒·2020-06-30 03:27

docker 日志清理，限制日志数量大小

限制大小，在得到服务器时，容器创建前，设置全局限制。#vim/etc/docker/daemon.json{"registry-mirrors":["http://f613ce8f.m.daocloud.io"],"log-driver":"json-file","log-opts":{"max-size":"500m","max-file":"3"}}设置完成，执行systemctldaemon
a393060727·2020-06-29 09:00

Kafka 日志清理机制——LogCompact（七）

文章目录一.日志清理是干什么的？
疯狂哈丘·2020-06-27 06:12

ELK日志收集系统介绍及过期系统日志清理

简介使用ELK做系统服务日志的收集，随着使用的时间和用户量的增长，ES的存储压力会越来越大，而一些过期日志又没什么参考价值，如果你们系统的服务日志索引名也是按日期去切割的，你就可以参考一下本文的清理ES索引脚本本文将介绍如何规划ES索引名以及怎样清理过期索引信息，内容有ELK日志系统的介绍服务索引名命名规则日志收集方式说明与示例自动清理索引脚本定时自动清理任务原文：地址1、ELK日志系统的介绍EL
淡远·2020-06-27 01:03

Oracle主库、备库redo日志管理

文章目录官方参考：1、添加日志组以及日志成员3、删除日志组或成员3.1、日志的重定位及重命名3.2、清空日志文件组3.3、删除日志成员3.4、删除日志组5、删除单实例数据库多余节点的日志组5、归档管理6、疑难日志清理案例
独孤清扬@AlbertCQY·2020-06-26 21:02

渗透测试常用方法总结

1渗透流程信息收集漏洞验证/漏洞攻击提权，权限维持日志清理其他1信息收集一般先运行端口扫描和漏洞扫描获取可以利用的漏洞。
MzHeader·2020-06-26 00:20

centos7 日志清理

使用CentOS系统的时候，经常会遇到系统日志文件非常大的情况，如果直接删除，会导致日志错误，不再生成日志，这时，我们可以使用下面的方法清空日志。cat/dev/null>/var/log/boot.logcat/dev/null>/var/log/btmpcat/dev/null>/var/log/croncat/dev/null>/var/log/dmesgcat/dev/null>/var/
adeng2016·2020-06-25 17:36

【docker】docker 运行日志清理脚本，保留ELK最新30天日志

#catclean_log.sh###################################################################!/bin/sh#删除ELK30天前的日志whiletruedoDATE=`date-d"30daysago"+%Y.%m.%d`Xs=`curl-s-XGEThttp://xx.xx.xx.xx:9200/_cat/indices?
HunterMichaelG·2020-06-24 14:41

日志清理脚本

需求背景解决某些中间件或者应用日志无法自动清理的情况，比如：Nacos的access日志。变更记录Version0.0.12020/06/05删除N天前的日志文件，仅删除匹配".log"的日志文件选项shclear-logs.sh[options]...-p删除日志的路径，必输参数-d删除N天前的日志文件，即保留N天日志，默认：7--help帮助信息-v,--version版本信息示例1.清理7天
蒋李恒·2020-06-08 18:00

12、Zookeeper的监控与运维

一、Zookeeper集群使用TaoKeeperhttps://github.com/albaba/taokeeper二、运维1、数据与日志清理工具(1)开启参数自动清理autopurge.snapRetainCount
yannhuang·2020-04-09 06:30

sql server挂起处理以及事务日志清理

如果你的数据库出现挂起,你可以执行下边代码(将test换成你的数据库名):USEmasterGOALTERDATABASEtestSETSINGLE_USERGOALTERDATABASEtestSETEMERGENCYGODBCCCHECKDB(test,REPAIR_ALLOW_DATA_LOSS)goALTERDATABASEtestSETONLINEGOALTERDATABASEtestS
屁桃·2020-03-17 12:00

Mysql二进制日志管理脚本

二进制日志清理：mysql提供expire-logs-days变量用以清理过期日志。默认为0表示不清理，最大值为99天。
词穷又词贫·2020-03-14 20:27

linux删除文件空间不释放问题解决

目录场景描述原因解决方法在线清空文件场景描述某天，收到Prometheus报警，生产中某台机器出现磁盘空间不足报警，该台服务器是mysql其中一台从库，远程登录到该服务后，排查磁盘空间的原因，发现mysql日志文件过多，于是清空日志文件，但是日志清理后
jasonminghao·2020-03-12 00:00

Kafka的日志清理-LogCleaner

这里说的日志,是指Kafka保存写入消息的文件;Kafka日志清除策略包括中间:基于时间和大小的删除策略;Compact清理策略;我们这里主要介绍基于Compact策略的LogClean;Compact策略说明Kafka官网介绍:Logcompaction;Compact就是压缩,只能针对特定的topic应用此策略,即写入的message都带有Key,合并相同Key的message,只留下最新的m
扫帚的影子·2020-03-09 10:27

Linux-计划任务

cron任务分类两类系统cron任务：主要用于系统自身的维护（比如写缓存数据到硬盘、日志清理等），手动编辑/etc/crontab维护，一般不建议修改。用户cron任务：使用crontab命令维护。
yuanzicheng·2020-03-01 13:44

轻量级分布式日志清理（脚本）系统设计

写在之前最近轮到我值班了，值班的时候总是有需要立马清理的日志文件或其它事件。你可能会问：“怎么不用定时脚本呢？”事实情况是，我们已经采用了定时脚本了。可是，有的时候，日志来的飞快，定时脚本还没起作用呢，就需要清理了。随着机器的越来越多，这就更是一个问题了。现在，我们所有模块的集群加起来，起码有60台机器了。如果这时候需要立马在服务器上搞个神马，想吐血的心都有了吧；也想过借助一些别的工具去实现，比如
大道至简_Andy·2020-03-01 02:15

Oracle归档日志清理（AIX）

1.oracle数据库管理员登陆AIX服务器2.指定数据库实例$exportORACLE_SID=实例名称3.进入RMAN$rman4.连接数据库RMAN>connecttargetsys/password5.查看归档日志状态RMAN>listarchivelogall6.root用户重新登陆服务器，根据归档日志状态找到日志文件目录删除日志$chmod777*;rm*-rf;7.更新归档日志RMA
gongweixin2018·2020-02-23 16:50

kafka日志配置

2、日志要有清理策略kafka日志路径配置：文件地址：bin/kafka-run-class.sh新增配置项：LOG_DIR="/data/kafka/logs"kafka日志清理策略：1、修改日志输出级别
省吾身1·2020-02-08 18:12

app日志清理压缩

#!/bin/bash#获取昨天时间，时间格式:2019-07-05date1=$(date-d-1days+%F)#定义服务列表，每项代表一个服务app=('app1''app2''app3''app4')#遍历服务列表foriin${app[@]}do#定义日志的路径，必须和实际的日志路径保持一致dir=/home/centos/$i/logs#切换到指定服务日志的目录下cd$dir#将cat
Rooot·2020-02-06 13:05

docker容器日志清理

如何清理Docker容器日志？如何找出docker容器日志文件容器日志一般存放在/var/lib/docker下面，可使用如下命令查看各个日志的文件大小find/var/lib/docker/containers/-name*-json.log|xargsdu-sh(直观)ls-lh$(find/var/lib/docker/containers/-name*-json.log)如何清理日志如果d
平面小狮子·2020-01-16 17:20

Oracle需要清理的日志

oracle各类日志清理(一般oracle软件目录约10G左右)一般先进$ORACLE_BASE目录，查看哪个目录占用较大空间，并层层深入，定位到占用较大的目录，判断文件类型并清理。
暴走的馒头·2020-01-15 11:00

基于bash shell脚本制定灵活的trimlog日志清理策略

进一步排查后确认前同事写的trimlog脚本在某些服务器上执行定时任务时出现了异常，review后发现代码逻辑本身没有问题，主要由于cronjob在执行date参数时没有使用转义字符导致，不过trimlog.sh这个日志清理脚本代码结构清晰易读
王奥OX·2019-12-19 20:37

docker 容器日志清理方案

本文为转载，原文：docker容器日志清理方案dockerdocker容器日志清理方案找出容器日志在linux上，容器日志一般存放在/var/lib/docker/containers/container_id
ChainZhang·2019-12-12 23:31

云数据库MongoDB版日志清理策略和compact命令详解

1、问题描述：今天看到公司mongodb的oplog有点大，看到云数据库MongoDB版日志清理策略。MongoDB数据库在长期频繁地删除/写入数据或批量删除了大量数据，将产生很多物理空间碎片。
Tse先生·2019-12-11 15:00

消息队列——Kafka基本使用及原理分析

Kafka二、Kafka的基本使用1.单机环境搭建及命令行的基本使用2.集群搭建3.JavaAPI的基本使用三、Kafka原理浅析1.topic和partition的存储2.消息分段及索引查找原理3.日志清理策略
夜勿语·2019-11-22 22:00

crontab的使用方法介绍

系统任务调度：系统周期性所要执行的工作，比如写缓存数据到硬盘、日志清理等。在/etc/crontab文件，这个就是系统任务调度的配置文件。
Aoutlaw·2019-10-18 14:42
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他