运维自动化日志分析日志管理

大数据项目【大型电商日志分析系统】

尚学堂13年来积累的海量的教学项目和课程，堂粉们的硬盘都塞的慢慢的，1T不够还得再升级，硬盘都要吃不消了。今天我们再公布一个大数据项目，为想找到大数据工作的堂粉提供弹药，把堂粉们个个喂得白白胖胖。现代社会人人都在进行电商购买，每一个用户的浏览，点击，收藏，对比，购买，评价等行为都会被电商公司所记录下来，每天产生的数据量非常庞大，一般在TB，甚至PB级别。对于电商公司而言，用户的这些行为数据是非常宝
编程自习室·2023-08-27 08:57

Docker 容器日志管理

Docker日志分为两类：Docker引擎日志(也就是dockerd运行时的日志)，容器的日志，容器内的服务产生的日志。一、Docker引擎日志Docker引擎日志一般是交给了Upstart(Ubuntu14.04)或者systemd(CentOS7,Ubuntu16.04)。前者一般位于/var/log/upstart/docker.log下，后者我们一般通过journalctl-udocker
___n·2023-08-27 07:56

ELK日志分析系统

学习目标：ELK日志分析系统学习内容：1.应用/需求前景为什么要用ELKELK简介学习时间：提示：这里可以添加计划学习的时间例如：1、周一至周五晚上7点—晚上9点2、周六上午9点-上午11点3、周日下午
一只ikun而已·2023-08-27 05:23

Appium自动化测试（十六）日志管理

日志级别日志一般定位的级别如下：debug最低CRITICAL级别如何使用DEBUG调试信息，也是最详细的日志信息INFO证明事情按预期工作WARNING表明发生了一些意外，或者不久的将来会发生问题（如‘磁盘满了’）。软件还是在正常工作ERROR由于更严重的问题，软件已不能执行一些功能了CRITICAL严重错误，表明软件已不能继续运行了首先我们日志需要按照info、debug、error等级别来进
Mwyldnje2003·2023-08-27 04:57

Apache Doris 2.0.0 版本正式发布：盲测性能 10 倍提升，更统一多样的极速分析体验

在2.0.0版本中，ApacheDoris在标准Benchmark数据集上盲测查询性能得到超过10倍的提升、在日志分析和数据湖联邦分析场景能力得到全面加强、数据更新效率和写入效率都更加高效稳定、支持了更加完善的
SelectDB技术团队·2023-08-26 19:08

Android系统稳定性Log分析

各种常见问题:1、应用冻结/崩溃App这里问题比较常见，表现的现象为ANR、Crash、OOM等情况，可以通过Log日志分析：1.捕获通用日志logcatlog(main
momxmo·2023-08-26 19:54

思乐直播系统短视频直播系统源码 直播短视频平台系统APP源码多功能后台系统

整个系统具备非常完善、丰富的功能，后台系统具有会员管理、直播管理、短视频管理、音乐管理、礼物管理、贵族管理、资金管理、举报管理、文章管理、日志管理、平台管理、靓号管理、活动管理功能，可通过后台系统对直播
百创科技·2023-08-26 17:55

ossim mysql密码_OSSIM 4.1安装详解

OSSIM4.1安装详解在今年出版的畅销书《Unix/Linux网络日志分析与流量监控》一书中主要为大家介绍了开源安全运维利器-OSSIM，很多同行对Ossim表示了极大关注,纷纷来信咨询如何部署和使用这套系统
weixin_39521835·2023-08-26 09:58

Vmware workstation12里如何正确快速安装可视化IDS系统Security Onion（图文详解）

SecurityOnion基于Ubuntu，包含了入侵检测、网络安全监控、日志管理所需的Snort、Suricata、Bro、OSSEC、Sguil、Squert、ELSA、Xplico、NetworkMiner
weixin_34085658·2023-08-26 09:28

ossim mysql密码_OSSIM 4.1安装-阿里云开发者社区

OSSIM4.1安装在今年出版的畅销书《Unix/Linux网络日志分析与流量监控》一书中主要为大家介绍了开源安全运维利器-OSSIM，很多同行对Ossim表示了极大关注,纷纷来信咨询如何部署和使用这套系统
優嫿·2023-08-26 09:28

OSSIM 4.1安装

OSSIM4.1安装在今年出版的畅销书《Unix/Linux网络日志分析与流量监控》一书中主要为大家介绍了开源安全运维利器-OSSIM，很多同行对Ossim表示了极大关注,纷纷来信咨询如何部署和使用这套系统
weixin_34006468·2023-08-26 09:58

OSSIM安装与驱动问题

在《Unix/Linux网络日志分析与流量监控分析》讲过OSSIM平台是一套基于DebianLinux的系统，但是IBM，HP，DELL等厂家的多数服务器对DebianLinux系统支持的并不太好，所以磁盘和网卡的驱动通常都是安装完系统之后再手动
OpenSource SIM·2023-08-26 09:57

如何从“监控”到“可观测性”？

在这种情况下，传统的手动日志分析和故障排查方法已经无法满足快速定位和解决问题的需求。因此，可观测性越来越成为一种必不可少的技术手段，帮助运维人员
广通优云·2023-08-26 06:04

MySQL日志管理

1.表空间1.1说明独立表空间:5.6开始的默认表空间,一个表一个ibd文件,存储数据行和索引.*****共享表空间:5.5默认的模式,所有表的行和索引都存储到ibdata1说明:从5.6开始,不再使用共享表空间模式5.6版本数据字典信息+UNDO+tmp5.7版本把tmp独立了8.0版本把UNDO独立1.2表空间迁移*****(1)创建和原表结构相同的表(2)新建表的ibd删除altertabl
开化者·2023-08-26 05:44

服务器基线加固脚本_安全服务之安全基线及加固（一）Windows篇

此文章为连载文章0x01前言安全服务工程师大家应该都知道，对于他的岗位职责你可能会说不就是渗透测试啊、应急响应嘛.....实际上正式一点的企业对于安服的要求是包括了漏洞扫描、安全基线检查、渗透测试、安全加固、日志分析
weixin_39633113·2023-08-26 03:28

shell 最使用实战整理

内存过高的进程查看网卡实时流量监控批量服务器磁盘利用率--1.批量就需要免密登录--2.expec免交互输入密码检测网站运行正常目录文件变化和同步mysql备份监控MySQL主从同步状态Nginx访问日志分析自动屏蔽高访问
ketchup·2023-08-25 15:59

怎样做好日志分析？

首先我们要知道日志分析是指检查并理解计算机生成的日志消息，例如日志事件或审计来跟踪记录，通过日志分析可以帮助您诊断和解决计算机系统中的问题，以及监视系统性能和安全性。
Zoho_Manager·2023-08-25 11:13

企业运维之 ELK日志分析平台（Elasticsearch）

ELK日志分析平台--Elasticsearch的介绍与安装1.ELK介绍2.Elasticsearch简介3.Elasticsearch的部署3.1单机模式3.2Elasticsearch集群3.3cerebro
123坤·2023-08-25 05:20

ABP开发框架前后端开发系列---（8）ABP框架之Winform界面的开发过程

1、回顾审计日志和登陆日志管理界面前面介绍了如何扩展审计日志应用服务
weixin_30242907·2023-08-24 23:11

关于Nginx的一些脚本

文章目录目录文章目录前言一、Nginx访问日志分析脚本二、Nginx访问访问日志按天切割总结前言脚本经常用于自动化特定任务。
勤奋上进的兔子·2023-08-24 22:28

clickonce安装目录查看

日志分析：ClickOnce在更新失败时会生成详细的日志文件。检查这些日志以获得有关失败原因的更多信息。日志通常位于%userprofile%\LocalSettings\Apps\2.0\下。
_oP_i·2023-08-24 11:43

pm2入坑详解

5、简单日志管理pm2可以收集
leonnew·2023-08-24 10:37

sqoop export导入任务失败但部分数据入库成功能问题

本次失败登录Azkaban错误日志分析，核心错误Jobfailedastasksfailed.failedMaps:1failedReduces:0但是Azkaban页面错误信息显示不是非常详细。
全栈运维·2023-08-24 09:17

spark的eventLog日志分析

查找满足指定条件的app_id查询条件:表名、时间、节点名时间限定:最好适当放大,不知道什么原因有点不准eventLog的存放路径:spark.history.fs.logDirectory1.spark-sql先限定时间段;数据是逐行读入的,但app_id要按整个文件过滤,按每个条件打标;按app_id粒度聚合,查找符合条件的数据;--设定时区setspark.sql.session.timeZ
盛源_01·2023-08-23 17:10

MySQL-lesson06-日志管理

MySQL-lesson06-日志管理1.错误日志(log_error)1.1作用记录启动\关闭\日常运行过程中,状态信息,警告,错误1.2错误日志配置默认就是开启的:/数据路径下/hostname.err
学无止境_9b65·2023-08-23 05:37

log4j2 日志动态记录git参数${git.commit.id.abbrev}(一)

maven项目(非springboot项目)日志记录版本之前做过一个项目，java项目的log4j日志管理中，记录当前程序提交的git；具体的做法1、在pom中引入对应的插件pl.project13.mavengit-commit-id-plugin2.2.5get-the-git-infosinitializerevision
秋元_92a3·2023-08-22 17:30

怎样做好日志分析？

首先我们要知道日志分析是指检查并理解计算机生成的日志消息，例如日志事件或审计来跟踪记录，通过日志分析可以帮助您诊断和解决计算机系统中的问题，以及监视系统性能和安全性。
·2023-08-22 16:56

Mongo性能分析工具

目录1.mongostat--状态检测工具2.mongotop--读写操作耗时分析3.慢日志分析和优化3.1.开启慢日志3.1.1.通过命令开启3.1.2.通过配置文件开启3.1.3.启动命令配置3.2
彼岸花@开·2023-08-22 12:07

Linux journalctl命令详解（journalctl指令）（systemd服务默认日志管理工具）

文章目录LinuxJournalctl命令详解1.Journalctl简介2.Journalctl基础使用3.过滤日志条目4.时间戳和日志轮转5.高级应用6.`journalctl--help`指令文档英文中文注意事项journal日志不会将程序输出的空行显示，日志会被压缩得满满当当。journal日志不会自动持久化，重启系统后，历史日志将被清除。可参考journal日志持久化配置。总结参考资料L
Dontla·2023-08-22 12:14

java互联网架构师视频教程

fastdfs集群进行整合，实现文件的上传下载等功能055、FastDFS集群环境搭建+Nginx缓存、负载均衡等整合054、FastDFS简介、环境搭建与使用053、Nginx入门简介、虚拟主机配置、日志分析
陈南云·2023-08-22 10:14

小白到运维工程师自学之路 第七十六集 （kubernetes之EFK构建日志分析平台）

一、概述1、Elasticsearch产品介绍Elasticsearch是一个Restful风格的、开源的分布式搜索引擎，具备搜索和数据分析功能，它的底层是开源库ApacheLucene。Elasticsearch具有如下特点。一个分布式的实时文档存储，每个字段可以被索引与搜索；一个分布式实时分析搜索引擎；能支撑上百个服务节点的扩展，并支持PB级别的结构化或者非结构化数据。2、Fluentd工作原
Silver彡Wolf·2023-08-22 06:54

日志管理三件套～程序员高薪必备

日志三件套是指常用于日志管理的三个工具：ELK（Elasticsearch、Logstash、Kibana）。
今晚务必早点睡·2023-08-22 05:50

云曦暑期学习第四周——流量、日志分析

1日志分析1.1Whatis日志日志，是作为记录系统与服务最直接有效的方法。在日志中，可以发现访问记录以及发现攻击线索。日志分析也是最常用的分析安全事件所采用的途径。
木…·2023-08-21 23:11

[Android Framework] 系统 ANR 问题排查实践小结

文章目录背景卡顿的定义：卡顿分类：卡顿原因汇总ANR出现的原理应用层导致ANR系统导致ANR日志抓取traces.txt是如何生成的分析思路与验证相关日志分析data/anr/traces.txt其他分析思路如何分析生成的
小羊子说·2023-08-21 14:34

ES基础及面试题

支持结构化查询和全文检索等多种方式2.ES的实际用途1.全文搜索和信息检索2.日志分析，例如埋点分析3.监控和指标分析，网络流量，服务器性能等4.内容推荐，算法推荐客户想要的内容3.ES的数据存储方式是什么
马丁•路德•王·2023-08-21 08:36

Reverse DNS

通过MR查询HBase时，使用官网提供的查询模板，提交任务时存在问题，提交任务之前等待时间过长，通过DEBUG日志分析（exportHADOOP_ROOT_LOGGER=DEBUG,console）后得出
Nirvana丶_·2023-08-21 07:03

kubeasz在线安装K8S集群单master集群（kubeasz安装之二）

它支持快速部署高可用的Kubernetes集群，支持容器化部署，可以方便地扩展集群规模，支持多租户，提供了强大的监控和日志分析功能，可以大大简化Kubernetes的部署和管理过程，提高系统的可靠性和弹性
qq_14910065·2023-08-21 05:22

【Ubuntu】简洁高效企业级日志平台后起之秀Graylog

简介Graylog是一个用于集中式日志管理的开源平台。在现代数据驱动的环境中，我们需要处理来自各种设备、应用程序和操作系统的大量数据。Graylog提供了一种方法来聚合、组织和理解所有这些数据。
KnightYangHJ·2023-08-20 18:28

开源后台管理系统Geekplus Admin

mybatis持久层框架，redis缓存，shiro认证授权框架，freemarker模版在线生成代码，websocket消息推送等，后台管理包含用户管理，角色管理，菜单权限管理，部门组织管理，通知管理，日志管理
双普拉斯·2023-08-20 09:58

【真实案例】解决后端接口调用偶尔超时问题

文章目录背景分析代码分析二次日志分析排查Gateway服务解决解决办法1：添加重试机制解决办法2：优化网关内存分配解决办法3：调整OOM策略背景项目从虚拟机迁移到k8s云原生平台（RainBond）后，
94甘蓝·2023-08-20 05:12

Elasticsearch:图解写入流程

一、Elasticsearch概述：Elasticsearch是一个功能强大、性能高效、易于使用和扩展的分布式搜索和分析引擎，已被广泛应用于日志分析、企业搜索、电子商务等领域。
二狗plus·2023-08-20 05:03

聊聊使用错误采集平台sentry踩到的坑

前言sentry简介Sentry是一款专业的企业级错误跟踪和日志分析工具，旨在帮助开发人员、管理员和产品经理跟踪、分析和解决应用程序错误和性能问题。
linyb极客之路·2023-08-19 18:42

Spring源码深度解析二(AOP)

书接上文9.AOP源码深度剖析概述AOP（AspectOrientProgramming）：面向切面编程；用途：用于系统中的横切关注点，比如日志管理，事务管理；实现：利用代理模式，通过代理对象对被代理的对象增加功能
Allen-xs·2023-08-19 15:20

Logging Operator - 优雅的云原生日志管理方案 (三)

前文：LoggingOperator的文章去年拖更很久了，原以为不会再有进度，不过最近在自己的KubeGems项目中遇到处理日志可观察性部分的需求时，又重新研究了下它，于是有了本系列的第三篇。LoggingOperator是BanzaiCloud下开源的一个云原生场景下的日志采集方案。它在2020年3月的时候经过重构后的v3版本，底层凭借高效的fluentbit和插件丰富的flunetd，Logg
KubeGems云原生·2023-08-19 14:14

【Ubuntu】从Graylog到Grafana Loki：构建更强大的网络设备管理和监控系统

为了寻找一个更可行的解决方案，我们决定将注意力转向另一个强大的日志管理系统
KnightYangHJ·2023-08-19 08:34

运维自动化与Cobbler服务部署

运维自动化与Cobbler服务部署一.Cobbler简介1.1.简介1.2.Cobbler的下属服务1.3.工作流程二.Cobbler安装2.1.安装epel源2.2.安装Cobbler及其相关的服务和组件三
墨烦信息·2023-08-19 06:20

基于SpringBoot进销存ERP管理系统，源代码分享

技术框架:核心框架：SpringBoot2.0.0持久层框架：Mybatis1.3.2日志管理：Log4j2.10.0J
淘源码d·2023-08-19 02:26

【BASH】回顾与知识点梳理（三十六）

认识与分析登录档36.1什么是登录档CentOS7登录档简易说明登录档的重要性Linux常见的登录档档名登录档所需相关服务(daemon)与程序CentOS7.x使用systemd提供的journalctl日志管理登录档内容的一般格式
壹只菜鸟·2023-08-18 22:45

干货：ANR日志分析全面解析（内含经典堆栈举例）

作者：云台关键词：Android、ANR、卡顿、日志分析摘要：业界在如何解决和避免ANR问题上已经有较多博文，但是在如何分析ANR日志上很少有全面完备的阐述。
Mr云台·2023-08-18 21:10

Kubernetes+EFK构建日志分析平台

目录Elasticsearch产品介绍Fluentd工作原理Kibana产品介绍一、环境准备前三个主机都要操作1、主机初始化配置2、部署docker环境2、部署kubernetes集群2.1、组件介绍2.2、配置阿里云yum源2.3、安装kubeletkubeadmkubectl2.4、配置init-config.yaml2.5、安装master节点2.6、安装node节点2.7、安装flanne
学习新鲜事物·2023-08-18 15:28
上一页 24 25 26 27 28 29 30 31 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他