运维自动化日志分析日志管理

ELK+kafka+filebeat企业内部日志分析系统

1、组件介绍1、Elasticsearch：  是一个基于Lucene的搜索服务器。提供搜集、分析、存储数据三大功能。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTfulweb接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便。2、Logstash:
小李不怕黑·2023-11-27 14:47

解密Spring Cloud微服务调用：如何轻松获取请求目标方的IP和端口

目的SpringCloud线上微服务实例都是2个起步，如果出问题后，在没有ELK等日志分析平台，如何确定调用到了目标服务的那个实例，以此来排查问题效果可以看到服务有几个实例是上线，并且最终调用了那个实例考虑到
架构成长指南·2023-11-27 14:17

全面的日志监控管理工具

集中监控这些日志源有助于防止数据威胁和网络攻击，综合日志监控解决方案可以自动执行日志管理流程，通过关联日志来识别恶意活动，并帮助满足IT合规性要求。
ManageEngine卓豪·2023-11-27 00:35

ELK+kafka+filebeat企业内部日志分析系统

1、组件介绍1、Elasticsearch：  是一个基于Lucene的搜索服务器。提供搜集、分析、存储数据三大功能。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTfulweb接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便。2、Logstash:
孤雅738·2023-11-26 21:49

必读经典项目，web开发框架renren-fast项目解读

学习简单、轻量级、易扩展；使用SpringBoot、Shiro、MyBatis、Redis、Bootstrap、Vue2.x等框架，包含：管理员列表、角色管理、菜单管理、定时任务、参数管理、代码生成器、日志管理
MarkerHub·2023-11-26 17:42

关于Logback+MyBatis日志输出的一些思考

IT男一.环境MyBatis-Plus：3.4.3.4SpringBoot：2.5.8Logback：1.2.9（SpringBoot自动依赖）二.问题sql语句和业务日志合在一起，sql太多会影响业务日志分析
EverSpring007·2023-11-26 16:19

JVM虚拟机：G1垃圾回收器的日志分析

本文重点本文我们将学习G1垃圾回收器的日志使用执行命令java-Xms20M-Xmx20M-XX:+PrintGCDetails-XX:+UseG1GC类名分析前面我们学习了G1垃圾回收器，它的回收有三种可能：YGCFGCMixedGCGCpause表示STW,Evacuation表示复制对象，young表示年轻代，如果后面没有initial-mark，那么此时它就是YGC，但是有，那么表示它是m
幻风_huanfeng·2023-11-26 14:50

Linux 基础-上篇：文件、用户、权限、文件系统管理和磁盘配额

Linux是什么二、文件管理与vim文本编辑器三、用户与权限管理四、文件系统管理与磁盘配额中篇：五、正则表达式与文件格式化处理六、ShellScripts与工作排程七、进程管理与SELinux八、系统服务与日志分析下篇九
钟·D·鬼道·2023-11-26 05:26

大数据---离线数仓实战项目(一)

离线数仓实战---网站流量日志分析系统一、网站流量日志分析背景1.1、网站分析的意义1.2、如何进行网站分析1.2.1、网站流量质量分析（流量分析）1.2.2、网站流量多维度细分（流量分析）1.2.3、
静_步·2023-11-26 05:41

PostgreSQL技术大讲堂 - 第34讲：调优工具pgBagder部署

第34讲：调优工具pgBagder部署第34讲：11月18日(周六)19:30-20:30，往期文档及视频，联系CUUG内容1:日志分析器pgBadger简介内容2:pgBad
m0_65303136·2023-11-26 02:53

oracle rac环境归档日志清除

我一看原来是归档日志满了，心里对着服务商就是一顿输出，竟然都不做日志管理。处理完了这些问题后我又打电话训斥一顿服务商。o
我是罗易呀！·2023-11-26 00:28

mysql慢日志分析pt-query-digest

目录1.概要2.部署2.1下载最新安装包2.2RPM安装2.3慢日志配置3.用法3.1常用选项说明3.2常见用法3.3分析示例及说明4.总结1.概要官网：pt-query-digest(percona.com)pt-query-digest可以分析slowlog日志、binlog、进程列表和从tcpdump抓取的MySQL数据包，分析结果包括对查询进行分组统计，统计出各查询的执行时间、次数、占比等
lv2·2023-11-25 12:19

万字长文 - Python 日志记录器logging 百科全书 - 高级配置之 日志文件配置

万字长文-Python日志记录器logging百科全书-高级配置之日志文件配置前言在Python的logging模块中，它不仅提供了基础的日志功能，还拥有一系列高级配置选项来满足复杂应用的日志管理需求。
是小菜欸·2023-11-25 07:56

分享一些渗透测试的工具（压箱底的）(附带下载链接)

SQL注入webshellxss测试暴力破解编程工具编码转换菜刀代码审计漏洞利用逆向工程日志分析扫描工具数据库漏洞利用工具提权信息收集远程工具抓包分析下载地址（百度网盘）：永久有效链接：https://
保持微笑-泽·2023-11-25 07:30

educoder中Hive综合应用案例 — 用户搜索日志分析

第1关：2018年点击量最高的10个网站域名----------禁止修改----------dropdatabaseifexistsmydbcascade;----------禁止修改--------------------begin-------------创建mydb数据库createdatabasemydb;---使用mydb数据库usemydb;---创建表db_searchcreatet
小施没烦恼·2023-11-25 04:10

2021-02-25

运维自动化之ansible本章内容1、运维自动化发展历程及技术应用2、Ansible命令使用3、Ansible常用模块详解4、YAML语法简介5、Ansibleplaybook基础6、Playbook变量
我还是从前那个少年丶·2023-11-25 02:04

【Java性能分析工具Arthas与GC日志和常量池详解】

文章目录一、Arthas详解1.1、Arthas是什么1.2、Arthas的使用1.2.1、Arthas下载1.2.2、Arthas启动1.2.3、使用Arthas进行Java程序分析二、GC垃圾日志分析
三河与木·2023-11-25 02:33

MySQL慢查询语句

MySQL慢查询慢查询慢查询日志分析慢查询--查看查询相关变量showglobalvariableslike'%quer%';慢查询日志分析Time：慢查询发生的时间Query_time：查询时间Lock_time
郝开·2023-11-25 02:00

Ansible 干货笔记【精品】

运维自动化之ANSIBLE本章内容运维自动化发展历程及技术应用Ansible命令使用Ansible常用模块详解YAML语法简介Ansibleplaybook基础Playbook变量、tags、handlers
administrator10·2023-11-25 02:28

C#(WPF) 日志管理

实例链接:C#,WPF日志管理C#编程--项目常用日志保存-C#文档类资源-CSDN下载日志管理类://////日志管理类///publicclassAppLog{publicstaticLogLevelLevel
无熵~·2023-11-25 02:47

企业级日志分析系统——ELK

企业级日志分析系统——ELK一、ELK日志分析系统简介二、使用ELK的原因三、完整日志系统基本特征四、ELK的工作原理五、ELK日志分析系统集群部署1、ELKElasticsearch集群部署（在Node1
渡渡甲·2023-11-24 22:14

ELK——企业级日志管理系统

目录1.ELK介绍2、为什么要使用ELK3.完整日志系统的基本特征4.ELK工作原理5.部署ELK5.1安装elasticsearch5.2安装可视化插件5.3安装logstash5.4安装kibana1.ELK介绍ELK是三个开源软件的缩写，分别表示：Elasticsearch,Logstash,Kibana1、Elasticsearch是个开源分布式搜索引擎，提供搜集、分析、存储数据三大功能。
kid00013·2023-11-24 21:36

ELK企业级日志分析平台——logstash

部署新建一台虚拟机elk4部署logstash[root@elk4~]#yuminstall-yjdk-11.0.15_linux-x64_bin.rpm[root@elk4~]#yuminstall-ylogstash-7.6.1.rpm命令方式[root@elk4bin]#/usr/share/logstash/bin/logstash-e'input{stdin{}}output{stdou
HaoJl09·2023-11-24 21:05

ELK企业级日志分析平台——kibana数据可视化

部署新建虚拟机server5，部署kibana[root@elk5~]#rpm-ivhkibana-7.6.1-x86_64.rpm[root@elk5~]#cd/etc/kibana/[root@elk5kibana]#vimkibana.ymlserver.host:"0.0.0.0"elasticsearch.hosts:["http://192.168.56.11:9200"]i18n.l
HaoJl09·2023-11-24 21:35

ELK企业级日志分析平台——ES集群监控

启用xpack认证官网：https://www.elastic.co/guide/en/elasticsearch/reference/7.6/configuring-tls.html#node-certificates在elk1上生成证书[root@elk1~]#cd/usr/share/elasticsearch/[root@elk1elasticsearch]#bin/elasticsear
HaoJl09·2023-11-24 21:03

ELK企业级日志分析平台——elasticsearch

集群部署文档：https://www.elastic.co/guide/en/elasticsearch/reference/7.6/index.html下载：https://elasticsearch.cn/download/主机ip角色k8s1192.168.92.11cerebroelk1192.168.92.31elasticsearchelk2192.168.92.32elasticse
HaoJl09·2023-11-24 16:51

揭秘 systemd：释放 Linux 服务管理的力量【systemd 一】

核心概念解析第三：服务管理与启动过程第四：定时任务与定时器定时任务和定时器的概念：配置实例：1.创建一个定时器单元文件：2.创建一个关联的服务单元文件：3.启用和启动定时器：4.检查定时器状态和日志：第五：日志管理与
一只牛博·2023-11-24 10:37

日志分析对决：揭示 ELK 与 GrayLog 的优势和差异

：你只管努力，剩下的交给时间：小破站日志分析对决：揭示ELK与GrayLog的优势和差异前言第一：ELKStack简介第二：GrayLog简介架构：主要特性：第三：功能对比共同特性：ELKStack的特性和优势
一只牛博·2023-11-24 10:07

centos7日志文件_CentOS 7文件系统与日志分析详解

Linux文件系统在处理Linux系统出现的各种故障时，故障的症状是最易发现的，而导致这一故障的原因才是最终排除故障的关键。熟悉Linux系统中常见的日志文件，了解一般故障的分析与解决办法，将有助于管理员快速定位故障点、“对症下药”、并及时解决各种系统问题。inode与block详解文件存储再硬盘上，硬盘最小存储单位是“扇区”，每个扇区存储512字节文件数据包括元信息与实际数据元信息包含文件属性信
weixin_39562606·2023-11-24 08:57

Shell判断：模式匹配：case（三）

系统管理工具箱1、需求：Linux提供的丰富的管理命令，用户管理，内存管理，磁盘管理，进程管理，日志管理，文件管理，软件管理，网络管理等等数十个工具包。
浅∶）笑·2023-11-24 07:38

某省职业院校技能大赛中职网络信息安全赛项环境

竞赛阶段（一）第一阶段任务书（70分）任务一：攻击日志分析任务环境说明：服务器场景：PYsystem0031服务器场景操作系统：未知服务器场景FTP用户名:anonymous密码：空从靶机服务器的FTP
m0_46056107·2023-11-24 04:43

标杆班级-MySQL-lesson01-简介及安装

1、官方定义的MySQLDBA工作内容（1）运维DBA初级：各版本、各平台安装搭建、升级中级：体系结构原理、基础管理（启动关闭、初始化配置文件管理、多实例管理、用户权限管理、基本SQL（增删改查））、日志管理
zwb_jianshu·2023-11-24 00:30

Linux 企业级安全原理和防范技巧

文件系统访问安全1.2.2Linux进程安全1.进程的种类2.进程管理方法1.2.3Linux用户管理安全1.管理用户及组文件安全2.用户密码管理3.使用密码攻击工具检查密码安全性1.2.4Linux日志管理安全
壹只菜鸟·2023-11-23 13:47

Elasticsearch 在各大互联网公司大量真实的应用案例！

除了搜索之外，结合Kibana、Logstash、Beats，ElasticStack还被广泛运用在大数据近实时分析领域，包括日志分析、指标监控、信息安
夜空_2cd3·2023-11-23 10:42

【Linux】文件系统与日志分析

文章目录一、文件系统的基本概念1.文件的概述2.inode概述3.block概述4.硬盘分区后的结构二、inode内容1.文件的元信息2.查看inode号的方式3.Linux系统文件三个重要时间属性4.目录文件的结构5.访问文件的简单流程6.inode的大小7.inode的特殊作用三、恢复文件1.EXT类型文件的误删恢复extundelete2.xfs类型文件的备份和恢复xfsdump3.RPM包
我的宝贝大唐·2023-11-23 10:38

第一章 介绍与循环

WebPy网络编程（爬虫）：Scrapy\Twisted\Requests\Paramiko科学运算：Pandas（金融领域）\SciPy\IpythonDUI图形开发：wxPython\PyQT\Kivy运维自动化
weixin_30386713·2023-11-23 09:42

Linux Rsyslog配置（日志管理服务）（RELP传输方式、TCP传输方式、UDP传输方式）

Rsyslog可以简单的理解为syslog的超集在老版本的Linux中RedHatEnterpriseLinux3/4/5默认是使用的syslog作为系统的日志工具从RHEL6开始系统默认使用Rsyslogryslog是一个快速处理收集系统日志的程序支持C/S架构可通过UDP/TCP协议提供日志集中管理服务为什么要使用RsyslogWEB服务器多的时候检查日志是一件痛苦的事情准备弄一台统一的日志服
LKmnbZ·2023-11-23 08:54

音乐偏好度推荐系统 JAVA开源项目

目录项目介绍项目获取项目截图项目介绍基于Vue+SpringBoot+MySQL的音乐偏好度推荐系统包含音乐档案模块、我的喜爱模块、每日推荐模块和通知公告模块，还包含用户管理、部门管理、角色管理、菜单管理、日志管理
customer08·2023-11-23 05:57

ElasticSearch在Windows上的下载与安装

Elasticsearch能够快速地处理结构化和非结构化数据，支持全文检索、地理位置搜索、自动补全、聚合分析等功能，能够承载各种类型的应用，如电子商务、日志分析、监控系统和安全分析等。
达芬奇要当程序员·2023-11-23 05:35

ELK企业级日志分析平台

目录elasticsearch集群部署cerebro部署elasticsearch集群角色分类elasticsearch节点优化logstash部署elasticsearch-head插件elasticsearch输出插件file输入插件syslog插件多行过滤插件grok过滤kibana数据可视化部署定制数据可视化访问量排行榜创建dashboard，大屏展示ES集群监控启用xpack认证metr
Hongx06·2023-11-23 05:11

MySQL 日志管理、备份与恢复

一、MySQL日志管理MySQL的日志默认保存位置为/usr/local/mysql/datavim/etc/my.cnf[mysqld]##错误日志，用来记录当MySQL启动、停止或运行时发生的错误信息
梦想的梦想家·2023-11-23 02:11

python如何用正则表达式提取字符串

日志分析会遇到这种情况。1.单个位置的字符串提取这种情况我们可以使用(.+?)这个正则表达式来提取.举例,一个字符串"a123b",如果我们想提取ab之间的值123,
sinat_40572875·2023-11-23 02:43

Linux日志管理syslog

Linux日志管理syslog1、日志管理概述2、rsyslog安装与配置2.1rsyslog安装2.2rsyslog的主要配置文件rsyslogd配置/etc/rsyslog.conf文件的格式templateFACILITY
Michael_lcf·2023-11-22 22:44

使用kettle进行正则表达式组件日志分析

使用Kettle（PentahoDataIntegration）进行日志分析是一种常见的数据处理任务，特别是当你需要从大量的日志文件中提取和分析数据时。
lambda-小张·2023-11-22 18:15

＜Zhuuu_ZZ＞Spark项目之log日志数据分析处理

log日志处理分析Spark-Shell测试环境IDEA开发环境一项目准备需要分析处理的数据如下日志数据字段数据字典有需要的点击链接获取链接:项目资料.提取码：599q二项目需求使用Spark完成下列日志分析项目需求
Zhuuu_ZZ·2023-11-22 13:26

html匹配属性正则表达式,正则表达式匹配html标签的属性值

如Web服务器日志分析，网页前端开发等。很多高级文本编辑器都支持正则表达式的一个子集，熟练掌握正则表达式，经常能够使你的一些工作事半功倍。例如统计代码行数，只需一个正则就搞定。
小珂and小洋·2023-11-22 12:52

18.MYSQL数据库（1）

MySQL数据库本章内容关系型数据库基础安装MySQL管理数据库和表用户和权限管理函数，存储过程，触发器和事件MySQL架构存储引擎服务器选项，系统和状态变量优化查询和索引管理锁和事务管理日志管理备份还原
低調！·2023-11-22 11:35

squid代理服务器（传统代理、透明代理、反向代理、ACL、日志分析）

一、Squid代理服务器（一）代理的工作机制1、代替客户机向网站请求数据，从而可以隐藏用户的真实IP地址。2、将获得的网页数据（静态Web元素）保存到缓存中并发送给客户机，以便下次请求相同的数据时快速响应。（二）代理的类型传统代理：适用于Internet，需在客户机指定代理服务器的地址和端口。透明代理：客户机不需指定代理服务器的地址和端口，而是通过默认路由、防火墙策略将Web访问重定向给代理服务器
梦想的梦想家·2023-11-22 09:07

clickhouse hbase性能对比_携程ClickHouse日志分析实践

ElasticSearch是一种基于Lucene的分布式全文搜索引擎，携程用ES处理日志，目前服务器规模500+，日均日志接入量大约200TB。随着日志量不断增加，一些问题逐渐暴露出来：一方面ES服务器越来越多，投入的成本越来越高；另一方面用户的满意度不高，日志写入延迟、查询慢甚至查不出来的问题一直困扰着用户；而从运维人员的角度看，ES的运维成本较高，运维的压力越来越大。一、为什么选择ClickH
weixin_39583655·2023-11-22 04:31

Uber 如何使用 ClickHouse 建立快速可靠且与模式无关的日志分析平台？

在Uber，我们提供了一个集中的、可靠的、交互式的日志平台，让工程师们可以快速完成大规模日志分析工作。
qianshanding0708·2023-11-22 03:28
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他