E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
日志收集
日志管理制度
2、管理细则2.1、
日志收集
日
奔跑的老人吴
·
2023-10-25 05:42
信息安全管理制度
软件工程
网络
运维
数据库
Kafka从入门到精通
2.应用场景(1)
日志收集
:收集各种服务的log,通过kafka以统一接口服务的方式开放给各种consumer(2)消息系统:解耦和生产
Mr Tang
·
2023-10-25 04:58
中间件
java
kafka
java
大数据
关于 Druid 与 MySQL-Connector8.x 引发的 boot.loader 包对象无法回收的坑
(干货)排查思路分析堆栈文件分析定位到问题关键(占大头)焦点回到boot.loader想办法debug,观察线程调用栈最后遗留的bonree监控疑点总结经验教训第一条:阿里开源的东西使用要谨慎第二条:
日志收集
很重要第三条
法号轻尘
·
2023-10-24 01:44
#
知识总结
mysql
数据库
运维
如何一人五天开发完复杂小程序(前端必看)
布局方案导航栏TabBarBasicPage用户系统登录方案初始化登录鉴权优化及Bug追踪
日志收集
数据分析常用优化方案preLoad独立分包加载布局方案我们首
小生方勤
·
2023-10-23 18:14
实战:kafka实现
日志收集
系统
实战:kafka实现
日志收集
系统一、Kafka案例需求概述1.1需要收集的信息:用户唯一标识用户操作时间具体用户操作1.2工作流程:用户的操作会由Web服务器进行响应。
穿城大饼
·
2023-10-23 13:57
高吞吐消息中间件
kafka
zookeeper
centos
logging
nginx
教你如何获取控制台log并显示到手机上
要实现这种功能需要准备两个库1.
日志收集
的库https://github.com/ljuns/L
lllllittlep
·
2023-10-23 09:36
k8s镜像加devops
展示1.配套资料2.devops3.elk
日志收集
4.grafana监控5.dashboard!
无双呀`
·
2023-10-23 08:53
JAVA
运维
kubernetes
devops
容器
K8s项目实战-业务容器化-Day 05
(2)后期业务保障a.监控b.告警c.
日志收集
d.ci
圣圣不爱学习
·
2023-10-22 18:07
Kubernetes
kubernetes
容器
云原生
Java项目 log4j2 配置日志写入指定文件
一、背景由于业务需要,需要将服务部分埋点日志写入指定文件,然后进行
日志收集
,进行数据分析统计。需要通过修改log4j2配置,引入对应logger打印日志实现。
喜鹊先生Richard
·
2023-10-22 18:21
#
java
log4j
java
日志
log4j2
Kubernetes
日志收集
方案
承接上文Kubernetes部署应用服务,本文介绍基于ELK的k8s应用
日志收集
一、日志架构日志采集方式一般分为主动采集和被动采集两种,在K8s中,被动采集一般分为Sidecar和DaemonSet两种方式
想成为大师的学徒小纪
·
2023-10-21 21:11
ELK+KAFKA+FILEBEAT集群实战(nginx访问
日志收集
)
主要用来日志的搜集(filebeat)3、Kibana:主要用于日志的展示4、Kafka:是一个分布式的消息发布—订阅系统(kafka其实是消息队列)5、Filebeat:轻量级数据收集引擎ELK作用建立集中式
日志收集
系统
xiaowaixi
·
2023-10-21 15:35
ELK配置记录(filebeat+kafka+Logstash+Elasticsearch+Kibana)
一、简介elk日志平台:
日志收集
、分析和展示的解决方案。满足用户对⽇志的查询、排序、统计需求。
xz060585
·
2023-10-21 15:35
kafka
elasticsearch
elk
ELK+Kafka+Beats实现海量
日志收集
平台(一)
ELK+Kafka+Beats实现海量
日志收集
平台(一)目录一、应用场景二、实现原理一、应用场景利用ELK+Kafka+Beats来实现一个统一日志平台,它是一款针对大规模分布式系统日志的统一采集、存储
竹影入风华
·
2023-10-21 15:01
Linux学习
ELK
elk
kafka
ELK + Filebeat + Kafka 分布式日志管理平台搭建
1工作流程在这之前,我写了三篇文章关于日志系统平台的搭建,我这边现简单列出这几种的工作流程1.1ELKDocker整合ELK实现
日志收集
1.2ELFKdocker安装ELFK实现日志统计1.3架构演进ELK
chuixue24
·
2023-10-21 15:57
日志处理
kafka
分布式
elk
filebeat
Elasticsearch实践:ELK+Kafka+Beats对
日志收集
平台的实现
本文将介绍ELK+Kafka+Beats对
日志收集
平台的实现。文章目录1、关于ELK与BKELK1.1、ELK架构及其影响1.2、基于BKLEK架构的日志分析系统实现2、利用
栗筝i
·
2023-10-21 14:51
数据库
elasticsearch
elk
kafka
android 异常测试,Android App异常检测及处理
本文针对这三种异常分别给出了处理建议,并提供了一些
日志收集
框架及日志上传的思路。ANRANR(ApplicationNoResponse),俗称应用卡顿。
weixin_40006185
·
2023-10-20 21:33
android
异常测试
【python零基础入门学习】python进阶篇之OOP - 面向对象的程序设计
《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《
日志收集
向往风的男子
·
2023-10-20 15:27
python零基础入门
学习
python
运维
【运维日常】ubuntu系统默认没有ssh服务,需要手动安装-并加上自己手动添加sudo用户
《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《
日志收集
向往风的男子
·
2023-10-20 15:27
运维日常
运维
ubuntu
ssh
【运维日常】mac刻录ubuntu系统进U盘,插入服务器安装系统
《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《
日志收集
向往风的男子
·
2023-10-20 15:21
运维日常
运维
ubuntu
linux
Web自动化测试06
TableofContentsWeb自动化测试课程第6章-
日志收集
日志相关概念日志的基本用法日志的高级用法Web自动化测试课程序号章节知识点1第一章Web自动化入门1.认识自动化及自动化测试2.自动化测试工具选择
慢慢搬砖录
·
2023-10-20 15:48
测试工具
单元测试
五万字图文和代码详解kafka的安装与开启ACL权限控制,自定义SASL、ACL存储形式,实际项目使用案例剖析,kafka常用cmd命令使用总结及示例
主要应用场景是:
日志收集
系统和消息系统。本篇记录测试环境的kafka安装
代码讲故事
·
2023-10-20 13:06
架构师成长之路
kafka
分布式
sasl
scram
认证
acl
kerberos
常用中间件对比
Kafka主要特点是基于Pull的模式来处理消息消费,追求高吞吐量,一开始的目的就是用于
日志收集
和传输。
曾经的飞舞梦
·
2023-10-20 09:00
Elasticsearch系列组件:Beats高效的
日志收集
和传输解决方案
Elasticsearch是一个开源的、基于Lucene的分布式搜索和分析引擎,设计用于云计算环境中,能够实现实时的、可扩展的搜索、分析和探索全文和结构化数据。它具有高度的可扩展性,可以在短时间内搜索和分析大量数据。Elasticsearch不仅仅是一个全文搜索引擎,它还提供了分布式的多用户能力,实时的分析,以及对复杂搜索语句的处理能力,使其在众多场景下,如企业搜索,日志和事件数据分析等,都有广泛
栗筝i
·
2023-10-19 08:30
数据库
elasticsearch
大数据
搜索引擎
PostgreSQL性能调优 postgresql.conf参数调优
postgresql.conf参数调优调整硬件配置1.存储器1)OLAP(联机分析处理)2)OLTP(联机事务处理)2.内存容量3.CPU速度数据库参数调整1.连接数2.内存相关参数3.其他参数收集系统统计信息1.
日志收集
ac.char
·
2023-10-19 06:30
PostgreSQL
postgresql
从一份定义文件详解ELK中Logstash插件结构
概述当下分布式系统的
日志收集
、日志分析、日志处理、可视化的热门技术栈方案当然非ELK(ElasticSearch、Logstash、Kibana)莫属,从L→E→K构成了一条数据的Pipeline管道:
CodeSheep程序羊
·
2023-10-19 03:03
技术分享
ELK
Spring cloud使用ELK配置与使用详解之Logstash
Logstash,分布式
日志收集
。可以将所有分布式应用的日志进行回收采集。
哈哈哈哈蜜瓜
·
2023-10-19 03:00
2020年数据中台
ELK部署使用
新增了一个FileBeat,它是一个轻量级的
日志收集
处理工具(Agent),Filebeat占用资源少,适合于在各个服务器上搜集日志后传输给Logstash,官方也推荐此工具。
shaipxiang
·
2023-10-19 02:05
【安全体系架构】——SIEM架构
SIEM系统集成了多个安全功能,包括
日志收集
、事件管理、威胁检测和响应,以提供组织全面的安全信息视图。SIEM架构有助于实时监控网络活动,检测异常行为,及时识别潜在的安全威胁,并采取措施来应对事件。
时光如箫声留念
·
2023-10-18 06:32
安全体系架构
安全
架构
Spring-Boot-Admin集成arthas环境部署-服务端
Arthas3.1引入完整依赖3.2arthas源代码拷贝到SBA中3.3application.yml完整版3.4SBA服务改造3.5Arthas外链设置3.6重新启动SBA并访问ArthasConsole3.7
日志收集
slaughter_Y
·
2023-10-17 23:45
服务监控
spring
boot
jvm
2019-05-23 Kafka学习
主要应用场景是:
日志收集
系统和消息系统。Kafka主要设计目标如下:以时间复杂度为O(1)的方式
天台上思考的唐吉诃德
·
2023-10-17 21:00
Flink
日志收集
到数据库/kafka
引言我们做项目过程中发现flink日志不同模式启动,存放位置不同,查找任务日志很不方便,具体问题如下:原始flink的日志配置文件log4j-cli.propertiesappender.file.append=false,取消追加,直接覆盖掉上一次提交任务的信息。这里改为true解决。application模式启动任务失败/取消后,无法找到错误日志,需要用命令查找对应appIdyarnappli
半度、
·
2023-10-17 19:23
随笔
flink
数据库
kafka
log4j
SpringCloud Gateway网关收集请求日志
日志收集
效果网关负责服务的转发,所有通过网关转发的服务。都可以通过网关进行收集相关请求日志,具体实现如下:日志实体类packagecom.mk.common.beans;importlombok.
chaojunma
·
2023-10-17 18:22
spring
cloud
gateway
网关
spring
boot
微服务
持续集成部署-k8s-资源调度:DaemonSet
持续集成部署-k8s-资源调度:DaemonSet1.DaemonSet简介2.部署Fluent
日志收集
程序1.DaemonSet简介在Kubernetes中,DaemonSet是一种用于在集群中运行一个
linmengmeng_1314
·
2023-10-17 07:02
持续集成部署-CI/CD
ci/cd
kubernetes
容器
运维
云原生
重磅:SRS支持Prometheus Exporter
的可观测性是支撑业务的运营的能力,主要指监控(PrometheusExporter)、分布式链路追踪(APM)、上下文日志(CloudLogging)三个核心能力,以及基于这些能力的运营大盘、监控系统、问题排查、
日志收集
和分析等功能
winlinvip
·
2023-10-17 03:47
Linux ELK日志分析系统 | logstash
日志收集
| elasticsearch 搜索引擎 | kibana 可视化平台 | 架构搭建 | 超详细
ELK日志分析系统|logstash
日志收集
|elasticsearch搜索引擎|kibana可视化平台卐ELK日志分析系统一、Elasticsearch介绍1.概述2.核心概念2.1接近实时(NRT)
半世情`半世醉¹³¹⁴
·
2023-10-16 13:14
分布式
大数据
编程语言
hadoop
数据库
IOS 崩溃
日志收集
通过崩溃捕获和收集,可以收集到已发布应用(游戏)的异常,以便开发人员发现和修改bug,对于提高软件质量有着极大的帮助,本文主要介绍iOS平台下崩溃捕获和收集的原理及步骤。要实现崩溃捕获和收集的步骤如下:1、捕获崩溃2、获取堆栈信息3、符号表还原4、服务器上传捕获异常iOS中引发崩溃的代码本质上就两类,一个是c++语言层面的错误,属于比较底层的错误,比如野指针,除零,内存访问异常等等,这一类的错误可
九月oc
·
2023-10-16 12:52
七、K8S之DaemonSet
DaemonSet常见的用法:在每个节点上运行集群守护进程在每个节点上运行
日志收集
守护进程在每个节点上运行监控守护进程二、配置文件apiVersion:a
我爱记笔记
·
2023-10-15 23:05
Kubernetes
运维
kubernetes
容器
云原生
Dubbo 全链路追踪日志的实现
微服务架构的项目,一次请求可能会调用多个微服务,这样就会产生多个微服务的请求日志,当我们想要查看整个请求链路的日志时,就会变得困难,所幸的是我们有一些集中
日志收集
工具,比如很热门的ELK,我们需要把这些日志串联起来
后端进阶
·
2023-10-15 05:06
docker-compose安装ELK7.12.0并启用x-pack及kibana设置日志报警
不过现在还新增了一个Beats,它是一个轻量级的
日志收集
处理工具(Agent),Beats占用资源少,适合于在各个服务器上搜集日志后传输给Logstash,官方也推荐此工具,目前由于原本的ELKStack
lihongbao80
·
2023-10-13 17:24
elk
基于kafka,zookeeper实现的
日志收集
平台搭建
1.项目简介时间:2022年7月项目人员:3人项目环境:centos7(9台,1核2G),kafka(2.12),nginx,filebeat,zookeeper(3.6.3),python3.6,mysql项目描述:分别使用3台Linux服务器来作为nginx集群搭建前端web服务,kafka集群和zookeeper集群,2台Linux机器做反向代理集群。通过filebeat收集前端nginx集
月昭昭
·
2023-10-13 15:27
kafka
zookeeper
分布式
运维开发
基于kfaka和zookeeper的nginx
日志收集
平台,项目详细步骤
目录一、项目环境:二、项目介绍:三、项目步骤3.1环境准备3.1.1准备好虚拟机3.1.2配置好静态ip3.1.3修改主机名以及写好域名映射关系3.1.4安装基本软件3.1.5关闭防火墙3.2nginx的部署3.2.1安装相关软件3.2.2修改相关配置文件3.3kafka的部署3.3.1相关软件安装3.3.2配置kafka3.3.3zookeeper的部署3.4测试3.4.1创建一个topic3.
忙碌且充实
·
2023-10-13 15:23
zookeeper
kafka
十九.SpringCloud极简入门-基于Docker整合ELK分布式日志解决方案
所以
日志收集
是微服务项目不可或缺的。为了方便日志分析,我们需要对微服务的日志数据进行存储,同时提供一个友好的可视化界面方便分析。存储到文件和数据库都不太合适因为数据量太大,也不好查阅。
墨家巨子@俏如来
·
2023-10-13 09:36
《Spring
Cloud
Netflix》
ELK
Spring Cloud日志集中化处理:ELK + Kafka
ELK是目前主流的
日志收集
处理方案,
清辉丶
·
2023-10-13 09:35
Docker
微服务
SpringCloud
springCloud集成ELK日志
所以在微服务架构中,我们是需要建立集中式
日志收集
系统,将所有节点上的日志统一收集,管理,访问。现在目前主流的分布式日志解决方案还是基于ELK(El
拽风追梦
·
2023-10-13 09:35
spring
cloud
elk
java
Linux安装配置ELK
日志收集
系统,elasticsearch+kibana+filebeat轻量级配置安装
新增了一个FileBeat,它是一个轻量级的
日志收集
处理工具(Agent),Filebeat占用资源少,适合于在各个服务器上搜集日志后传输给Logstash,官方也推荐此工具。
the丶only
·
2023-10-13 03:02
运维笔记
elasticsearch
kibana
filebeat
运维
linux
ELK (一)部署ELK+Filebeat
日志收集
分析系统
说明:此安装流程只适用于8.0.0以下的版本1.ElasticSearch部署1.1下载ElasticSearch的wget指令:wgethttps://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.13.4-linux-x86_64.tar.gz1.2解压安装包到指定目录指定解压缩到/usr/local目录下tar-zx
鮀城小帅
·
2023-10-13 03:01
#
ELK
linux
elk
运维
filebeat
Elasticsearch
Filebeat
日志收集
案例;
文章目录1、部署filebeat2、修改filebeat的配置⽂件3、input的log类型(修改filebeat收集的日志到终端案例)4、input的通配符案例5、input的通用字段案例6、将数据写入ES案例7、自定义索引名称案例8、根据不同的标签/字段,写入不同的索引案例9、自定义分片和副本数量案例10、基于log类型收集nginx原生日志11、基于log类型收集nginx的json日志12
不知名运维:
·
2023-10-13 03:27
ELK日志分析系统
linux
运维
bash
RocketMQ云服务器和本地基础安装搭建及可视化控制台安装使用
2、MQ的应用场景2.1、异步任务处理2.2、应用程序解耦合2.3、
日志收集
3、消息队列技术选型对比二、RocketMQ安装和基础使用1、RocketMQ组成结构1.1、交互过程
一宿君
·
2023-10-12 22:26
Java编程技术
rocketmq
Java
windows
linux
rocket-console
云原生架构系列之监控之日志
前面我们讲过了对系统进行运行环境的监控,本文将继续讲述云原生应用架构下的
日志收集
功能。
WANGYuping
·
2023-10-11 04:19
Kafka和RabbitMQ的对比
Rabbitmq比kafka可靠,kafka更适合IO高吞吐的处理,比如ELK
日志收集
Kafka和RabbitMq一样是通用意图消息代理,他们都是以分布式部署为目的。
智博的自留地
·
2023-10-10 14:30
MQ消息队列
kafka
rabbitmq
分布式
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他