E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Loki日志收集
一个ELK的替代方案GLC,vue+go实现的开源日志中心 glogcenter
glogcenter简称GLC,前端vue实现,后端go实现・界面简洁・软件小部署简单・通常每秒数千日志吞食量・全文检索・得益于go的优异性能,检索毫秒级响应・提供java、golang等
日志收集
包,支持
gotoeasy
·
2023-11-06 10:50
POD的底层实现原理机制 8月11日学习笔记
再次理解Pod二、POD的实现机制Pod要解决的问题infracontainer1.共享网络2.共享存储三、详解容器设计模式举例InitContainer容器设计模式:SidecarSidecar:应用与
日志收集
陈小c
·
2023-11-06 08:27
kubernetes
学习日常
k8s
一场与魔力演讲的遇见
说起我对魔力演讲的结缘还是通过
Loki
得知滴,不过之前在一次年会就听过泥叔的课程,深深的被吸引!而且
Loki
推荐的肯定不会错,就这样我就报名了。图片发自App我为什么要学习演讲呢?
赵承纬
·
2023-11-05 17:20
APM建设踩了哪些坑?去哪儿旅行分布式链路追踪系统实践
从APM整体架构设计入手,讲述了
日志收集
、Kafka传输和Flink任务处理等环节的性能优化实践和踩坑经验。同时,作者结合丰富的分布式系统架构经验,探讨了APM系统和Trace数据的价值。
TakinTalks稳定性社区
·
2023-11-05 07:13
容量治理
(C++模板编程):typelist实现(类型计算的范例)
typelist实现(类型计算的范例)【基本介绍】《ModernC++Design》---《C++设计新思维》--
Loki
实现了typelist(列表头+嵌套列表技术来实现,因为2003年C++不支持可变参模板
NGC_2070
·
2023-11-04 10:41
#
C++模板编程
pytest + yaml 框架 - 仅收集用例失败错误信息和log日志
log
日志收集
用例执行完会默认生成2个日志文件全量日志,每个用例的日志都会收集仅失败的用例日志使用示例config:name:demotest_1:name:用例1print:"111111"tes
测试要用手
·
2023-11-04 07:22
职场经验
程序员
软件测试
pytest
程序人生
软件测试
单元测试
自动化测试
jmeter
程序员
ELK第一篇 手把手教你分布式
日志收集
第零章序0.0序言0.1何为ELk0.2为何ELK0.3核心组件0.4常用架构0.0序言简介日常工作中会面临很多问题,处理问题时候。怎么解决问题?通过工作经验,迅速判断问题出在哪。通过日志系统日志:/var/log目录下的问题的文件程序日志:代码日志(项目代码输出的日志)服务应用日志nginx、HAproxy、lvstomcat、php-fpmredis、mysql、mongoRabbitMq、k
~Mei先森
·
2023-11-04 06:42
SpringCloud
java
elk
docker
Logstash 基础学习
Logstash简介具备实时数据传输能力的管道支持多种数据源输入;支持多种guolvq;支持多种数据输出目的地;-在ELK中作为
日志收集
器Logstash安装首先对安装包进行解压,安装到指定的路径:tar-zxvflogstash
小五家的二哈
·
2023-11-03 23:51
Logstash
logstash 学习小记
logstash学习小记标签(空格分隔):
日志收集
IntroduceLogstashisatoolformanagingeventsandlogs.Youcanuseittocollectlogs,parsethem
diandingyin9417
·
2023-11-03 23:19
大数据
ruby
数据库
Elasticsearch使用
新增了一个FileBeat,它是一个轻量级的
日志收集
处理工具(Agent),Filebeat占用资源少,适合于在各个服务器上搜集日志后传输给Logstash,官方也推荐此工具。
doinb1517
·
2023-11-03 19:49
搭建ELK+Filebead+zookeeper+kafka实验
一、ELK+Filebeat+kafka+zookeeper架构架构图分别演示第一层:数据采集层数据采集层位于最左边的业务服务集群上,在每个业务服务器上面安装了filebead做
日志收集
,然后把采集到的原始日志发送到
五彩斑斓的黑@
·
2023-11-03 05:00
elk
zookeeper
kafka
ELk + kafka + filebeat日志系统搭建
一日志系统架构图:简易版标准版logstash和filebeat都具有
日志收集
功能,filebeat更轻量,占用资源更少,但logstash具有filter功能,能过滤分析日志。
夜风_BLOG
·
2023-11-03 05:30
高级开发必备知识
elk
日志系统
filebeat
kafaka
ELK + kafka 日志方案
主要演示使用springaop进行
日志收集
,然后通过kafka将日志发送给logstash,logstash再将日志写入elasticsearch,这样elasticsearch就有了日志数据了,最后,
西安未央
·
2023-11-03 05:27
方案设计
elk
kafka
分布式
如何用Pygame写游戏(一)
python-pygame-novice-professional-1/Pygame的历史Pygame是一个利用SDL库的写就的游戏库,SDL呢,全名SimpleDirectMediaLayer,是一位叫做SamLantinga的大牛写的,据说他为了让
Loki
识荒者
·
2023-11-03 00:32
Pygame写游戏
Pygame
Python
写游戏
前端架构体系调研整理汇总
基础设施:错误监控、
日志收集
、代码回滚三件套。明显的体验就是有时候做新功能或者改bug的时
Oneshop商城
·
2023-11-02 01:22
前端
架构
Loki
日志系统分布式部署实践二 etcd
说明本次
loki
采用etcd作为k/v存储ring,etcd采用3节点部署模式。
kong62
·
2023-11-01 22:21
学习笔记二十八:K8S控制器Daemonset入门到企业实战应用
DaemonSet概述DaemonSet工作原理:如何管理PodDaemonset典型的应用场景DaemonSet与Deployment的区别DaemonSet资源清单文件编写技巧DaemonSet使用案例:部署
日志收集
组件
风车带走过往
·
2023-11-01 15:47
CKA学习笔记
学习
笔记
kubernetes
Docker-搭建日志监控系统
项目中常用集中
日志收集
工具购物返利https://www.cpa5.cn/LogstashLogstash是一个开源数据收集引擎,具有实时管道功能。
分发吧
·
2023-10-31 22:22
搭建ELK+KAFKA+ZK+FILEBEAT
日志收集
系统
需求:给线上微服务各节点搭建
日志收集
系统思路:filebeat收集本地系统日志,写入kafka,logstash从kafka中读取数据并传给elasticsearch,从而kibana进行展示初次搭建均为
tq_theSuperMan
·
2023-10-31 22:21
JAVA
日志系统
ELK
Ubuntu18.04+ELK架构(实现
日志收集
、过滤、可视化展现)
目录:1.实现filebeat-kafka/redis-logstash-elasticsearch-kibana集群架构2.完成收集nginx、tomcat、app
日志收集
3.要求完成Kibana日志可视化分析
ksfbvv
·
2023-10-31 22:47
IT
Architect
elk
架构
elasticsearch
献给Gateway小白的一篇好文:Spring Cloud Gateway网关
Gateway),是SpringCloud开源项目系列下一个子项目,它主要为接口API调取提供统一入出口的控制角色服务,比如:路由调度、结合Sentinel限流、结合Hystrix实现熔断回退、鉴权、
日志收集
等
云水之路
·
2023-10-31 14:44
微服务设计-Gateway
gateway
java
spring
boot
微服务
loki
分布式日志系统错误排查
在配置文件配置redis后,报如下错误msg="failedtoputtoredis"name=store.index-cache-write.rediserr="EXECABORTTransactiondiscardedbecauseofpreviouserrors."原因:redis多个地址用逗号分割,如果只配置一个地址,而我们的redis又是cluster模式的话,会报改错解决办法:如果是集
rekca
·
2023-10-31 04:26
第七课:尚硅谷K8s学习- Prometheus、Grafana和EFK、证书年限
K8s学习-Prometheus、Grafana和EFK、证书年限tags:golang2019尚硅谷categories:K8sHelm安装使用PrometheusGrafanaHPAk8s资源限制
日志收集
道教儒佛电磁波
·
2023-10-30 15:48
日志和日志封装
日志收集
器:1、日志级别(Level):DEBUG、INFO、WARNING、ERROR、CRITICAL(FATAL)2、输出渠道(Handle):控制台(StreamHandle)、文件(FileHandle
心上猫
·
2023-10-28 23:56
ELK+kafka收集 Nginx与tomcat日志
ELK
日志收集
ELK原理与介绍为什么用到ELK:一般我们需要进行日志分析场景:直接在日志文件中grep、awk就可以获得自己想要的信息。
weixin_34177064
·
2023-10-28 07:10
大数据
java
运维
分布式日志和链路追踪
分布式日志实现思路分布式日志框架服务的实现思路基本是一致的,如下:
日志收集
器:微服务中引入日志客户端,将记录的日志发送到日志服务端的收集器,然后以某种方式存储数据存储:一般使用ElasticSearch
秃狼
·
2023-10-27 08:35
Java
分布式
监控技术栈知识点-二
日志生成器负责生成日志数据,并将日志数据发送给
日志收集
器。常见的日志生成器包括:应用程序本身:大多数应用程序都提供了日志生成功能。
A ?Charis
·
2023-10-26 12:33
云原生
kubernetes
部署基于efk+logstash+kafka构建
日志收集
平台并对nginx日志进行分析
文章目录1.1安装zookeeper集群1.2安装kafka集群1.3部署filebeat服务1.4部署logstash1.5部署es和kibana服务1.6配置kibanaui界面1.7对nginx进行日志分析Filebeat采集日志kafkatopic存起来日志->logstash去kafka获取日志,进行格式转换->elasticsearch->kibana1.1安装zookeeper集群准
小手の冰凉
·
2023-10-25 12:26
【数据科学与大数据技术】
1024程序员节
日志管理制度
2、管理细则2.1、
日志收集
日
奔跑的老人吴
·
2023-10-25 05:42
信息安全管理制度
软件工程
网络
运维
数据库
Kafka从入门到精通
2.应用场景(1)
日志收集
:收集各种服务的log,通过kafka以统一接口服务的方式开放给各种consumer(2)消息系统:解耦和生产
Mr Tang
·
2023-10-25 04:58
中间件
java
kafka
java
大数据
关于 Druid 与 MySQL-Connector8.x 引发的 boot.loader 包对象无法回收的坑
(干货)排查思路分析堆栈文件分析定位到问题关键(占大头)焦点回到boot.loader想办法debug,观察线程调用栈最后遗留的bonree监控疑点总结经验教训第一条:阿里开源的东西使用要谨慎第二条:
日志收集
很重要第三条
法号轻尘
·
2023-10-24 01:44
#
知识总结
mysql
数据库
运维
[jmx]zookeeper/kafka/hive/hadoop/presto/presto等组件的jmx监控汇集
文章目录背景注意事项——本文必读zookeeper的jmx监控配置hadoop的jmx监控kafka的jmx监控hive的jmx监控hiveserver2的jmx监控metastore的jmx监控kylin的jmx监控
loki
王一1995
·
2023-10-23 20:19
运维
#
linux
大数据
大数据
java
kafka
如何一人五天开发完复杂小程序(前端必看)
布局方案导航栏TabBarBasicPage用户系统登录方案初始化登录鉴权优化及Bug追踪
日志收集
数据分析常用优化方案preLoad独立分包加载布局方案我们首
小生方勤
·
2023-10-23 18:14
实战:kafka实现
日志收集
系统
实战:kafka实现
日志收集
系统一、Kafka案例需求概述1.1需要收集的信息:用户唯一标识用户操作时间具体用户操作1.2工作流程:用户的操作会由Web服务器进行响应。
穿城大饼
·
2023-10-23 13:57
高吞吐消息中间件
kafka
zookeeper
centos
logging
nginx
教你如何获取控制台log并显示到手机上
要实现这种功能需要准备两个库1.
日志收集
的库https://github.com/ljuns/L
lllllittlep
·
2023-10-23 09:36
k8s镜像加devops
展示1.配套资料2.devops3.elk
日志收集
4.grafana监控5.dashboard!
无双呀`
·
2023-10-23 08:53
JAVA
运维
kubernetes
devops
容器
K8s项目实战-业务容器化-Day 05
(2)后期业务保障a.监控b.告警c.
日志收集
d.ci
圣圣不爱学习
·
2023-10-22 18:07
Kubernetes
kubernetes
容器
云原生
Java项目 log4j2 配置日志写入指定文件
一、背景由于业务需要,需要将服务部分埋点日志写入指定文件,然后进行
日志收集
,进行数据分析统计。需要通过修改log4j2配置,引入对应logger打印日志实现。
喜鹊先生Richard
·
2023-10-22 18:21
#
java
log4j
java
日志
log4j2
Kubernetes
日志收集
方案
承接上文Kubernetes部署应用服务,本文介绍基于ELK的k8s应用
日志收集
一、日志架构日志采集方式一般分为主动采集和被动采集两种,在K8s中,被动采集一般分为Sidecar和DaemonSet两种方式
想成为大师的学徒小纪
·
2023-10-21 21:11
ELK+KAFKA+FILEBEAT集群实战(nginx访问
日志收集
)
主要用来日志的搜集(filebeat)3、Kibana:主要用于日志的展示4、Kafka:是一个分布式的消息发布—订阅系统(kafka其实是消息队列)5、Filebeat:轻量级数据收集引擎ELK作用建立集中式
日志收集
系统
xiaowaixi
·
2023-10-21 15:35
ELK配置记录(filebeat+kafka+Logstash+Elasticsearch+Kibana)
一、简介elk日志平台:
日志收集
、分析和展示的解决方案。满足用户对⽇志的查询、排序、统计需求。
xz060585
·
2023-10-21 15:35
kafka
elasticsearch
elk
ELK+Kafka+Beats实现海量
日志收集
平台(一)
ELK+Kafka+Beats实现海量
日志收集
平台(一)目录一、应用场景二、实现原理一、应用场景利用ELK+Kafka+Beats来实现一个统一日志平台,它是一款针对大规模分布式系统日志的统一采集、存储
竹影入风华
·
2023-10-21 15:01
Linux学习
ELK
elk
kafka
ELK + Filebeat + Kafka 分布式日志管理平台搭建
1工作流程在这之前,我写了三篇文章关于日志系统平台的搭建,我这边现简单列出这几种的工作流程1.1ELKDocker整合ELK实现
日志收集
1.2ELFKdocker安装ELFK实现日志统计1.3架构演进ELK
chuixue24
·
2023-10-21 15:57
日志处理
kafka
分布式
elk
filebeat
Elasticsearch实践:ELK+Kafka+Beats对
日志收集
平台的实现
本文将介绍ELK+Kafka+Beats对
日志收集
平台的实现。文章目录1、关于ELK与BKELK1.1、ELK架构及其影响1.2、基于BKLEK架构的日志分析系统实现2、利用
栗筝i
·
2023-10-21 14:51
数据库
elasticsearch
elk
kafka
android 异常测试,Android App异常检测及处理
本文针对这三种异常分别给出了处理建议,并提供了一些
日志收集
框架及日志上传的思路。ANRANR(ApplicationNoResponse),俗称应用卡顿。
weixin_40006185
·
2023-10-20 21:33
android
异常测试
【python零基础入门学习】python进阶篇之OOP - 面向对象的程序设计
《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《
日志收集
向往风的男子
·
2023-10-20 15:27
python零基础入门
学习
python
运维
【运维日常】ubuntu系统默认没有ssh服务,需要手动安装-并加上自己手动添加sudo用户
《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《
日志收集
向往风的男子
·
2023-10-20 15:27
运维日常
运维
ubuntu
ssh
【运维日常】mac刻录ubuntu系统进U盘,插入服务器安装系统
《shell》:shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》暂未更新《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《
日志收集
向往风的男子
·
2023-10-20 15:21
运维日常
运维
ubuntu
linux
Web自动化测试06
TableofContentsWeb自动化测试课程第6章-
日志收集
日志相关概念日志的基本用法日志的高级用法Web自动化测试课程序号章节知识点1第一章Web自动化入门1.认识自动化及自动化测试2.自动化测试工具选择
慢慢搬砖录
·
2023-10-20 15:48
测试工具
单元测试
五万字图文和代码详解kafka的安装与开启ACL权限控制,自定义SASL、ACL存储形式,实际项目使用案例剖析,kafka常用cmd命令使用总结及示例
主要应用场景是:
日志收集
系统和消息系统。本篇记录测试环境的kafka安装
代码讲故事
·
2023-10-20 13:06
架构师成长之路
kafka
分布式
sasl
scram
认证
acl
kerberos
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他