E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
IMM日志采集
史上最细,自动化测试-logging
日志采集
详细实战(二)
Web自动化项目实战四、App自动化项目实战五、一线大厂简历六、测试开发DevOps体系七、常用自动化测试工具八、JMeter性能测试九、总结(尾部小惊喜)前言1、测试场景给登录今日头条app的操作添加
日志采集
网易测试开发猿
·
2023-08-12 09:33
接口自动化
软件测试
自动化测试
软件测试
自动化测试
软件测试工程师
python自动化测试
接口自动化测试
接口自动化
logging
蓝鲸-监控告警
目前覆盖的监控对象包含主机层、组件层、服务拨测,对于无法开箱即用的监控对象可以使用脚本采集、
日志采集
以及组件二次开发,通过仪表盘实现自定义可视化视图呈现,基于iPaaS的产品设计(关联CMDB、作业执行
程序员杂谈
·
2023-08-10 15:20
运维管理
运维
监控
Flume原理剖析
一、介绍Flume是一个高可用、高可靠,分布式的海量
日志采集
、聚合和传输的系统。
Hello.Reader
·
2023-08-10 08:30
大数据
flume
大数据
企业场景--技术场景
项目中日志怎么采集的ELK进行
日志采集
logstashkibana操作总结查看日志命令日志的使用场景生产问题如何排查怎么快速定位系统的瓶颈单点登录如何实现jwt:token的方式cas,oauth2:框架方式
Java菜鸟尹先生
·
2023-08-10 00:30
java
开发语言
史上最细,自动化测试-logging
日志采集
详细实战(一)
目录:导读前言一、Python编程入门到精通二、接口自动化项目实战三、Web自动化项目实战四、App自动化项目实战五、一线大厂简历六、测试开发DevOps体系七、常用自动化测试工具八、JMeter性能测试九、总结(尾部小惊喜)前言日志概述1、日志作用在项目开发或测试过程中,项目运行一旦出现问题,记录日志信息就显得尤为重要。主要通过日志来定位问题,就好比侦探人员要根据现场留下的线索来推断案情。2、日
网易测试开发猿
·
2023-08-08 18:12
自动化测试
软件测试
接口自动化
软件测试
自动化测试
python自动化测试
接口自动化测试
web自动化测试
接口自动化
测试开发
【大数据】LPG
日志采集
方案(官网入门案例)
文章目录1.LPG简介2.安装3.测试日志方案的效果3.1.测试1:Promtail监控`/var/log`目录的变化3.2.测试2:Grafana可视化查看日志3.3.测试3:可以预见部署SpringBoot程序的日志也可以被Grafana查看3.4.踩坑记录4.官方入门案例介绍4.1.获得测试环境4.2.部署环境4.3.使用Grafana测试4.附录4.1.docker-compose脚本文件
Fire Fish
·
2023-08-05 00:36
大数据
分布式应用:ELFK集群部署
Beats在是一个轻量级
日志采集
器,其实
cronaldo91
·
2023-08-04 20:10
数据库
elk
哪一刻燃起了你与世界为敌的欲望?
恋爱诊疗中生命只有一次我们应当得偿所愿是工作是加班是没有加班费的加班是没有调休的加班是随叫随到没有养料的消耗型加班更是没完没了的持续间接性加班电影《恋爱诊疗中》平面设计师直男Yonne在持续性工作4天半后全身起疹瘙痒难耐,无奈去医院就诊时与美女医生
Imm
由雅小姐
·
2023-08-04 12:48
RISC-V基础指令之addi与lui(生成一个更大的立即数,包含负数符号拓展的特殊情况)
它的格式是:luird,
imm
其中,rd是目标寄存器,
imm
是20位的立即数。例如,luix1,0x12345会把0x12345000加载到x1寄存器中。
管二狗赶快去工作!
·
2023-08-04 05:03
RISC-V基础知识
risc-v
x仔的北漂实习日记-day01-02
负责的主要是某公司的
日志采集
系统,我负责的就是离线日志的采集和分析(之前学的是数仓,现在这个还用不到数仓,有点小失望,后续慢慢在看),而且
kiritobryant
·
2023-08-03 14:09
北漂实习记录
实习随笔
【电影推荐系统】实时推荐
概览技术方案:
日志采集
服务:通过利用Flume-ng对业务平台中用户对于电影的一次评分行为进行采集,实时发送到Kafka集群。
编程小白呀
·
2023-08-02 06:35
推荐系统
大数据
spark
推荐算法
【大数据之Flume】一、Flume定义及组成架构
1Flume定义 Flume是一个高可用的,高可靠的,分布式的海量
日志采集
、聚合和传输的系统。Flume基于流式架构,灵活简单。
阿宁呀
·
2023-07-30 12:11
flume
大数据
flume
架构
叶工好容5-日志与监控
目录前言平台维度docker运行状态cAdvisor-
日志采集
者Heapster-日志收集metrics-server-出生决定成败kube-state-metrics-不完美中的完美应用维度日志部署方式输出方式工具选择日志接入监控
牛麦康纳
·
2023-07-30 01:13
kubernetes-叶工好容
运维
kubernetes
云原生
架构
基于 Golang 的云原生
日志采集
服务设计与实践
云原生技术大潮已经来临,技术变革迫在眉睫。在这股技术潮流之中,网易推出了轻舟微服务云平台,集成了微服务、Servicemesh、容器云、DevOps等,已经广泛应用于公司集团内部,同时也支撑了很多外部客户的云原生化改造和迁移。在这其中,日志是平时很容易被人忽视的一部分,却是微服务、DevOps的重要一环。没有日志,服务问题排查无从谈起,同时日志的统一采集也是很多业务数据分析、处理、审计的基础。但是
Go中国
·
2023-07-29 14:59
运维
大数据
java
kubernetes
编程语言
k8s容器日志收集方案
背景由于以下容器本身特性和现有
日志采集
工具的缺陷,开发者在收集Kubernetes分布式集群日志时常常遇到困扰:容器本身特性:采集目标多:容器本身的特性导致采集目标多,需要采集容器内日志、容器stdout
only°夏至besos
·
2023-07-28 08:13
kubernetes
容器
云原生
【Android】点击屏幕上EditText区域以外的任何地方隐藏键盘的方法
InputMethodManagerimm=(InputMethodManager)context.getSystemService(Context.INPUT_METHOD_SERVICE);if(
imm
李翾
·
2023-07-28 07:08
JVM 不同垃圾回收器的日志格式分析
1、GC
日志采集
在服务器上我们需要配置一些参数才能采集到历史的GC日志信息,这些参数通常在项目启动的时候就需要指定,如果你项目是jar包,可以按照下面方式指定这些GC参数即可。
懒鸟一枚
·
2023-07-27 16:32
java基础
jvm
java
数仓学习---15、数据仓库工作流调度
1、数据仓库工作流调度1.1调度工具部署工具部署链接1.2新数据生成1.2.1用户行为日志1、启动
日志采集
通道,包括Kafka、Flume等(1)启动Zookeeperzk.shstart(2)启动Kafkakf.shstart
星光下的赶路人star
·
2023-07-27 08:34
数仓学习
学习
数据仓库
大数据
Filebeat 学习笔记
Filebeat是一个轻量级的
日志采集
工具,监听日志的修改,并将它们传给Elasticsearch或LogstashFilebeat工作流程如下图所示组成Filebeat主要包含inputs和harvesters
jiang_huixin
·
2023-07-27 04:02
#
Filebeat
filebeat
logstash
Filebeat学习笔记
Filebeat基本概念简介Filebeat是一种轻量级
日志采集
器,内置有多种模块(auditd、Apache、Nginx、System、MySQL等),针对常见格式的日志大大简化收集、解析和可视化过程
帅喵
·
2023-07-27 04:30
学习
笔记
【Spring Boot 集成应用】Kafka的集成用法
Kafka主要特点是基于Pull的模式来处理消息消费,追求高吞吐量,如果有大量的消息处理(10W+),对一致性要求不高,那么可以采用KAFKA,比如
日志采集
、数据同步与归档、实时流数据处理等场景。
麦神-mirson
·
2023-07-25 19:08
Spring
Cloud
生产级实践
kafka
spring
boot
java
一、大数据技术之Flume(简介)
第1章Flume概述1.1Flume定义Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量
日志采集
、聚合和传输的系统。Flume基于流式架构,灵活简单。
@我不是大鹏
·
2023-07-25 08:33
大数据技术
大数据
flume
【Flume 01】Flume简介、部署、组件
1Flume简介Flume是一个高可用、高可靠、分布式的海量
日志采集
、聚合和传输的系统主要特性:它有一个简单、灵活的基于流的数据流结构(使用Event封装)具有负载均衡机制和故障转移机制一个简单可扩展的数据模型
不菜不菜
·
2023-07-24 16:01
大数据
flume
大数据
还在纠结用哪款思维导图?来看看这款开源免费的桌面版导图!
IMM
。Xmind等等。今天大卫给大家推荐一款开源免费的思维导图:桌面版脑图:DesktopNaotu。01软件介绍桌面版脑图是一款非常简单实用的思维导图软件,该脑图是基于百度脑图打造的,在没有网络
西米正版软件
·
2023-07-24 02:31
输入法框架(InputMethod Framework)原理分析
1概述首先看一下输入法架构图:根据上面的架构图可以将输入法交互流程概况成如下几步:1>ClientApp启动时
IMM
(InputMethodManager的简称)被创建并且获取IMMS(InputMethodManagerService
耳东CY
·
2023-07-20 22:01
离线数仓16—— DolphinSchedule工作流调度
13.3.1DolphinScheduler集群模式13.3.2DolphinScheduler单机模式第13章数据仓库工作流调度13.1调度工具部署13.2新数据生成13.2.1用户行为日志1)启动
日志采集
通道
就是这个范~
·
2023-07-18 07:14
离线数仓
数据库
大数据
Elastic Stack之Logstash & Beats
文章目录Logstash简介&运行流程使用(
日志采集
)常用操作查看线程BeatFilebeatLogstash简介&运行流程教程一文快速上手Logstash使用(
日志采集
)配置logstash使用elasticsearch
rainbow_lucky0106
·
2023-07-18 04:29
ELKB
elasticsearch
logstash
大数据技术生态体系
2)Flume:Flume是一个高可用的,高可靠的,分布式的海量
日志采集
、聚合和传输的系
YOLO数据集工作室
·
2023-07-16 20:54
学习笔记
hadoop
大数据
分布式
006-Logstash、FileBeat、ELK整合详解
CodecPlugin-Multiline输出:elasticsearch输入:jdbcGrok插件Grok语法mutate插件Date插件LogstashQueueBeats配置步骤ELK整合步骤1:
日志采集
步骤
SunriseYin
·
2023-07-15 11:26
elasticsearch
elk
elasticsearch
rust abc(4): 定义变量并使用 mut 关键字
2.不可变变量(immutablevariable)2.1含义rust语言中定义的变量,默认是
imm
baiyu33
·
2023-07-15 01:14
rust
rust
开发语言
后端
云事业群CTO线技术晋升考核机试题-分布式专题-E 分布式
日志采集
2023年(Q3财年)技术部门CTO线技术人员晋升考核机试题分布式篇-E分布式
日志采集
*参考答案*出题人:湖北TL田超凡答案制定:湖北TL田超凡*****试卷启用前绝密****1传统
日志采集
存在哪些问题答
田超凡
·
2023-07-14 12:07
分布式
J2EE
Java架构I
java-ee
分布式
02.分布式
日志采集
ELK+Kafka
课程标题:1.传统
日志采集
存在哪些缺点2.elk+kafka
日志采集
的原理3.基于dockercompose安装elk+kafka环境4.基于AOP+并发队列实现日志的采集20点25分准时开始分布式
日志采集
产生背景在传统项目中
陌陌龙
·
2023-07-14 11:41
springboot
每特教育第十期
kafka
分布式
elk
分布式
日志采集
(elk+kafka)
所以需要一个方案将
日志采集
放到一个位置进行存储和查询。这里就可以使用elk+kafka的方式解决。elk(elasticsearch、logstash、kibana)的首字母缩写。
阿德小仔
·
2023-07-14 11:09
kafka
分布式
elk
ELK-日志服务【filebeat-安装使用】
目录【1】安装Filebeat【2】配置-测试【3】配置使用Filebeat【4】filebeat-收集系统文件日志【5】配置filebeat,将/var/log/all.log
日志采集
到es集群中【6
梦有一把琐
·
2023-07-14 01:04
ELK-日志服务
elk
服务器
linux
filebeat
A64指令集如何将64位的数值写入通用寄存器
ATF中,通过宏定义,使得可以通过mov_immreg,
imm
的形式向通用寄存器中写入32bit或64bit的值。.
伯春岱
·
2023-07-13 23:19
assembly
arm
云原生日志Agent/Aggregator
Loggie是一个基于Golang的轻量级、高性能、云原生
日志采集
Agent和中转处理Aggregator,支持多Pipeline和组件热插拔,提供了:●一栈式日志解决方案:同时支持日志中转、过滤、解析
星光落入你灰蒙蒙的眼
·
2023-07-13 19:09
#
Loggie
云原生
linux
centos
kubernetes
Loggie
7年沉淀之作--滴滴Logi日志服务套件
基于开源引擎Kafka/ElasticSearch,构建了日志基础设施的基础架构共识:
日志采集
能力:服务端、客户端、Web、数据库的日志搜集工作;日志ETL能力:日志实时ETL、ETL链路监控,ETL链路质量度量
服务可观测性
·
2023-06-24 11:50
flume快速上手
Flume定义Flume最初是Cloudera公司推出的一个高可用、高可靠的,分布式的海量
日志采集
、聚合和传输的系统,于2009年被捐赠给了Apche基金会,成为Hadoop相关组件之一Flume支持在日志系统中定制各类数据发送方
书香恋仁心
·
2023-06-23 20:03
flume
flume
filebeat->kafka>elk
日志采集
kafka常用命令查看所有topic./kafka-topics.sh--zookeeper10.1.10.163:2181--list查看kafka中指定topic的详情./kafka-topics.sh--zookeeper10.1.10.163:2181--topicai_jl_analytic--describe查看消费者consumer的group列表./kafka-consumer-g
不求甚解误入此道
·
2023-06-22 09:05
kafka
elk
java
grafana Loki
日志采集
系统部署与学习
lokiLoki是受Prometheus启发的水平可扩展,高度可用的多租户日志聚合系统。它的设计具有很高的成本效益,并且易于操作。它不索引日志的内容,而是为每个日志流设置一组标签。日志对比ELKstack和Graylog,ELK目前很多公司都在使用,是一种很不错的分布式日志解决方案,但是需要的组件多,部署和维护相对复杂,并且占用服务器资源多。底层存储是es导致占用服务器资源过多LokivsELKL
·
2023-06-21 14:32
电商数仓(用户行为采集平台)数据仓库概念、用户行为日志、业务数据、模拟数据、用户行为数据采集模块、
日志采集
Flume
1、数据仓库概念数据仓库(DataWarehouse),是为企业制定决策,提供数据支持的。可以帮助企业,改进业务流程、提高产品质量等。数据仓库的输入数据通常包括:业务数据、用户行为数据和爬虫数据等。业务数据:就是各行业在处理事务过程中产生的数据。比如用户在电商网站中登录、下单、支付等过程中,需要和网站后台数据库进行增删改查交互,产生的数据就是业务数据。业务数据通常存储在MySQL、Oracle等数
星光下的赶路人star
·
2023-06-21 01:17
数仓学习
数据仓库
flume
大数据
kafka
数据库
Kafka与Flume区别
先说flume:
日志采集
。线上数据一般主要是落地文件或者通过socket传输给另外一个系统。这种情况下,你很难推动线上应用或服务去修改接口,直接向kafka里写数据。
weixin_30642029
·
2023-06-20 00:21
大数据
数据库
后端
Kafka与Flume的联系和应用场景
参考文章:Flume和Kafka的区别与联系
日志采集
系统flume和kafka有什么区别及联系,它们分别在什么时候使用,什么时候又可以结合?
梦想猿
·
2023-06-20 00:16
大数据学习
kafka
flume
hadoop
Kubernetes Ingress 日志分析与监控的最佳实践
为简化广大用户对于Ingress日志分析与监控的门槛,阿里云容器服务和日志服务将Ingress日志打通,只需要应用一个yaml资源即可完成
日志采集
、分析、可视化等一整套Ingress日志方案的部署。
·
2023-06-19 19:44
Mysql
日志采集
为什么通过日志方式采集数据?减少对业务库的入侵,如果使用全量方式获取数据会对业务库造成很大的性能影响。通过流式采集binlog对业务库的入侵性降到最低。目前流式采集binlog的几种开源方案1.Maxwellmaxwell是读取mysqlbinlogs并将行更新为json格式数据到kafka,kinesis,或者其他流式平台一个守护进程。Maxwell的操作开销很低,只需要mysql和一个写入位置
GreanTea
·
2023-06-18 21:14
《阿里大数据之路》读书笔记:第一章 总述
数据来源主要有两部分:业务数据:主要存在数据库中日志数据:主要来自于日志文件
日志采集
技术:Aplus.JS:Web端
日志采集
技术方案UserTrack:APP端
日志采集
技术方案消息
蓦然_
·
2023-06-18 14:38
数据仓库
大数据
数据仓库
SpringCloud 分布式
日志采集
方案
点击上方“Java基基”,选择“设为星标”做积极的人,而不是积极废人!每天14:00更新文章,每天掉亿点点头发...源码精品专栏原创|Java2021超神之路,很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT源码解析作业调度中间件Elastic-Job源码解析分布式事务中间件T
Java基基
·
2023-06-18 06:00
中间件
分布式
java
spring
boot
spring
华为OD机试真题 Java 实现【
日志采集
系统】【2023Q1 100分】
一、题目描述
日志采集
是运维系统的的核心组件。日志是按行生成,每行记做一条,由采集系统分批上报。
哪 吒
·
2023-06-16 23:43
java
华为
开发语言
算法
面试
IBM X3650M4硬盘故障处理,硬盘指示灯没有亮起
具体故障现象:服务器显示面板HDD灯显示黄色,但是硬盘活动指示灯没有亮起,无法确认是哪一个硬盘需要更换如下图所示:处理方法:服务器后端有
IMM
管理口接口,接上电脑,然后打开浏览器,输入
IMM
默认IP地址
青阳小彭
·
2023-06-16 06:04
网络
运维
web服务器
使用asu工具进行修改
IBM3650M5修改主板序列号进入到asu的文件目录运行asu工具进入到asu的文件目录asu工具可以修改主板的SN,PN号等,前提是需要有
IMM
的账户名称和密码信息,笔记本配置可以和
IMM
联通后,打开
青阳小彭
·
2023-06-16 06:04
服务器
运维
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他