日志平台第3页

企业级日志平台新秀！比 ELK 更轻量、更高效

当我们公司内部部署很多服务以及测试、正式环境的时候，查看日志就变成了一个非常刚需的需求了。是多个环境的日志统一收集，然后使用Nginx对外提供服务，还是使用专用的日志收集服务ELK呢？这就变成了一个问题！而Graylog作为整合方案，使用Elasticsearch来存储，使用MongoDB来缓存，并且还有带流量控制的（throttling），同时其界面查询简单易用且易于扩展。所以，使用Graylo

·2021-12-19 14:38

【CDS技术揭秘系列 02】阿里云CDS-SLS大揭秘

简介：CDS-SLS作为云化的日志平台，将组件进行高内聚低耦合，线下用户最低可以在6台规模的机器上将上述所有的功能自动化部署，在运维、运营、财务管理、数据分析报表等大数据场景领域以低代码模式有效解决传统软件中的痛点

·2021-10-07 16:51

使用ELK搭建日志平台（四）：使用 OpenTelemetry SDK

什么是OpenTelemetry？OpenTelemetry合并了OpenTracing和OpenCensus项目，提供了一组API和库来标准化遥测数据的采集和传输使用OpenTelemetrySDKOpenTelemetry.NEThttps://github.com/open-telemetry/opentelemetry-dotnet1.打开VS2019（Version16.9.7）创建项目

天助强者·2021-06-16 12:46

使用ELK搭建日志平台（三）：Opentracing链路追踪

转载自：https://www.cnblogs.com/linguoguo/p/12311225.htmlOpentracing链路追踪在微服务架构的系统中，请求在各服务之间流转，调用链错综复杂，一旦出现了问题和异常，很难追查定位，这个时候就需要链路追踪来帮忙了。链路追踪系统能追踪并记录请求在系统中的调用顺序，调用时间等一系列关键信息，从而帮助我们定位异常服务和发现性能瓶颈。Opentracing

天助强者·2021-06-15 08:09

使用ELK搭建日志平台（二）：使用Serilog写入日志到Elasticsearch中

目录前言创建.NETCORE3.1应用程序在Kibana中查看稍微拓展一下前言之前在本地搭建好了Elasticsearch，现在考虑使用最简单的方式将应用程序的日志信息写入其中。测试的程序使用的是.NETCORE3.1，利用Serilog组件快速写入一些日志。这篇文档唯一的目标就是快速实现，之后的文章在做分析和讲解。创建.NETCORE3.1应用程序利用VisualStudio2019快速创建一个

天助强者·2021-05-14 13:12

使用ELK搭建日志平台（一）：本地安装Elasticsearch 和 Kibana

（ElasticCloudonKubernetes）快速启动一个ES快速启动一个Kibana后续计划前言最近一个客户在使用ELK（Elasticsearch、Logstash和Kibana）作为企业的日志平台

天助强者·2021-05-14 10:52

使用Java 压缩文件打包tar.gz 包的详细教程

相信大家对集中式日志平台ELK都知道一些，生产环境中,稍复杂的架构，服务一般都是集群部署，这样，日志就会分散在每台服务器上，一旦发生问题，想要查看日志就会非常繁琐，你需要登录每台服务器找日志，因

·2021-05-13 11:48

java版spring cloud+spring boot+redis社交电子商务平台（二十五）sprinboot整合elk，搭建实时日志平台

elk简介Elasticsearch是个开源分布式搜索引擎，它的特点有：分布式，零配置，自动发现，索引自动分片，索引副本机制，restful风格接口，多数据源，自动搜索负载等。Logstash是一个完全开源的工具，他可以对你的日志进行收集、过滤，并将其存储供以后使用（如，搜索）。Kibana也是一个开源和免费的工具，它Kibana可以为Logstash和ElasticSearch提供的日志分析友好

ITsupuerlady·2021-04-18 21:48

企业级日志平台后起之秀 Graylog！

服务日志收集工具Filebeat介绍可参考：ELK+Filebeat搭建日志系统Graylog服务介绍Graylog-日志监控系统Graylog是一个开源的日志聚合、分析、审计、展现和预警工具。在功能上来说，和ELK类似，但又比ELK要简单很多。依靠着更加简洁，高效，部署使用简单的优势很快受到许多人的青睐。当然，在扩展性上面确实没有比ELK好，但是其有商业版本可以选择。Graylog-工作流程介绍

·2021-03-11 02:31

企业级日志平台后起之秀 Graylog！

服务日志收集工具Filebeat介绍可参考：ELK+Filebeat搭建日志系统Graylog服务介绍Graylog-日志监控系统Graylog是一个开源的日志聚合、分析、审计、展现和预警工具。在功能上来说，和ELK类似，但又比ELK要简单很多。依靠着更加简洁，高效，部署使用简单的优势很快受到许多人的青睐。当然，在扩展性上面确实没有比ELK好，但是其有商业版本可以选择。Graylog-工作流程介绍

·2021-03-11 02:31

ELK Stack 日志平台性能优化实践

性能分析服务器硬件Linux：1cpu4GRAM假设每条日志250Byte。分析：①logstash-Linux：1cpu4GRAM每秒500条日志；去掉ruby每秒660条日志；去掉grok后每秒1000条数据。②filebeat-Linux：1cpu4GRAM每秒2500-3500条数据；每天每台机器可处理：24h*60min*60sec*3000*250Byte=64,800,000,000

·2021-01-21 16:37

ELK Stack 日志平台性能优化实践

性能分析服务器硬件Linux：1cpu4GRAM假设每条日志250Byte。分析：①logstash-Linux：1cpu4GRAM每秒500条日志；去掉ruby每秒660条日志；去掉grok后每秒1000条数据。②filebeat-Linux：1cpu4GRAM每秒2500-3500条数据；每天每台机器可处理：24h*60min*60sec*3000*250Byte=64,800,000,000

·2021-01-21 15:07

更便捷：阿里云DCDN离线日志转存全新升级

传统的日志下载需要先登录控制台进行日志下载，再结合客户自身的日志平台进行分析管理，流程中存在大量人工定时介入和定制开发。而新型的日志转存将为客

阿里云云栖号·2021-01-11 11:16

jmeter压测发现redis无法获取到连接

然后就登录sentry日志平台查看异常，发现有几千个jedis相关的异常异常信息：获取不到redis链接SpringBoot版本：2.0.8.RELEASEjedis:2.9.0commons-pool2

Java分布式架构实战·2020-11-10 21:55

Node应用排查

1错误日志统一日志平台，对于频繁出现的错误日志应当引起警惕。需要结合产生的错误代码进行回溯确认是否是造成当前服务器不稳定的元凶。

IT女神_·2020-11-09 15:23

白话 Elasticsearch 7.x 基础入门篇

案例一：每个公司都有业务日志平台，比如交易业务日志。文档：每一条日志文件中的日志项，就是文档案

kevin_吴敏·2020-09-15 02:48

基于ELK搭建MySQL日志平台的要点和常见错误

第一部分概括传奇https://www.xs86.comELK是集分布式数据存储、可视化查询和日志解析于一体的日志分析平台。ELK=elasticsearch+Logstash+kibana，三者各司其职，相互配合，共同完成日志的数据处理工作。ELK各组件的主要功能如下：elasticsearch，数据存储以及全文检索；logstash，日志加工、“搬运工”；kibana：数据可视化展示和运维管理

keocce·2020-09-12 02:17

logstash日志平台搭建

logstash+elasticsearch+kibana日志平台的搭建一、概念介绍logstash是一个开源工具，可以对日志进行收集、分析，并将其存储供以后使用。

huazi-V·2020-08-25 08:29

Springboot项目使用aop切面保存详细日志到ELK日志平台

上一篇讲过了将Springboot项目中logback日志插入到ELK日志平台，它只是个示例。这一篇来看一下实际使用中，我们应该怎样通过aop切面，拦截所有请求日志插入到ELK日志系统。

天涯泪小武·2020-08-23 11:12

如何建设高吞吐量的日志平台

  7月24日晚上8点，七牛云高级大数据架构师王珂在飞马网进行了题为《如何快速搭建智能化的统一日志管理系统》的音频直播，和大家探讨了日志平台建设中需要考虑的要点，并分享了七牛云在提高日志平台吞吐量上的实践经验

七牛云·2020-08-22 10:36

阿里PB级Kubernetes日志平台建设实践

摘要：将在QCon上分享的《阿里PB级Kubernetes日志平台建设实践》整理出来，分享给大家。

阿里云云栖号·2020-08-21 19:06

elk+logback+redis 搭建日志平台

日志平台背景：日志的分析和监控在系统开发中占非常重要的地位，系统越复杂，日志的分析和监控就越重要，常见的需求有:根据关键字查询日志详情监控系统的运行状况统计分析，比如接口的调用次数、执行时间、成功率等异常数据自动触发消息通知基于日志的数据挖掘很多团队在日志方面可能遇到的一些问题有

jackl_都都·2020-08-21 16:42

写作初衷

libinlarry·2020-08-20 16:12

iOS-崩溃日志收集(Bugly&BugHD)

别怕,有很多第三方平台帮我们实时监控崩溃日志,并且能分析崩溃的原因及位置等信息下面介绍两款简小的监控奔溃日志平台:Bugly和BugHD一Bugly快速集成1创建项目，获取AppId点击进入Bugly官网

iMazy·2020-08-16 18:13

Core + Vue 后台管理基础框架9——统一日志

一个充分、集中的统一日志平台还是很有必要的，否则系统出问题了只能靠猜或者干瞪眼。

GUOKUN·2020-08-15 12:00

Apollo+ES源码改造，构建民生银行的ELK日志平台配置管理中心

作者|中国民生银行大数据基础平台运维组团队编辑|张婵随着IT业务系统的迅速发展，中国民生银行需要考虑实现一套完整并适用于民生银行的日志文件智能分析与处理的解决方案。本文详细介绍了中国民生银行大数据基础平台运维组团队通过改造Apollo和ES的源码，构建了自己的天眼实时智能日志管理分析平台。背景随着中国民生银行的IT业务系统的迅速发展，主机、设备、系统、应用软件数量不断增多，业务资源访问、操作量不断

高效开发运维·2020-08-15 04:54

百亿级日志系统架构设计及优化

日志系统架构基准有过项目开发经验的朋友都知道：从平台的最初搭建到实现核心业务，都需要有日志平台为各种业务保驾护航。如上图所示，对于一个简单的日志应用场景，通常会准备master/slave两个应用。

yunzhaji3762·2020-08-14 22:33

clickhouse日志平台建设2 - 集群搭建

在安装clickhouse集群前，先学习一下clickhouse集群的概念。shard数据分片把一份数据切分为多份，分别放在不同的数据库服务器上，通过多台服务器资源提升数据访问效率。主要用于提升性能。如下图示：shared原Collectionl有1TB数据，进行分片后，数据拆分为4份，每份256G。就是说：将原来1TB的数据需要1台服务器来计算的工作量，通过分片后改为：1TB的数据用4台服务器来

zf_tang·2020-08-14 11:30

企业级 SpringBoot 教程（二十五）sprinboot整合elk，搭建实时日志平台

elk简介Elasticsearch是个开源分布式搜索引擎，它的特点有：分布式，零配置，自动发现，索引自动分片，索引副本机制，restful风格接口，多数据源，自动搜索负载等。SpringCloud大型企业分布式微服务云架构源码请加一七九一七四三三八零Logstash是一个完全开源的工具，他可以对你的日志进行收集、过滤，并将其存储供以后使用（如，搜索）。Kibana也是一个开源和免费的工具，它Ki

weixin_34220834·2020-08-14 08:21

springboot2.X手册：抛弃ELK，百亿日志+调用链的Easylog很放心

前几天无意间发现了一个轻量级的日志平台，分享一下给大家。Plumelog简介1、基于Java的一个分布式日志系统，支持百亿级别2、支持调用链的记录写入，方便进行链路追踪，如果接触过skywal

java梦想口服液·2020-08-10 04:17

zookeeper（二）使用zookeeper实现分布式锁

它为什么会产生现在我们的项目大多都是分布式部署的，分布式部署一个显而易见的好处就是可以减轻服务器的压力，但也带来一系列的问题，比如：分布式session一致性问题、分布式配置中心、分布式任务调度平台、分布式日志平台

落日余晖~XXH·2020-08-09 11:46

基于Kafka+ELK搭建海量日志平台

早在传统的单体应用时代，查看日志大都通过SSH客户端登服务器去看，使用较多的命令就是less或者tail。如果服务部署了好几台，就要分别登录到这几台机器上看，等到了分布式和微服务架构流行时代，一个从APP或H5发起的请求除了需要登陆服务器去排查日志，往往还会经过MQ和RPC调用远程到了别的主机继续处理，开发人员定位问题可能还需要根据TraceID或者业务唯一主键去跟踪服务的链路日志，基于传统SSH

mhHao·2020-08-06 10:03

搭建 ELK 实时日志平台并在 Spring Boot 和 Nginx 项目中使用

在排查线上异常的过程中，查询日志总是必不可缺的一部分。现今大多采用的微服务架构，日志被分散在不同的机器上，使得日志的查询变得异常困难。工欲善其事，必先利其器。如果此时有一个统一的实时日志分析平台，那可谓是雪中送碳，必定能够提高我们排查线上问题的效率。本文带您了解一下开源的实时日志分析平台ELK的搭建及使用。ELK简介ELK是一个开源的实时日志分析平台，它主要由Elasticsearch、Logst

小技术君·2020-08-04 06:44

前端线上故障响应方法

机动人员处理问题流程：第一时间在问题群内同步自己开始跟进问题评估问题影响范围，确认问题的严重性，考虑是否回滚和走降级流程，将结果反馈到研发owner目前监控平台：实时数据监控平台prajna，实时错误日志平台

weixin_34203426·2020-08-04 05:21

Spring Boot （日志篇）：Log4j2整合ELK，搭建实时日志平台

一、安装JDK1.8以上版本1、从Oracle官网上下载Linuxx64版本的下载地址：http://www.oracle.com/technetwork/java/javase/downloads/jre8-downloads-2133155.htmljdk-8u201-linux-x64.tar.gz2、解压jdk安装包并创建软连接：tarzxf/usr/local/src/jdk-8u201

weixin_30372371·2020-08-04 04:53

ELK 实时日志平台搭建并在 Spring Boot 和 Nginx 项目中使用

ELK实时日志平台搭建并在SpringBoot和Nginx项目中使用目录:ELK简介ELK的工作原理ElasticsearchLogstashKibanaSpringBoot中使用ELKNginx中使用

光速之年·2020-08-03 10:40

安卓开发——GridView反复调用position=0的getView()

发现这个问题的起因是：服务端同事说最近日志平台出现了很多请求图片错误的日志，看ua信息判断是我们Android客户端请求的，是同一张错误图片，且请求频率很高（同一用户1s内请求很多次）。

萌鼠喝酸奶·2020-08-02 20:47

springboot配置多个mongodb实现动态切换

日志平台要连接多个mongo库做日志统一查询，使用springboot的多Template模式不能做到动态切换，所以这里做一个动态模板实现自动切换。

Mr_daiven·2020-08-01 10:48

阿里云使用笔记-第六篇-CentOS搭建Sentry日志监控平台

一,前言由于前端项目运行在用户各自电脑的浏览器上,对于浏览器差异所导致的问题,正常情况下是没有办法拿到的我们可以使用日志监控平台对客户端产生的问题进行收集统计,以便及时处理搭建Sentry(哨兵)日志平台

BraveWangDev·2020-07-31 13:35

CentOS 使用 Docker 安装 Sentry

官网介绍：Sentry是一个实时事件日志记录和汇集的日志平台，其专注于错误监控，以及提取一切事后处理所需的信息。

weixin_34358092·2020-07-31 12:56

百亿访问量的监控平台如何炼成？

：李春旭，2016年加入WiFi万能钥匙，现任WiFi万能钥匙高级架构师，十年互联网研发经验，喜欢折腾技术，曾供职于快钱、阿里巴巴、平安健康等公司，专注于以下领域：分布式监控平台、调用链跟踪平台、统一日志平台

高效运维·2020-07-30 11:26

有赞百亿级日志系统架构设计

日志平台为集团所有业务系统提供日志采集、消费、分析、存储、索引和查询的一站式日志服务。主要为了解决日志分散不方便查看、日志搜索操作复杂且效率低、业务异常无法及时发现等等问题。

weixin_33892359·2020-07-28 18:30

分享：有赞百亿级日志系统架构设计

日志平台为集团所有业务系统提供日志采集、消费、分析、存储、索引和查询的一站式日志服务。主要为了解决日志分散不方便查看、日志搜索操作复杂且效率低、业务异常无法及时发现等等问题。

Java-飞鱼·2020-07-28 08:02

Docker和ELK搭建日志平台

原作者：灼灼2015链接：https://www.jianshu.com/p/460a307adebbElasticsearch,Logstash和Kibana简称ELK，是日志平台。

sweet_yx·2020-07-15 03:54

ELK采集Mysql、Oracle配置

进入这篇文章的人默认是已经搭建好ELK的日志平台一、概述1、日志有什么用？日志主要包括系统日志、应用程序日志和安全日志。

江离·2020-07-15 00:22

linux中搭建ElasticSearch-2.x Logstash-2.x Kibana-4.5.x Kafka为消息中心的ELK日志平台

介绍ELK是业界标准的日志采集,存储索引,展示分析系统解决方案logstash提供了灵活多样的插件支持不同的input/output主流使用redis/kafka作为日志/消息的中间环节如果已有kafka的环境了,使用kafka比使用redis更佳以下是一个最简化的配置做个笔记,elastic官网提供了非常丰富的文档不要用搜索引擎去搜索,没多少结果的,请直接看官网文档采用的ELK/kafka版本e

舒琪·2020-07-14 22:28

Sentry--错误日志收集框架

---官网介绍Sentry是一个实时事件日志记录和汇集的日志平台，其专注于错误监控，以及提取一切事后处理所需的信息。他基于Django开发，目的在于帮助开发人员从散落在多个不同服

weixin_34297704·2020-07-13 18:33

Spark Streaming全天候实时top N实现

1.背景介绍公司的日志平台是通过sparkstreaming消费kafka上的数据，解析完毕后直接存入到hdfs，然后到了每天凌晨通过pig脚本来对前一天的hdfs上的全量数据进行统计分析，得出前一天的日志的各项指标

KLordy·2020-07-11 10:20

【方案】利用服务器或者nas的docker，部署一个自动的少维护的git服务器。

文章结构利用gitlab/gogs创建高可用的git服务器前言日志平台创建1、git-lib（提供简易自动化脚本）2、gogs（提供建议自动化脚本）3、威联通（gogs）威联前提条件创建命令和脚本注意事项总结利用

一只蛋黄·2020-07-10 10:18

如何记录网内用户访问了哪些网站

用户可以通过丰富的功能、报告和日志平台统一地管理全部安全特性，包括用户访问日志、网站访问记录等。这次我们先就如

weixin_34191845·2020-07-08 17:38

推荐频道

日志平台

企业级日志平台新秀！比 ELK 更轻量、更高效

【CDS技术揭秘系列 02】阿里云CDS-SLS大揭秘

使用ELK搭建日志平台（四）：使用 OpenTelemetry SDK

使用ELK搭建日志平台（三）：Opentracing链路追踪

使用ELK搭建日志平台（二）：使用Serilog写入日志到Elasticsearch中

使用ELK搭建日志平台（一）：本地安装Elasticsearch 和 Kibana

使用Java 压缩文件打包tar.gz 包的详细教程

java版spring cloud+spring boot+redis社交电子商务平台 （二十五）sprinboot整合elk，搭建实时日志平台

企业级日志平台后起之秀 Graylog！

企业级日志平台后起之秀 Graylog！

ELK Stack 日志平台性能优化实践

ELK Stack 日志平台性能优化实践

更便捷：阿里云DCDN离线日志转存全新升级

jmeter压测发现redis无法获取到连接

Node应用排查

白话 Elasticsearch 7.x 基础入门篇

基于ELK搭建MySQL日志平台的要点和常见错误

logstash日志平台搭建

Springboot项目使用aop切面保存详细日志到ELK日志平台

如何建设高吞吐量的日志平台

阿里PB级Kubernetes日志平台建设实践

elk+logback+redis 搭建日志平台

写作初衷

iOS-崩溃日志收集(Bugly&BugHD)

Core + Vue 后台管理基础框架9——统一日志

Apollo+ES源码改造，构建民生银行的ELK日志平台配置管理中心

百亿级日志系统架构设计及优化

clickhouse日志平台建设2 - 集群搭建

企业级 SpringBoot 教程 （二十五）sprinboot整合elk，搭建实时日志平台

springboot2.X手册：抛弃ELK，百亿日志+调用链的Easylog很放心

zookeeper（二）使用zookeeper实现分布式锁

基于Kafka+ELK搭建海量日志平台

搭建 ELK 实时日志平台并在 Spring Boot 和 Nginx 项目中使用

前端线上故障响应方法

Spring Boot （日志篇）：Log4j2整合ELK，搭建实时日志平台

ELK 实时日志平台搭建并在 Spring Boot 和 Nginx 项目中使用

安卓开发——GridView反复调用position=0的getView()

springboot配置多个mongodb实现动态切换

阿里云使用笔记-第六篇-CentOS搭建Sentry日志监控平台

CentOS 使用 Docker 安装 Sentry

百亿访问量的监控平台如何炼成？

有赞百亿级日志系统架构设计

分享：有赞百亿级日志系统架构设计

Docker和ELK搭建日志平台

ELK采集Mysql、Oracle配置

linux中搭建ElasticSearch-2.x Logstash-2.x Kibana-4.5.x Kafka为消息中心的ELK日志平台

Sentry--错误日志收集框架

Spark Streaming全天候实时top N实现

【方案】利用服务器或者nas的docker，部署一个自动的少维护的git服务器。

如何记录网内用户访问了哪些网站

java版spring cloud+spring boot+redis社交电子商务平台（二十五）sprinboot整合elk，搭建实时日志平台

企业级 SpringBoot 教程（二十五）sprinboot整合elk，搭建实时日志平台