ELK日志分析平台搭建

Elasticsearch + Logstash + Kibana搭建ELK日志分析平台（官方推荐的BEATS架构）

俗话话说的号，没有金刚钻，也不揽那瓷器活；日志分析可以说是所有大小系统的标配了，不知道有多少菜鸟程序员有多喜欢日志，如果没了日志，那自己写的bug想不被别人发现，可就难了；有了它，就可将bug们统统消化在自己手里。当然了，作为一个架构师搭建动手搭建一个日志平台也基本是必备技能了，虽然我们说架构师基本不咋写代码了，但是如果需要的时候，还是能扛枪的大家可以看下架构师要具备的能力：那些年薪50万，却不写
·2022-07-27 15:19

（十九）从零开始搭建k8s集群——使用KubeSphere管理平台搭建一套微服务的压力测试性能监控平台（Grafana8.5.2+influxdb2.2.0+Jmeter5.4.1）

前言压力测试是测试系统应用瓶颈的重要手段之一，无论是单应用还是微服务，对于高并发、频繁访问的接口实行压力测试都是有必要的。本节内容我们依然使用kubesphere平台，搭建一套k8s环境下的压力测试性能监控平台，用于应用接口的压力测试，并达到实时监控展示的效果。使用的技术方案为：使用influxdb2时序数据库存储压力测试的结果数据，使用jmeter5整合influxdb2的控制器完成压力测试结果
北溟溟·2022-07-26 07:00

（十三）从零开始搭建k8s集群——使用KubeSphere管理平台搭建一个高可用的zookeeper版kafka集群服务

前言kafka是分布式环境下常用的MQ消息中间键之一，能够实现流量削峰、异步解耦等等功能，大数据环境下常常使用其实现海量数据的收集。本节内容我们主要介绍一下使用kubesphere平台安装一个k8s环境下依赖zookeeper服务的高可用的kafka集群服务。关于zookeeper的集群服务安装，请读者参考作者往期博客内容，关注我，不迷路。正文关于kafka的docker镜像资源的说明①kafka
北溟溟·2022-07-26 07:00

捷码赋能案例：数据可视化展示，一屏知扶贫资产全动态

利用捷码平台搭建了扶贫资产可视化大屏及管理系统后，实现各类扶贫数据可视化展示、数据动态管理。
·2022-07-25 10:09

Ops.CI/CD-K8S 学习笔记

包括minikube，云平台搭建，裸机搭建（3台服务器）。
·2022-07-24 12:36

【How To 系列】好友裂变平台搭建

码匠是什么？码匠是一款国内研发的开发者友好的低代码平台，您无需了解React/Vue等框架的开发、部署等各种细节，就可以快速打通前后端，连接RESTAPI、MySQL、MongoDB等多种数据源，然后通过一套开箱即用的组件，轻松搭建功能完善的数据看板、数据洞察、Admin管理后台等多种应用。码匠主要面向国内用户，相较于国外开发的Admin/CRM/CMS等后台工具，码匠的UI界面设计更加适合国内业
·2022-07-21 17:24

Spark大数据分析平台搭建

1摘要利用虚拟机实现Spark环境搭建，理解掌握大数据分析集群工作原理。2题目解析面对海量的各种来源的数据，如何对这些零散的数据进行有效的分析，得到有价值的信息一直是大数据领域研究的热点问题。大数据分析处理平台就是整合当前主流的各种具有不同侧重点的大数据处理分析框架和工具，实现对数据的挖掘和分析，一个大数据分析平台涉及到的组件众多，如何将其有机地结合起来，完成海量数据的挖掘是一项复杂的工作。在搭建
m牛眼睛·2022-07-20 18:24

前端自动化打包实践

前言分三部分：gulp介绍自动化打包脚本编写；gerrit介绍工作流；gitlab-ci介绍平台搭建。每部分都会结合做过的两个项目进行总结，希望对大家有所帮助。
·2022-07-17 18:07

ELK日志分析集群部署

目录一、ELK简介1、ELK日志分析系统组成2、Elasticsearch（es）3、Logstash3、Kibana2、日志处理步骤二、Elasticsearch介绍1、Elasticsearch核心概念接近实时
wwwu1998·2022-07-15 14:06

第一章 QEMU虚拟机与ARM64平台搭建

系列文件目录《ARM64体系结构结构编程与实践》学习与应用记录第一章QEMU虚拟机与ARM64平台搭建文章目录系列文件目录本章前言一、ubuntu虚拟机安装1.ubuntu20.04镜像下载2.镜像安装
松下鱼·2022-07-12 17:25

Zabbix 监控平台搭建实验

Zabbix监控平台搭建实验前言本文重点在于Zabbix监控平台的工作原理与运行原理，后面会将详细的搭建流程展示，如有错误和遗漏的地方，欢迎大家指正，谢谢。基础理论说明Zabbix是什么？
Vonmerlot·2022-07-06 09:14

捷码赋能案例：协助毕业生高质量搭建毕业设计——智慧校园系统，答辩过关

“李同学的毕业设计——智慧校园系统就是通过捷码平台搭建的。当时临近毕业，工期比较赶，通过应用需求梳理、专业培训及技术支撑等服务，李同学在10个工作日内快速搭建了系统。
·2022-07-04 12:06

Kubernetes K8S之Helm部署EFK日志分析系统

KubernetesK8S之Helm部署ELK日志分析系统；由于Logstash比较消耗资源，因此本次我们使用Fluentd实现日志收集（EFK）。
LightZhang666·2022-07-03 20:19

饿了么交易系统 5 年演化史

2017年做了一些平台搭建的探索。2018年初负责整个订单正逆向和交
阿里加多·2022-07-01 12:37

RocketMQ

BrokerServer消息内容Message消息主题Topic标签Tag消息队列MessageQueue消息中间件核心概念RocketMQ环境搭建下载RocketMQwindow的安装配置Linux环境搭建监控平台搭建
磊哥的小迷妹·2022-06-29 16:34

ELK + filebeat日志解析、日志入库优化 、logstash过滤器配置属性

文章目录前言优化结果实现logstashfilebeat前言前段时间不是搭建了一套ELK日志分析系统嘛，然后日志是通过beats读取落地日志，推送给logstash，然后再由logstash推送到elasticsearch
fate急速出击·2022-06-27 23:08

手把手教你搭建OpenStack云平台（超级详细）

一、前言OpenStack云平台搭建需要两个节点，一个是controller（控制节点），另一个是compute（计算节点）。控制节点（controller）规划如下：一块200G的硬盘。
0醒醒·2022-06-27 22:57

基于STM32F103+涂鸦三明治的宠物自动喂食器

涂鸦三明治的宠物喂食器方案概述方案应用场景技术要点硬件概述涂鸦IOT平台搭建项目通信功能调试wifi模组调试MCU调试完善功能添加配网功能及指示灯函数添加小夜灯执行功能添加手动喂食执行功能触摸屏手动喂食温湿度采集显示本文章允许涂鸦智能转载使用方案概述方案应用场景该方案应用于铲屎官们家中的宠物喂食
呐咯密密·2022-06-23 09:19

（十二）从零开始搭建k8s集群——使用KubeSphere管理平台搭建一个高可用的zookeeper集群服务

前言ZooKeeper是Apache的一个顶级项目，为分布式应用提供高效、高可用的分布式协调服务，提供了诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知和分布式锁等分布式基础服务。往期的博客内容我们已经介绍过其作为分布锁的应用案例实战内容，本节内容我们主要介绍一下使用kubesphere平台安装一个k8s环境下高可用的zookeeper集群服务。正文关于zookeeper的docker镜像
北溟溟·2022-06-21 11:23

（十六）从零开始搭建k8s集群——使用KubeSphere管理平台搭建一个高可用的ElasticSearch服务平台

本节内容我们使用kubesphere管理平台搭建一个k8s环境下的高可用的es集群服务。
北溟溟·2022-06-21 11:23

WIN10+RTX 2080Ti深度学习平台搭建，VS2019+CUDA11.0+cuDNN8.0+python3.8.7+Tensorflow2.4.0+Keras，以及各种科学包

WIN10+RTX2080Ti深度学习平台搭建前置声明：博文中有一些图片来自网上截图（因为安装完成后做的记录，有些安装过程图嫌麻烦没有复现），侵删。
吃橘子容易上火·2022-06-19 07:21

jenkins+maven+git自动化部署平台搭建

一、1、下载git2、创建本地仓库、初始化二、1、下载gitlab2、赋权限连接远程仓库3、git生成公钥，粘贴进gitlab4、[email protected]:cbs/cbs.git验证可以拉取代码到本地三、1、下载并安装maven四、1、下载并安装jenkins2、下载插件，(1)、在线下载插件GitLabPluginEmailExtensionPluginLocalizat
稳重踏实·2022-06-18 08:52

Kaldi：从零搭建语音识别系统

参考博客DNN-HMM语音识别系统搭建基于Kaldi平台搭建DNN-HMM语音识别系统，这里针对汉语普通话建立语音识别系统，并在后期对识别率进行了分析。
大桃子技术·2022-06-13 07:27

“私域”和“会员制”有什么区别？

比如我的会员平台搭建好了，为什么对用户没有吸引力？我的会员有那么多积分，为什么会员不愿意兑换？1.私有域和会员有什么区别？针对不同的业务场景
云云云8686·2022-06-07 18:32

艺术品NFT交易平台搭建|NFT商城开发

自从NFT的浪潮开始，我们清楚且直观的看到了NFT的魅力。万物皆可NFT已经成为现实，艺术品NFT、音乐NFT、奢侈品NFT……各个品牌和IP加入了NFT的浪潮，我们不能低估NFT的价值和NFT的未来。艺术品NFT频频卖出高价，有的人看中的是艺术品自身的收藏价值，有的人看中的是作为NFT（非同质化代币）的价值。NFT的出现可以说是开拓了艺术品交易市场的新格局。艺术品本身是一种特殊的商品，它的价值受
危bigdatatag·2022-05-31 04:56

AWD平台搭建及遇到的问题分析

1、安装docker环境a、使用的是ubuntu系统，通过sudoaptinstalldocker.io进行docker得安装，此方式会自动启动docker服务。b、通过curl-shttps://get.docker.com/|sh进行安装，此方式可能需要手动启动docker服务
upfine·2022-05-28 21:00

2022-05-17-CTFD平台搭建与docker

CTFD平台创建下载CTFd，为了实现公网IP的访问，通过下面的命令运行gunicorn--bind0.0.0.0:8000-w4"CTFd:create_app()"成功启动.png此时在主机上访问服务器ip地址+端口（8000）即可公网访问.pngDocker创建web题目下载docker就不具体说了，网上一搜一大堆从github上下载打包好的dockerweb环境sudodocker-com
L1E6N0A2·2022-05-27 14:11

十六、kubernetes-部署性能监控平台

2.监控平台搭建方案prometheus+Granfanaprometheus：一套开源可以做到监控、报警、数据库以http协
Jaaavvvaaa·2022-05-20 13:27

用Python基础知识实现了一个在线的markdown编辑工具、基于Editor.md、Flask、Flask_SQLAlchemy、sm.ms

在线markdown平台搭建文章目录在线markdown平台搭建前言目的需求设计前端页面设计后端框架选择Flask框架数据库选择图床sm.ms实现数据库设计登录注册文章编辑文章保存后端代码文章列表前言我打算把我的域名用于图床了
@魏大大·2022-05-20 13:23

Kubernetes监控平台搭建

欢迎大家进群，一起探讨学习微信公众号，每天给大家提供技术干货博主技术笔记博主网站地址1博主网站地址2博主开源微服架构前后端分离技术博客项目源码地址，欢迎各位star开源软件cAdvisor（ContainerAdvisor）用于监控所在节点的容器运行状态，当前已经被默认集成到kubelet组件内，默认使用tcp4194端口。在大规模容器集群，一般使用Heapster+Influxdb+Grafan
Bright1668·2022-05-20 13:48

kubernetes性能监控平台

kubernetes性能监控平台1集群资源监控概述2监控平台搭建2.1平台搭建准备2.2部署守护进程2.3部署prometheus2.4部署grafana2.5查看部署详情2.6打开grafana配置数据源及导入显示模板
Michael_lcf·2022-05-20 13:11

远眺科技入选杭州市第一批重点建设人工智能应用场景

该平台所治理和优化的业务场景，基于远眺科技旗下的捷码低代码平台搭建而成，适合在车路协同综合治理过程中，结合高精度地图、毫米波雷达数据等，精细感知、展现路口的实时运行情况，还原车辆、行人的运动轨迹，并利用数据分析发现险情
·2022-05-16 11:47

Android 性能优化（1）- 电量优化 battery historian搭建

本文主要分析了Android平板电量数据采集以及如何使用BatteryHistorian进行电量问题分析1.batteryhistorian平台搭建1）安装batteryhistorian最简单是通过Docker
就是你的白菜·2022-05-09 09:06

前后端分离单页面应用（SPA）项目示例（Vue+ElementUI+Axios+Django+MySql）

文章目录前后端分离单页面应用（SPA）项目示例（Vue+ElementUI+Axios+Django+MySql）1.前端部分1.1前端vue平台搭建安装vue：安装Element-UI1.2创建前端子项目
cnls_lx·2022-05-07 12:09

ELK日志分析系统

一、ELK前言1）我们需要收集哪些日志？收集系统日志：为监控做准备，要收集tomcat系统日志，tomcat所在节点的日志收集服务日志：比如数据库mysql，收集慢查询日志、错误日志、普通日志，要收集tomcat服务日志。收集业务日志（业务日志必须收集）：业务口子日志在log4j，log4j是由java环境开发的，跑在tomcat上2）日志收集后，如何展示（可视化）？kibanagrafana:可
ynyysn·2022-04-28 11:27

Amazon Aurora 读写能力扩展之 ShardingSphere-JDBC 篇

加入AWS前自主创业负责电商平台搭建和车企电商平台整体架构设计。曾就职于全球领先的通讯设备公司，担任高级工程师，负责LTE设备系统的多个子系统的开发与架构设计。
·2022-04-28 10:25

【视频回放】 维塔士+龙智：数字化打造游戏行业「头号玩家」

本次活动中，龙智资深销售经理孙雅坤对话维塔士集团IT总监戴宇晓，与大家分享维塔士是如何使用Atlassian产品搭建集团DevOps平台，分享在DevOps平台搭建过程中的产品选型、实施上线等方面的实战经验
·2022-04-27 22:30

Amazon Aurora 读写能力扩展之 ShardingSphere-JDBC 篇

加入AWS前自主创业负责电商平台搭建和车企电商平台整体架构设计。曾就职于全球领先的通讯设备公司，担任高级工程师，负责LTE设备系统的多个子系统的开发与架构设计。
·2022-04-27 14:26

（十四）从零开始搭建k8s集群——使用KubeSphere管理平台搭建一个高可用的基于Raft的kafka集群服务

前言前面的博客内容我们已经实现了zookeeper版的高可用kafka集群服务，在新版的kafka内容中，已经使用raft协议实现kafka集群的通信，可以不再依赖zookeeper集群，虽然属于实验阶段，但相信未来肯定会成为取代zookeeper的最优方案，并且raft协议已经在redis中得到了充分的实践和验证。话不多说，开始我们本节内容。正文关于kafka镜像的说明-这里我们依然使用ydoc
北溟溟·2022-04-27 07:09

QT-环境安装及demo测试

第一天QT学习之平台搭建及简单测试文章目录第一天QT学习之平台搭建及简单测试环境版本一、VS2017安装二、QT安装三、测试环境(demo)1、编写*.pro，main.cpp文件2、编译、执行程序四、
enginelong·2022-04-26 18:38

AD关联知识：百度Apollo(V3.5和V6.0)平台搭建

百度Apollo平台搭建0博客参考1Docker1.1Docker安装1.2用户权限信息更改1.3Docker安装确认2安装环境设置2.1缓存更改2.2安装ygit-lfs2.3浏览器配置2.4克隆Apollo
Morven_X·2022-04-20 07:21

Jmeter监控平台搭建：JMeter+InfluxDB+Grafana

背景平时一般用Jmeter的Gui模式，添加对应的插件，查看每秒线程数、TPS、响应时间等曲线，其实高并发是不建议这么看的。解决方案可以搭配InfluxDB+Grafana工具，使Jmeter异步发送数据到InfluxDB，然后由Grafana查询并展示出来，方便查看与比对。之前使用Dock
第二个卿老师·2022-04-17 15:00

2021年山东省职业院校技能大赛高职组“信息安全管理与评估”赛项

赛项信息注意事项竞赛阶段任务阶段竞赛任务竞赛时间分值第一阶段平台搭建与安全设备配置防护任务1网络平台搭建180分钟50任务2网络安全设备配置与防护250赛题第一阶段请按裁判组专门提供的U盘中的“XXX-
搞安全的藤原拓海·2022-04-17 10:02

企业知识图谱平台搭建—从理论到实践带你搭建知识图谱项目

1知识图谱的作用和意义1).信息挖掘超越实体，将关系囊括其中，成为结构的一部分。2).各个节点（现实世界中的事件、数据、信息）不再是孤立的，它们是通过特定的关系（边）链接在一起，从而形成结构化的知识表示，这种图数据结构很容易被人们理解接受，并且也很容易被计算机识别和处理。2图数据库优点1)关系型数据库不擅长处理数据之间的关系，而图数据库在处理数据之间关系方面灵活且高性能。比如搜索“姚明女儿的生日”
罗川社·2022-04-10 18:52

Starrocks用户画像解决方案

1.数据应用体系层级数据应用体系层级基础平台搭建基础设施建设
冰菓_·2022-04-03 17:32

实战 | 使用微搭低代码3分钟开发表单应用

本文从0到1，以循序渐进的方式利用腾讯云微搭低代码平台搭建出常见的表单展示应用，让您快速上手腾讯云微搭低代码平台核心功能。步骤1：创建应用登录腾讯云微搭低代码控制台。
·2022-04-02 18:10

ELK日志分析系统之使用multiline合并多行显示

目录一、前言二、multiline的使用1.使用logstash-codec-multiline插件2.使用logstash-filter-multiline插件3.使用Filebeat一、前言本博在ELK
奔跑吧邓邓子·2022-03-30 13:07

ELK日志分析平台——ELK海量日志分析平台搭建-1

目录1、整体架构2、filebeat安装配置3、Redis安装配置4、配置filebeat-redis集成5、elasticsearch和kibana安装配置6、logstash安装配置7、开始整个ELK项目流程打通1、整体架构系统日志数据app.log-->filebeat(6.6)-->redis-->logstash(parse)-->es-->kibanafilebeat-----轻量级的
情绪零碎碎·2022-03-25 07:24

搭建ELK日志分析平台 - 2020年6月最新版

1需求项目中使用SpringCloud进行开发，需要查看每个模块中打印的日志。2解决使用ELK完美解决。官网是这样描述的：ELK是3个开源项目的首字母缩写，分别是ElasticSearch、LogStash和Kibana。ElasticSearch是一个搜索和分析引擎。LogStash是服务器端数据处理通道，能够同时从多个来源采集数据，转换数据，然后将数据发送到诸如ElasticSearch这样的
94甘蓝·2022-03-25 07:52

ELK日志分析平台搭建全过程

ELK日志分析平台搭建全过程一、使用背景当生产环境有很多服务器、很多业务模块的日志需要每时每刻查看时二、环境系统：centos6.5JDK：1.8Elasticsearch-5.0.0Logstash-
myjbase·2022-03-25 07:12
上一页 15 16 17 18 19 20 21 22 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他