E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
ELK集群搭建
【从问题中去学习k8s】k8s中的常见面试题(夯实理论基础)(二十八)
shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》从问题中去学习k8s《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《日志收集》
ELK
向往风的男子
·
2024-09-16 02:26
k8s
学习
kubernetes
容器
【Linux 从基础到进阶】Kubernetes
集群搭建
与管理
Kubernetes
集群搭建
与管理Kubernetes(简称K8s)是一个用于自动化部署、扩展和管理容器化应用程序的开源平台。
爱技术的小伙子
·
2024-09-15 03:00
Linux从基础到进阶
linux
kubernetes
运维
elasticsearch数据迁移之elasticdump
系列文章目录第一章es
集群搭建
第二章es集群基本操作命令第三章es基于search-guard插件实现加密认证第四章es常用插件文章目录系列文章目录前言一、elasticdump是什么?
迷茫运维路
·
2024-09-14 12:47
elasticsearch
中间件
elasticsearch
linux
运维
K8S - Volume - NFS 卷的简介和使用
在之前的文章里已经介绍了K8S中两个简单卷类型hostpath和emptydirk8s-Volume简介和HostPath的使用K8S-Emptydir-取代
ELK
使用fluentd构建loggingsaidcar
nvd11
·
2024-09-14 11:13
K8S
kubernetes
容器
云原生
fluentd 简介,日志收集并导入BigQuery
日志收集的工具有很多种例如Splunk,很多大公司都在使用,但是个人使用的话并不合适,主要是需要license的…钱是1个大问题另1个常见开源的解决方案是
ELK
,但是搭建和学习成本高,如果只是为了日志收集并不值
nvd11
·
2024-09-14 11:12
Cloud
spring
Etl
spring
boot
ELK
架构中 ES 性能优化
1.背景由于目前日志采集流程中,经常遇到用户磁盘IO占用超过90%以上的场景,但是观察其日志量大约在2k~5k之间,整体数据量不大,所以针对该问题进行了一系列的压测和实验验证,最后得出这篇优化建议文档2.压测前期准备2.1制造大量日志该阶段为数据源输入阶段,为了避免瓶颈在数据制造侧,所以需要保证filebeat具有足够的日志制造能力最后效果,filebeat可以达到70kQPS的数据发往logst
xianjie0318
·
2024-09-14 10:38
elk
架构
elasticsearch
K8S - Emptydir - 取代
ELK
使用fluentd 构建logging saidcar
但是k8s本身并没有提供集中查询多个pod的日志的功能其中1个常见方案就是
ELK
.本文的方案是利用fluentdsidecar和emptydir把多个pod的日志导向到bigquery的table中。
nvd11
·
2024-09-14 10:38
K8S
kubernetes
5分钟熟练上手ES的具体使用
5分钟上手ES的具体使用相信有很多同学想要去学习
elk
时会使用docker等一些方式去下载相关程序,但提到真正去使用es的一系列操作时又会知之甚少。于是这一篇博客应运而生。
佚名涙
·
2024-09-14 06:41
elasticsearch
jenkins
大数据
学习
DMDPC安装部署
本文是在1台Linux虚拟机上通过创建四个实例的方式进行
集群搭建
.2.DMDPC集群规划DMD
丷月亮是指路牌
·
2024-09-14 06:39
数据库
Redis安装详解(单机安装,sentinel哨兵模式,Cluster模式)
1.2linux中安装2Redis主从复制安装3Redis哨兵模式安装4Springboot项目操作RedisSentinel集群5官方cluster分区搭建5.1部署架构5.2RedisCluster的优势5.3
集群搭建
dream21st
·
2024-09-13 22:18
中间件学习笔记
sentinel
redis
java
【从问题中去学习k8s】k8s中的常见面试题(夯实理论基础)(十一)
shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》从问题中去学习k8s《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《日志收集》
ELK
向往风的男子
·
2024-09-13 18:51
k8s
学习
kubernetes
容器
【mysql】mysql之优化
shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》从问题中去学习k8s《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《日志收集》
ELK
向往风的男子
·
2024-09-11 15:22
DBA
mysql
数据库
【Redis】Redis
集群搭建
与管理: 原理、实现与操作
目录集群(Cluster)基本概念数据分片算法哈希求余⼀致性哈希算法哈希槽分区算法(Redis使⽤)
集群搭建
(基于docker)第⼀步:创建⽬录和配置第⼆步:编写docker-compose.yml第三步
Hsu琛君珩
·
2024-09-11 00:02
Redis
redis
bootstrap
数据库
ELK
架构介绍
一、
ELK
简介
ELK
是由三个开源软件组成的,分别是:Elasticsearch、Logstash和Kibana,这三个软件各自在日志管理和数据分析领域发挥着重要作用。
星河漫漫l
·
2024-09-09 11:40
elk
elasticsearch
运维
服务器
MySQL8.0
集群搭建
文章目录环境准备安装MySQL8.0配置主服务配置从服务器主从复制:即主服务器上的所有操作(创建库,修改表等)会被同步到从服务器上,但是在从服务器上的操作不会进入到主服务器中环境准备两台服务器,一主一从安装docker#国内源curl-fsSLhttps://get.docker.com|bash-sdocker--mirrorAliyun启动dockersystemctlstartdocker配
我有一只肥螳螂
·
2024-09-09 08:46
MySQL
mysql
ELK
日志分析系统之集成Filebeat
二、集成Filebeat1.安装Filebeat2.配置3.启动本博在
ELK
日志分析系统搭建一文中,介绍了使用Elasticsearch、Logstash、Kibana来搭建
ELK
。
奔跑吧邓邓子
·
2024-09-08 13:07
高效运维
使用
ELK
Stack 进行云原生日志记录和监控:AWS 中的开发运营方法
使用
ELK
Stack进行云原生日志记录和监控欢迎来到雲闪世界。在当今的云原生世界中,日志记录和监控是强大的DevOps策略的重要组成部分。
数云界
·
2024-09-08 11:21
elk
云原生
aws
Vicky的ScalersTalk第六轮新概念朗读持续力训练Day50 20210319
练习材料:AlostshipPart-1一艘沉船Thesalvageoperationhadbeenacompletefailure.Thesmallship,
Elk
or,whichhadbeensearchingtheBarentsSeaforweeks
Vicky_b9de
·
2024-09-08 03:45
一、
ELK
架构介绍
一、
ELK
架构介绍
ELK
是一个应用套件,由Elasticsearch/Logstash/Kibana三个部分软件组成,简称
ELK
。
ELK
是一个做日志分析的管理系统。
李白望明月
·
2024-09-07 15:03
ELK基础介绍
elk
【网络架构】
ELK
目录一、
ELK
介绍1.1
ELK
是什么1.2Elasticsearch1.3Logstash1.4Kibana1.5为什么使用
ELK
二、
ELK
原理2.1工作原理2.2
ELK
的应用架构图三、
ELK
的安装部署
云计算稿手
·
2024-09-07 15:32
网络架构
架构
elk
ELK
架构
一、Logstash+elasticsearch+Kibana首先由Logstash分布于各个节点上搜集相关日志、数据,并经过分析、过滤后发送给远端服务器上elasticsearch进行存储。elasticsearch将数据以分片的形式压缩存储并提供多种API供用户查询,操作。用户也可以直观的通过配置KibanaWebPortal方便的对日志进行查询,并根据数据生成报表。优点:搭建简单,易于上手。
小楚同学呀~
·
2024-09-07 14:57
SpringCloud集成
ELK
1、添加依赖net.logstash.logbacklogstash-logback-encoder6.12、在logback-spring.xml中添加配置信息(logback-spring.xml在文末)192.168.2.203:4560............192.168.2.203:4560对应搭建的Logstash地址Logback日志打印由于SpringBoot项目在引用了sprn
echola_mendes
·
2024-09-07 11:07
ELK
spring
cloud
elk
java
ELK
7.8部署:Elasticsearch+Logstash+Kibana搭建分布式日志平台
ELK
7.8部署:Elasticsearch+Logstash+Kibana搭建分布式日志平台一、前言1、
ELK
简介2、
ELK
工作流二、准备工作1、服务器&软件环境说明2、
ELK
环境准备三、Elasticsearch
_海风_
·
2024-09-07 10:33
运维
分布式
ELK
处理 SpringBoot 日志,真实太妙了!
本文带您了解一下开源的实时日志分析平台
ELK
的搭建及使用。
ELK
简介
ELK
是一个开源的实时日志分析平台,它主要由Elasticsearch、Logst
进击的王小二
·
2024-09-07 00:56
大数据
java
elk
spring
boot
SpringBoot+Kafka+
ELK
完成海量日志收集(超详细)
SpringBoot项目准备引入log4j2替换SpringBoot默认log,demo项目结构如下:pomIndexController测试Controller,用以打印日志进行调试InputMDC用以获取log中的[%X{hostName}]、[%X{ip}]、[%X{applicationName}]三个字段值NetUtil启动项目,访问/index和/ero接口,可以看到项目中生成了app
2401_83703797
·
2024-09-07 00:25
程序员
spring
boot
kafka
elk
spring cloud搭建
elk
elastic官网:https://www.elastic.co/cn/downloads1.elasticsearch-6.2.2(存储日志数据)wgethttps://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-6.2.2.tar.gz2.logstash-6.2.2(收集日志数据)wgethttps://artifac
2301_79655496
·
2024-09-06 16:01
程序员
spring
cloud
elk
jenkins
【从问题中去学习k8s】k8s中的常见面试题(夯实理论基础)(二十四)
shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》从问题中去学习k8s《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《日志收集》
ELK
向往风的男子
·
2024-09-05 00:07
k8s
学习
kubernetes
容器
【从问题中去学习k8s】k8s中的常见面试题(夯实理论基础)(十九)
shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》从问题中去学习k8s《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《日志收集》
ELK
向往风的男子
·
2024-09-05 00:07
k8s
学习
kubernetes
容器
【从问题中去学习k8s】k8s中的常见面试题(夯实理论基础)(二)
shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》从问题中去学习k8s《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《日志收集》
ELK
向往风的男子
·
2024-09-05 00:37
k8s
学习
kubernetes
容器
mysql的主从复制延迟问题
mysql的主从复制延迟问题https://blog.csdn.net/qq_41683000/article/details/125436839一主一从,双主双从的mysql
集群搭建
,在单机应用的时候看起来没有问题
wowocpp
·
2024-09-05 00:06
mysql
数据库
【从问题中去学习k8s】k8s中的常见面试题(夯实理论基础)(二十三)
shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》从问题中去学习k8s《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《日志收集》
ELK
向往风的男子
·
2024-09-04 23:02
k8s
学习
kubernetes
容器
kafka
集群搭建
Kafka
集群搭建
一、概念说明它是一个分布式消息系统,由linkedin使用scala编写,用作LinkedIn的活动流(ActivityStream)和运营数据处理管道(Pipeline)的基础。
java皮皮虫
·
2024-09-04 16:48
kafka
springboot
后台
kafka
kafka测试
kafka集群
基于分布式计算的电商系统设计与实现【系统设计、模型预测、大屏设计、海量数据、Hadoop集群】
Abstract1引言1.1研究背景1.2国内外研究现状1.3研究目的1.4研究意义2关键技术理论介绍2.1Hadoop相关组件介绍2.2分布式集群介绍2.3Pyecharts介绍2.4Flask框架3分布式
集群搭建
及数据准备
王小王-123
·
2024-09-03 04:54
hadoop
大数据
分布式
电商系统分析
分布式计算
【Mysql】通过Keepalived搭建mysql双主高可用集群
VIP(虚拟ip)hadoop01192.168.10.200centos7_x865.7192.168.10.253hadoop03192.168.10.202centos7_x865.7二、mysql
集群搭建
两台节点
维运
·
2024-08-31 15:13
数据库
mysql
数据库
【mysql】mysql之存储引擎学习
shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》从问题中去学习k8s《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《日志收集》
ELK
向往风的男子
·
2024-08-31 05:28
DBA
mysql
学习
数据库
33.ES集群规划—整体规划
如果内存很大如128G,可以在一台机器上运行多个ES节点两类应用场景:用于构建业务搜索功能模块,且多是垂直领域的搜索数据量级几千万到数十亿级别,一般2-4台机器规模用于大规模数据的实时OLAP(联机处理分析),如
ELK
Stack
大勇任卷舒
·
2024-08-31 02:20
单机 安装
ELK
日志分析系统
一、
ELK
介绍
ELK
Stack是软件集合Elasticsearch、Logstash、Kibana的简称,它们都是开源软件。
TheFlsah
·
2024-08-30 21:40
Linux
Kibana安装部署
并解压2.2重置kibana_system密码2.3编辑启动文件2.3进入界面三、使用3.1创建视图3.2视图优化概述Kibana是一个强大的开源数据可视化工具,它作为ElasticStack(以前称为
ELK
Stack
季风泯灭的季节
·
2024-08-30 01:29
Elastic
Stack
技术栈及其详细应用
运维
elk
kibana
redis数据结构
hash)字符串列表(list)字符串集合(set)有序字符串集合(sortedset)key命名定义的注意点不要过长不要过短统一的命名规范常用命令判断key是否存在:existskey删除key:d
elk
ey
bullion
·
2024-08-29 04:09
Openstack 与 Ceph
集群搭建
(下): Openstack部署
文章目录文章参考部署节点准备1.修改Host文件与hostname名称2.安装NTP软件3.网卡配置信息4.开启Docker共享挂载5.安装python虚拟环境6.安装kolla-ansible7.加载AnsiblegalaxyrequirementsOpenstack安装前预配置1.配置密码2.配置multinode文件3.修改全局配置文件Openstack正式安装1.启动bootstrap-s
范枝洲
·
2024-08-29 01:43
系统运维
openstack
ceph
clickhouse
集群搭建
文章目录安装clickhouse修改集群配置文件启动clickhouse集群测试集群的可用性安装clickhouse本次用了4台服务器搭建clickhouse集群,使用rpm安装方式在4台服务器上安装clickhouse,步骤如下:sudoyuminstall-ycurlcurl-shttps://packagecloud.io/install/repositories/altinity/clic
颍天
·
2024-08-28 14:56
clickhouse
数据库
读写分离
集群搭建
目录一、配置读写分离集群1、环境说明2、数据准备3、配置主库GRP1_RWW_01配置dm.ini配置dmmal.ini配置dmarch.ini配置dmwatcher.ini启动主库设置OGUID修改数据库模式4、配置备库GRP1_RWW_02配置dm.ini配置dmmal.ini配置dmarch.ini配置dmwatcher.ini启动备库设置OGUID修改数据库模式5、配置备库GRP1_RWW
奥德彪的蕉
·
2024-08-28 11:41
达梦
数据库
服务器
oracle
sql
运维
打造扛得住的MySQL数据库架构视频教程-数据库结构优化 高可用架构设计
打造扛得住的MySQL数据库架构视频教程-数据库结构优化高可用架构设计30套数据库系列Mysql/SQLServer/Redis/Mongodb/Nosql精讲训练营项目实战,数据库设计,架构设计,性能管理,
集群搭建
cd137a460a79
·
2024-08-28 04:10
数据库基础:mysql主从
集群搭建
position:表示从file的哪个位置开始;binlog_do_db:表示同步哪一个库在后面的slave配置中,这三个结果都需要使用到。4.Slave(6.85)节点配置配置从库(1)修改my.cnf文件,在[mysqld]加入下面的内容:#服务的唯一编号server-id=2#开启mysqlbinlog功能log-bin=mysql-bin#binlog记录内容的方式,记录被操作的每一行bi
2401_84049040
·
2024-08-27 00:58
程序员
数据库
mysql
android
基于Zookeeper搭建Kafka高可用集群
基于Zookeeper搭建Kafka高可用集群一、Zookeeper
集群搭建
为保证集群高可用,Zookeeper集群的节点数最好是奇数,最少有三个节点,所以这里搭建一个三个节点的集群。
数字游牧人0v0
·
2024-08-26 16:58
大数据BigData
kafka
java-zookeeper
zookeeper
大数据
zookeeper+KAFKA
集群搭建
ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、集群管理等。因为Kafka集群是把状态信息保存在Zookeeper中的,并且Kafka的动态扩容是通过Zookeeper来实现的,所以需要优先搭建Zookeer
懵逼的运维弟弟
·
2024-08-26 16:28
Linux
zookeeper+KAFKA
集群搭建
搭建
elk
日志管理系统
ELK
日志管理系统一.环境准备按照JDK1.8第一步:下载JDKhttps://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads
阿色你过来啊
·
2024-08-26 13:07
学习分享
elk
elasticsearch
大数据
【 云原生应用的监控与日志管理】使用Prometheus、
ELK
Stack等工具进行云原生应用的监控与日志管理
云原生应用的监控与日志管理使用Prometheus、
ELK
Stack等工具进行云原生应用的监控与日志管理引言随着云原生技术的普及,应用的复杂性和规模不断增加,传统的监控与日志管理手段已无法满足需求。
爱技术的小伙子
·
2024-08-26 13:04
云原生
prometheus
elk
Redis常用数据结构常用命令总览
Redis远程字典服务器(4)——string类型详解命令执行效果时间复杂度setkeyvalue[keyvalue...]设置key的值是valueO(k),k是键个数getkey获取key的值O(1)d
elk
ey
与你日常
·
2024-08-25 21:29
redis
数据库
缓存
【从问题中去学习k8s】k8s中的常见面试题(夯实理论基础)(十二)
shell学习《terraform》持续更新中:terraform_Aws学习零基础入门到最佳实战《k8》从问题中去学习k8s《docker学习》暂未更新《ceph学习》ceph日常问题解决分享《日志收集》
ELK
向往风的男子
·
2024-08-25 05:20
k8s
学习
kubernetes
容器
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他