E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
ELK集群搭建
Kafka
集群搭建
1、前提条件1、部署Kafka
集群搭建
需要服务器至少3台,奇数台2、Kafka的安装需要java环境,jdk1.83、Kafka安装包版本:kafka_2.11-0.10.0.1.tar.gz4、假设3
那小子、真烦
·
2024-02-02 14:30
KAFKA
kafka
分布式
zookeeper
kafka
集群搭建
本文将记录使用kafka镜像,分别在两种场景下搭建3节点集群:1.在一台机器上使用容器方式安装kafka集群;2.在三台机器上使用容器方式安装kafka集群。此次使用的是wurstmeister的,下载量是比较大的。使用下面命令下载:dockerpullwurstmeister/kafka:2.13-2.8.1先介绍第一种方式:1.在宿主机分别建立3个kafka容器ENV参数文件,改文件配置容器启
topswim
·
2024-02-02 14:30
kafka
zookeeper
分布式
第96讲:MySQL高可用集群MHA的核心概念以及
集群搭建
文章目录1.MHA高可用数据库集群的核心概念1.1.主从复制架构的演变1.2.MHA简介以及架构1.3.MHA的软件结构1.4.MHAManager组件的启动过程1.5.MHA高可用集群的原理2.搭建MHA高可用数据库集群2.1.环境架构简介2.2.搭建基于GTID的主从复制集群2.2.1.在三台服务器中分别搭建MySQL实例2.2.2.配置基于GTID的主从复制集群2.2.3.查看集群各节点的状
Jiangxl~
·
2024-02-02 13:43
mysql
数据库
云计算
运维
数据结构
redis 6.x
集群搭建
redis6
集群搭建
安装文件下载redis-6.2.6.tar.gz编译tar-zxvfredis-6.2.6.tar.gzcdredis-6.2.6/makeMALLOC=libcmakeinstallPREFIX
tmaczt
·
2024-02-02 12:55
linux
redis
bootstrap
数据库
InnoDB行格式
1行格式总览InnoDB规划了26种行格式,分别对应26种动物,首字母由A至Z:Antelope,Barracuda,Cheetah,Dragon,
Elk
,Fox,Gazelle,Hornet,Impala
saviochen
·
2024-02-02 11:35
Logstash 7.7.1版本安装&系统梳理
前言上一篇文章介绍了《ElasticSearch7.7.1
集群搭建
&Kibana安装》,今天说一下Logstash的安卓和配置;Logstash是一个开源的数据收集引擎,具有实时管道功能。
卢卡上学
·
2024-02-02 11:28
灯塔架构知识体系
日志采集
logstash
监控系统
业务监控
中间件
关于Redis Cluster集群运维与核心原理
关于RedisCluster集群运维与核心原理1、Redis集群方案比较哨兵模式高可用集群模式2、Redis高可用
集群搭建
3、Java操作redis集群1、Redis客户端Jedis操作2、集群的SpringBoot
秋天的一亩三分地
·
2024-02-02 10:00
redis
运维
分布式
使用Logstash将MySQL中的数据同步至Elasticsearch
目录1使用docker安装
ELK
1.1安装Elasticsearch1.2安装Kibana1.3安装Logstash2数据同步2.1准备MySQL表和数据2.2运行Logstash2.3测试3Logstash
W@#
·
2024-02-02 07:08
项目环境安装
elasticsearch
搜索引擎
elk
Logstash
Kibana
docker
redis
集群搭建
说明:创建6个redis节点,这里为了方便演示,直接使用了docker容器。1.创建6个node节点创建6个文件目录mkdir/wjmao/redis-17001/mkdir/wjmao/redis-17002/mkdir/wjmao/redis-17003/mkdir/wjmao/redis-17004/mkdir/wjmao/redis-17005/mkdir/wjmao/redis-1700
星迹m
·
2024-02-02 05:38
rabbitmq
集群搭建
方法
RabbitMQ
集群搭建
方法这里展示的是多机集群的部署,如果机器受限,可以选择单机集群部署,详细可以参考《RabbitMQ单机多实例配置》。
SkTj
·
2024-02-02 01:31
替代
ELK
:ClickHouse+Kafka+FlieBeat,才是最佳选择?
背景SaaS服务未来会面临数据安全、合规等问题。公司的业务需要沉淀一套私有化部署能力,帮助业务提升行业竞争力。为了完善平台系统能力、我们需要沉淀一套数据体系帮助运营分析活动效果、提升运营能力。然而在实际的开发过程中,如果直接部署一套大数据体系,对于使用者来说将是一笔比较大的服务器开销。为此我们选用折中方案完善数据分析能力。EasticsearchvsClickhouseClickHouse是一款高
LinkSLA
·
2024-02-02 01:44
elk
clickhouse
kafka
ZK(ZooKeeper)分布式锁实现
不知道如何搭建的,可以看我之前ZooKeeper
集群搭建
:Zookeeper集群部署的那
牧小农
·
2024-02-02 01:52
Zookeeper单机版/伪
集群搭建
在同一台机器(即伪集群)上,启动三个zookeeper,三个分别使用不同的配置文件Zookeeper的单机版安装从官网上下载zookeeper的安装包1准备:安装之前请自行安装jdk(如java8)2使用wget命令或者xshelleditplus工具远程上传tar包到Linux(1)使用wget命令下载zookeeper安装包到linux环境下命令:wgethttp://archive.apac
我不是吴彦祖i
·
2024-02-01 20:43
linux
zookeeper
linux
apache
jdk1.8
zookeeper搭建(单机模式和集群模式)
目录单机模式:
集群搭建
:单机模式:1.新建data和logs目录(data目录用来存放数据库快照,logs目录用来存放日志文件)[root@masterdev]#mkdir-p/home/apps/zookeeper
莫噶
·
2024-02-01 20:11
搭建
zookeeper
linux
分布式
【学习笔记】懂你英语 核心课 Level 8 Unit 2 Part 2(II)Experience vs Memory 2
TEDTalkTheRiddleofExperiencevs.Memory经验与记忆之谜Speaker:Dani
elK
ahnemanNow,I'dliketostartwithanexampleofsomebodywhohadaquestion-and-answersessionafteroneofmylecturesreportedastory
豚之大
·
2024-02-01 20:14
linux安装docker-compose
1:安装在这里下载,解压后得到docker-compose文件,放在某个目录后在/etc/profile中配置,我这里如下:接着执行docker-composeversion验证,是否成功:[
elk
@localhost
一户董
·
2024-02-01 17:28
杂
linux
docker
运维
elk
之基础概念
写在前面本文一起看下es的基础概念,比较枯燥的内容说,但不看又不行。开始。1:document文档,是es搜索存储数据的最小单元,相当于是MySQL的一行记录,但es中是一个json,如下是一个通过logstash转换csv生成的一个文档:一个文档除了存储具体的数据之外还会存储一些元数据,包括如下:_id:es自动生成的uniqueid_type:文档所属的类型名称,固定为_doc_index:文
一户董
·
2024-02-01 17:28
elk
elk
elk
之基本crud
写在前面本文看下工作中用的最多的CRUD。让我们一起来做一个帅帅的CRUDBOY吧!!!1:基本操作Create格式1(指定ID):PUT索引名称/_create/文档ID{文档json}格式2(不指定ID):POST索引名称/_create{文档json}效果:文档id存在则报错GET格式:GET/_doc/文档ID效果:存在则返回结果,否则返回not_foundIndex格式:PUT索引名称/
一户董
·
2024-02-01 17:25
elk
elk
es
reset
api
了解Kubernetes主体架构(二十七)
Kubernetes的教程一直在编写,目前已经初步完成了以下内容:1)基础理论2)使用Minikube部署本地Kubernetes集群3)使用Kubeadm创建集群接下来还会逐步完善本教程,比如Helm、
ELK
magicodes
·
2024-02-01 12:13
搭建
ELK
安装包相关安装包提取码:kitpElasticSearch下载ElasteicSearch安装包解压后在bin目录下直接双击elasticsearch.bat启动,浏览器访问localhost:9200查看是否启动成功Kibana下载后解压,在bin目录下双击kibana.bat启动,浏览器访问localhost:5601LagstashLogstash的下载地址:https://www.elas
qq_44209563
·
2024-02-01 11:49
ElastecSearch
elasticsearch
6、应急响应-日志自动提取&自动分析&
ELK
&Logkit&LogonTracer&Anolog等
用途:个人学习笔记,欢迎指正目录背景:一、日志自动提取-七牛Logki&观星应急工具1、七牛Logkit:(支持Windows&Linux&Mac等)2、观星应急工具(只支持Windows)二、日志自动分析-Web-360星图&Goaccess&ALB&Anolog1、Web-360星图(支持IIS/Apache/Nginx)2、Web-GoAccess(任何自定义日志格式字符串)3、Web-自写
++
·
2024-02-01 09:39
应急响应-蓝队
网络安全
elk
8、应急响应-战前溯源反制&主机蜜罐系统&HFish&HIDS&
Elk
eid&Wazuh
用途:个人学习笔记,欢迎指正目录背景:一、潮源反制-平台部署-蜜罐-Hfish二、溯源反制-平台部署-HIDS-Wazuh三、溯源反制-平台部署-HlDS-
Elk
eid-hub背景:攻击者对服务器存在着各种威胁行为
++
·
2024-02-01 09:39
网络安全
系统安全
web安全
安全威胁分析
Spring Boot 日志平台
ELK
+ Filebeat 入门
1.概述在《SpringBoot日志集成Logging入门》文章中,我们学习了SpringBoot如何集成并使用日志框架,进行日志的打印。友情提示:对于本文来说,即使胖友未阅读过《SpringBoot日志集成Logging入门》文章,也毫无影响,不要慌~不过正如我们在文末所说,在生产环境下,我们会集群部署我们的应用。那么我们可能需要登陆多台服务器,查看不用应用节点下的日志,这样会非常不方便。所以,
weixin_42073629
·
2024-02-01 07:53
Spring
Boot
链路追踪
Elasticsearch
自定义logback默认配置
针对微服务的logbac.xml的封装,方便
elk
日志格式的统一输出,自定义defualt.xml,每个服务的logback.xml或logback-spring.xml使用引入default.xml即可
一颗老呀老松树
·
2024-02-01 07:50
Vue中使用定义的函数时,无法访问到data()里面的数据
$t(item.lab
elK
ey)};});items1是我们data()里面的数据,无法访问到解决办法把箭头函数替换为普通函数consttranslateItems1=function(){this.tra
zhuyua
·
2024-02-01 07:25
vue.js
前端
javascript
分布式搜索引擎_学习笔记_1
elasticsearch是一款非常强大的开源搜索引擎,具备非常多强大功能,可以帮助我们从海量数据中快速找到需要的内容例如:在GitHub搜索代码在电商网站搜索商品在百度搜索答案在打车软件搜索附近的车1.1.2.
ELK
lisus2007
·
2024-02-01 07:41
Java
分布式
搜索引擎
java
【微服务】Spring Boot集成
ELK
实用案例
本文将深入探讨如何在SpringBoot中集成
ELK
栈,以实现集中日志管理的目标。
海鲸AI
·
2024-02-01 06:53
微服务
spring
boot
elk
第三章 数据类型
1、key操作相关命令序号命令语法描述1D
ELk
ey通过key值删除整个键值对2DUMPkey序列化给定的key,并返回被序列化的值3EXISTSkey检查给定的key是否存在存在返回1不存在返回04EXPIREkeyseconds
魏大橙
·
2024-02-01 05:55
数据库SQL
数据库
详解SpringCloud微服务技术栈:深入ElasticSearch(4)——ES集群
)——数据同步(酒店管理项目)订阅专栏:微服务技术全家桶希望文章对你们有所帮助ElasticSearch本身就是分布式的,在这里将要讨论如何用3个docker容器来模拟实现ElasticSearch的
集群搭建
布布要成为最负责的男人
·
2024-02-01 03:42
微服务技术全家桶
spring
cloud
微服务
elasticsearch
集群
分布式
java
三、Redis之数据类型
3.1Key操作3.1.1相关命令序号命令语法描述1D
ELk
ey该命令用于在key存在时删除key2DUMPkey序列化给定key,并返回被序列化的值3EXISTSkey检查给定key是否存在,存在返回
acro_09
·
2024-02-01 02:09
redis
数据库
缓存
elk
三、docker部署
ELK
+logtrail插件 显示filebeat抓取的日志(felibeat-output到redis,input到logstash)
本文所用镜像参考文档本文章所用的版本都是6.70的版本Elasticsearch:能对大容量的数据进行接近实时的存储,搜索和分析操作。本项目中主要通过Elasticsearch存储所有获取的日志。Logstash:数据收集引擎,它支持动态的的从各种数据源获取数据,并对数据进行过滤,分析,丰富,统一格式等操作,然后存储到用户指定的位置。Kibana:数据分析与可视化平台,对Elasticsearch
乱蹦的小鱼干
·
2024-02-01 02:38
IT
elk
22.
ELK
-部署logstash来取日志并转发给ES
部署logstash来取日志并转发给ES下载logstash安装包,存放到/opt/es-software目录下载地址:https://mirrors.tuna.tsinghua.edu.cn/elasticstack/yum/elastic-6.x/6.6.0/logstash量级比filebeat重,而且比较吃内存,所以日常收集日志的工作交给filebeat来处理安装logstashrpm-i
做咩啊~
·
2024-02-01 02:37
elk
运维
第三章 数据类型
3.1Key操作3.1.1相关命令序号命令语法描述1D
ELk
ey该命令用于在key存在时删除key2DUMPkey序列化给定key,并返回被序列化的值3EXISTSkey检查给定key是否存在,存在返回
sour moon
·
2024-02-01 00:30
redis
数据库
Kubernetes实战prometheus部署
实现原理类似
ELK
、EFK组合。
藏经老曾
·
2024-01-31 13:38
kubernetes
kubernetes
docker
运维
容器
docker搭建
elk
环境并实现logstash监听logback,亲测有效!!!
原因:线上日志太多且没有长期保存,导致问题发现晚点就找不到日志了,当然可以更改日志保存时间,但是还有个问题就是不好查询,需要根据时间去查找到底查询哪个日志文件,于是想到了用
elk
收集日志,这样就好查询了
下雨天u
·
2024-01-31 11:03
docker
elk
logback
elk
之安装和简单配置
写在前面本文看下
elk
的安装和简单配置,安装我们会尝试通过不同的方式来完成,也会介绍如何使用docker,docker-compose安装。
一户董
·
2024-01-31 11:39
elk
elk
elastic安装
kibana安装
logstash安装
elk
之简介
写在前面本文看下es的简介。1:简介背后公司,elastic,08年纽交所上市,与腾讯,阿里等云厂商有合作,推出云产品,类似功能的产品由solr,splunk,但使用量es当前遥遥领先,下图是es与solr的对比图,可看到在03年左右es已经一骑绝尘了,如下图:可看到,使用很大,并且使用的非常广泛,分布全球。2:为什么会有eses是基于lucene开发的一款分布式的搜索产品,但是已经有了lucen
一户董
·
2024-01-31 11:09
elk
elk
zookeeper curator 伪集群 - 安装 -配置 - 秒懂
zookeeper的伪装
集群搭建
疯狂创客圈Java分布式聊天室【亿级流量】实战系列之-22【博客园总入口】文章目录zookeeper的伪装
集群搭建
写在前面1.1.
40岁资深老架构师尼恩
·
2024-01-31 09:19
java
【大数据入门核心技术-Tez】(三)Tez与Hive整合
一、准备工作1、Hadoop和Hive安装【大数据入门核心技术-Hadoop】(五)Hadoop3.2.1非高可用
集群搭建
【大数据入门核心技术-Hadoop】(六)Hadoop3.2.1高可用
集群搭建
【
forest_long
·
2024-01-31 08:06
大数据技术入门到21天通关
hive
大数据
hadoop
hbase
mapreduce
构建高效可靠的消息队列系统:设计与实现
目录一、引言二、设计目标2.1、高可用性1.
集群搭建
1.1DockerCompose配置示例2.容错和恢复2.1异常检测与自动故障迁移2.2SpringBoot代码示例3.心跳检测4.优雅关闭2.2、持久性
喔的 喔的嘛呀
·
2024-01-31 07:31
数据库
Zookeeper实现分布式队列
Zookeeper不适合大数据量存储,官方并不推荐作为队列使用,但由于实现简单,
集群搭建
较为便利,因此在一些吞吐量不高的小型系统中
山鸟与鱼!
·
2024-01-31 05:33
分布式中间件
分布式
zookeeper
后端
java
spring
boot
Hbase2.1
集群搭建
>Hbase在大数据的体系中扮演着DB角色,不得不说是重要的一员,在上一篇,大猪已经给大家演示了[Hadoop3.2
集群搭建
](https://www.jianshu.com/p/3182aaff918d
kikiki5
·
2024-01-31 05:41
CentOS7 安装Graylog 5.0+卸载GrayLog服务
GraylogDocumentation对于日志监控业界常用的有
ELK
、Loki、Graylog等系统,最近在做技术选型时,对比了各个系统的情况,Graylog的一体化方案很符合现有需求。
Zh&&Li
·
2024-01-31 05:29
graylog
安全
运维
linux
centos
mongodb java spring_MongoDB和Java(4):Spring Data整合MongoDB(XML配置)
最近花了一些时间学习了下MongoDB数据库,感觉还是比较全面系统的,涉及了软件安装、客户端操作、安全认证、副本集和分布式
集群搭建
,以及使用SpringData连接MongoDB进行数据操作,收获很大。
務酒者
·
2024-01-31 02:03
mongodb
java
spring
三、ElasticSearch
集群搭建
实战
本篇ES
集群搭建
主要是在LinuxVM上,未使用Docker方式,ES版本为7.10,选择7.10版本原因可以看往期文章介绍。
南天一梦N
·
2024-01-31 02:29
中间件技术
elasticsearch
java
spring
搜索引擎
全文检索
ElasticSearch 7.4集群部署 启用x-pack验证 Kibana7.4用户管理
一.es7.4
集群搭建
1.1下载es以及修改相应配置1.1.1节点规划内网ip节点192.168.18.126node-1192.168.18.125node-2192.168.18.133node-31.1.2
Cocktail_py
·
2024-01-31 02:28
Elasticsearch
elasticsearch
四、ES集群安全策略设置 X-pack
本文主要是结合ES
集群搭建
时使用,并且适用于ES7.x以上版本背景及安全策略方案对比ES7.x以下版本默认几乎没有任何安全策略,如果集群IP、端口被暴露,在可访问的情况下任何用户都可以对索引进行管理以及数据的增删改查等
南天一梦N
·
2024-01-31 02:57
中间件技术
elasticsearch
jenkins
大数据
kafka
集群搭建
需要做的事情
首先,虚拟机克隆好之后的步骤如下:1.修改IP、主机名,关闭防火墙;(reboot重启)2.在/etc/hosts文件中进行IP与主机名的映射配置,集群中每天都记得配置;3.安装JDK并进行分发;进入/etc/profile.d/目录创建my_env.sh文件并在其中配置JAVA_HOME并进行分发;(分发jdk前先卸载自带的jdk);4.安装zookeeper并进行分发,具体为:首先,在zook
薛薛哦
·
2024-01-30 21:24
分布式
ELK
集群搭建
(基础教程)
ELK
集群搭建
(基础教程)目录:机器准备集群内各台机器安装Elasticsearch安装部署Kafka(注:每个节点都配置,注意ip不同)安装logstash工具安装filebeat
ELK
收集Nginx
lqcbj_IT老混混
·
2024-01-30 16:41
ELK集群
elk
用Docker搭建logstash、filebeat集群
docker-logstash.ymlversion:'3.2'services:logstash:image:logstash:latestnetworks:-netvolumes:-/app/
elk
GoGooGooo
·
2024-01-30 13:16
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他