E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
——集群搭建
Nginx安装以及LVS-DR
集群搭建
Nginx安装1.环境准备yuminsatall-ymakegccgcc-c++pcre-devel#pcre-devel--pcre库#安装openssl-develyuminstall-yopenssl-devel2.tar安装包3.解压软件包并创建软连接tar-xfnginx-1.22.0.tar.gz-C/usr/local/ln-s/usr/local/nginx-1.22.0//usr
wada64
·
2023-08-10 18:29
nginx
lvs
服务器
Kafka多版本
集群搭建
超详细
1.前言大家好,我是楚生辉,在未来的日子里我们一起来学习大数据相关的技术,一起努力奋斗,遇见更好的自己!百度百科对Kafka有如下描述:Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者在网站中的所有动作流数据。本文详细的介绍了多个版本的Kafka集群安装,包括其多个版本之间的命令差异,有需要
楚生辉
·
2023-08-10 16:41
学无止境
kafka
java
分布式
clickhouse
集群搭建
、SpringBoot集成及应用
前言在日常工作中,日志查询是我们不可避免的业务场景,当项目访问量较小时,我们可以将日志存储在MySQL或其他行式数据库中,但是如果项目访问量很大,一次查询就会给数据库带来很大压力,也许你会采用elk等成熟的方案去处理日志,但是代价相对较高。下面,介绍一种列式数据库clickhouse,它能够快速处理大批量数据的查询,对于日中存储查询场景比较方便。先贴上一个官方文档https://clickhous
雅俗共赏zyyyyyy
·
2023-08-10 11:49
中间件相关
spring
boot
clickhouse
java
10.大数据技术之Flink
2.1Flink中的重要角⾊JobManager处理器:TaskManager处理器:2.2无界数据流与有界数据流无界数据流:有界数据流:2.3Flink数据流编程模型2.4Libraries支持3、Flink
集群搭建
数据带你飞
·
2023-08-10 05:02
唐山师范学院
大数据
flink
hadoop
ElasticSearch7.x
集群搭建
详细步骤
文章目录前言一、准备环境二、Elasticsearch
集群搭建
1.安装JDK2.下载elasticsearch3.安装elasticsearch4.配置目录5.创建用于存放数据与日志的目录6.集群配置7
lfwh
·
2023-08-09 21:14
ELK
elasticsearch
elk
centos
ElasticSearch
集群搭建
一、ElasticSearch集群1.1搭建集群Elasticsearch如果做集群的话Master节点至少三台服务器或者三个Master实例加入相同集群,三个Master节点最多只能故障一台Master节点,如果故障两个Master节点,Elasticsearch将无法组成集群.会报错,Kibana也无法启动,因为Kibana无法获取集群中的节点信息。由于,我们使用只有一台虚拟机,所以我们在虚拟
楠~枫
·
2023-08-09 21:44
elasticsearch
大数据
搜索引擎
ElasticSearch:
集群搭建
1-ElasticSearch集群1-ES集群相关概念es集群:•ElasticSearch天然支持分布式•ElasticSearch的设计隐藏了分布式本身的复杂性ES集群相关概念:•集群(cluster):一组拥有共同的clustername的节点。•节点(node):集群中的一个Elasticearch实例•索引(index):es存储数据的地方。相当于关系数据库中的database概念•分片
Alaric_L
·
2023-08-09 21:12
ElasticSearch
java
LVS
集群搭建
一、LVS集群部署1、LVS集群工作结构图2、LVS的负载调度算法1、轮询(rr,RoundRobin)2、加权轮询(wrr,WeightedRoundRobin)3、最少连接(lc,LeastConnections)4、加权最少连接(wlc,WeightedLeastConnections)5、sourcehashing源地址hash(sh)3、LVS优点1.抗负载能力强2.配置性低3.工作稳定
XBLYL1992
·
2023-08-09 07:53
LVS
集群搭建
Linux报错解决
lvs
linux
服务器
运维
性能优化
高可用etcd数据库
集群搭建
高可用etcd数据库
集群搭建
etcd集群备份和查看集群状态命令etcd集群权限管理和账号密码使用
浅抒流年
·
2023-08-09 06:44
杂货记录
数据库
etcd
linux
基于Docker + Consul + Registrator的服务注册与发现
集群搭建
前言近年微服务架构在互联网应用领域中愈来愈火,引入微服务主要解决了单体应用多个模块的紧耦合、无法扩展和运维困难等问题。微服务架构就是按照功能粒度将业务模块进行垂直拆分,对单体应用本身进行服务化和组件化,每个组件单独部署为小应用(从DB到UI)。微服务与微服务之间通过ServiceAPI进行交互,同时为了支持水平扩展、性能提升和服务可用性,单个服务允许同时部署一个或者多个服务实例。在运行时,每个实例
weixin_33708432
·
2023-08-09 00:06
运维
大数据
ui
Ocelot + Consul + Registrator 基于Docker 实现服务发现、服务自动注册
目录1.Consul
集群搭建
1.1F&QConsul官方推荐的host网络模式运行2.Registrator服务注册工具2.1F&QRegistrator悬挂服务Registrator的-internal
爱在一瞬间
·
2023-08-09 00:33
docker
java-consul
consul
服务发现
java
分布式-高可用redis
集群搭建
(此处模拟单机多进程,多服务器同理)
分布式-高可用redis
集群搭建
(此处模拟单机多进程,多服务器同理)环境信息redis版本:5.0.8
集群搭建
修改配置文件主要修改以下几项内容:pidfile/var/run/redis_6000.piddir
yufw
·
2023-08-08 23:31
Redis追本溯源(四)集群:主从模式、哨兵模式、cluster模式
文章目录一、主从模式1.主从复制——全量复制2.主从复制——增量复制二、哨兵模式1.实时监控与故障转移2.Sentinel选举领导者三、cluster模式1.三种分片方案2.cluster模式Redis有多种
集群搭建
方式
TracyCoder123
·
2023-08-08 18:55
存储工具
redis
bootstrap
数据库
windows下 Elasticsearch服务
集群搭建
及基本使用,配置ik分词器、及插件head、kopf
1、环境准备2、jdk安装下载JDK后,根据提示进行安装操作;在安装JDK时会安装JRE,一起安装就好。2.1配置环境变量:“我的电脑”—右键属性—高级系统设置—环境变量2.2在系统变量中配置3项属性,JAVA_HOME、PATH、CLASSPATH(大小写忽略),若已存在则点击"编辑",不存在则点击"新建"。变量设置参数如下:变量名:JAVA_HOME变量值:C:\ProgramFiles\Ja
guanzizizi
·
2023-08-08 16:40
elasticsearch
elasticsearch
windows
elasticsearch分片
集群搭建
这里准备了三台机子111,112,113以及一台原始配置过es单机的110。创建子用户es在每台服务器上面执行:useraddes#添加es用户passwdes#设置密码将110下面配置好的es发送到另外三台上scp-r/home/es/elasticsearch-7.13.2/
[email protected]
:/home/esscp-r/home/es/elasticsearch-7.13.2
负差生
·
2023-08-08 16:10
elasticsearch
elasticsearch
elasticsearch
集群搭建
并开启xpack密码验证【踩坑日志】
elasticsearch
集群搭建
并开启xpack密码验证
集群搭建
(忽略,网上文章很多,自行寻找,有问题留言)开启密码验证(详细说)以下操作先在一台机器操作:1、获得elastic-stack-ca.p12
萨尔布拉克的星空
·
2023-08-08 16:10
elasticsearch
elasticsearch
大数据
搜索引擎
elasticsearch
集群搭建
目录WIndow集群Linux集群单点部署集群部署ES优化硬件选择分片策略推迟分片分配路由选择写入速度优化批量数据提交优化存储设备合理使用合并减少Refresh的次数加大Flush设置减少副本的数量内存设置重要配置WIndow集群创建elasticsearch-cluster文件夹,在内部复制三个elasticsearch服务修改集群文件目录下每个节点的config/elasticsearch.y
m0_67393039
·
2023-08-08 16:08
java
java
后端
tomcat
ElasticSearch
集群搭建
一、集群介绍ES集群是一个P2P类型(使用gossip协议)的分布式系统,除了集群状态管理以外,其他所有的请求都可以发送到集群内任意一台节点上,这个节点可以自己找到需要转发给那些节点,并且直接跟这些节点通信。所以从网络架构及服务配置上来说,构建集群所需要的配置及其简单。在ES2.0之前,无阻碍的网络下,所有配置了相同cluster.name的节点都自动归属到一个集群中。2.0版本之后,基于安全的考
JSUITDLWXL
·
2023-08-08 16:08
elasticsearch
分布式搜索引擎
elasticsearch
使用 RKE 方式搭建 K8s 集群并部署 NebulaGraph
下面是本次实践的内容规划:一到十章节为K8s
集群搭建
过程;十一到十五章节为参考NebulaGraph官方文档安装部署NebulaGraph的过程;本文所有实践是在本地虚拟机3台CentOS实例上完成
图数据库NebulaGraph
·
2023-08-08 13:26
kubernetes
容器
云原生
RocketMQ
集群搭建
本文只讲RocketMQ集群的搭建(异步复制),具体理论知识后续会在写新文章详细介绍;环境JDK1.8Centos7主机-两台centos7_1:172.16.54.130centos7_2:172.16.54.128软件资源JDK1.8:https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.
灰灰H_K
·
2023-08-07 21:10
单机搭建zookeeper+kafka&
集群搭建
&容器搭建
单机搭建zookeeper下带有bin的包,不需要再进行编译http://archive.apache.org/dist/zookeeper/zookeeper-3.5.5/apache-zookeeper-3.5.5-bin.tar.gz[root@vmopt]#tarxfapache-zookeeper-3.5.5-bin.tar.gz[root@vmopt]#cdapache-zookeep
daydayup9527
·
2023-08-07 12:02
kafka
zookeeper
分布式
Ubuntu-Docker安装和使用
Dcker安装使用及大数据
集群搭建
安装VMwareToolsDockerdocker安装docker基本命令查看信息创建容器启动容器初始化容器内root密码进入正在运行的容器查看容器删除容器文件拷贝大数据
集群搭建
创建
律为
·
2023-08-07 10:43
ubuntu
docker
linux
Redis分布式高可用
集群搭建
文章目录Redis分布式高可用
集群搭建
一、redis集群有三种方式:1.主从模式2.哨兵3.集群(master-cluster)二、基于centos7操作系统操做1.关闭防火墙,三台机器都执行2.hostname
鱼鱼大头鱼
·
2023-08-07 05:28
#
4.
数据缓存
redis
分布式
数据库
redis搭建集群
redis高可用集群
集群
redis集群配置
Mysql
集群搭建
学习03 2018-08-31
根据文档搭建网络准备1.关闭防火墙,或者配置防火墙端口3306和11862.测试服务器之间ping通linuxpingip时,使用的代码ping-w10ip或ping-c10ip若pingip时,无法直接停止可使用ctrl+c停止ping或ctrl+z暂停ping(放入后台,使用命令fg可以调出到前台)ping命令:-ccountping指定次数后停止ping;-Wtimeout以毫秒为单位设置p
夏_未至
·
2023-08-07 04:43
redis
集群搭建
1、redis集群的介绍Redis集群是一个提供在多个Redis节点之间共享数据的程序集。Redis集群并不支持同时处理多个键的Redis命令,因为这需要在多个节点间移动数据,这样会降低redis集群的性能,在高负载的情况下可能会导致不可预料的错误。Redis集群通过分区来提供一定程度的可用性,即使集群中有一部分节点失效或者无法进行通讯,集群也可以继续处理命令请求。Redis集群的优势:1.缓存永
我还不够强
·
2023-08-06 12:14
(十三)大数据实战——hadoop集群之YARN高可用实现自动故障转移
前言本节内容是关于hadoop集群下yarn服务的高可用搭建,以及其发生故障转移的处理,同样需要依赖zookeeper集群的实现,实现该
集群搭建
时,我们要预先保证zookeeper集群是启动状态。
北溟溟
·
2023-08-06 00:57
大数据
#
hadoop
大数据
hadoop
yarn
Kafka概论
前言任何消息中间件,除了基础组件架构外,核心特性无非三个,消息可靠性、消息模型、吞吐量,本文要聊的正是这些东西,其余诸如API、下载安装、
集群搭建
等都是死的,而且会随着版本的变动而改变,这类东西针对不同版本
_BugMan
·
2023-08-05 21:30
kafka
分布式
2019最新k8s
集群搭建
教程 (centos k8s 搭建) 2019-04-18
2019-k8s-centos2019最新k8s
集群搭建
教程(centosk8s搭建)网上全是要么过时的,要么残缺的,大多数都是2016年,2017年的文档,照着尝试了N次,各种卸了重装,最后centos
龙少lol
·
2023-08-04 18:12
k8s系列03-kubeadm部署calico网络的k8s集群
此前写的一些关于k8s基础知识和
集群搭建
的一些方案,有需要的同学可以看一下。1、准备工作1.1calico-集群节点信息机器均为8C8G的虚拟机,硬盘为100G。
tinychen
·
2023-08-04 17:12
mysql修改UUID
mysql修改UUID问题描述:
集群搭建
时克隆主服务的镜像导致所有节点的服务UUID都一致,此时在集群中添加节点时会提示UUID冲突报错。
懿玖鬮乄
·
2023-08-04 09:46
mysql
数据库
前端
Hadoop简介和
集群搭建
测试(一)
Hadoop的优势有四高:(1)高可用:Hadoop底层维护多个数据副本,所以即使Hadoop某个计算元素或存储出现故障,也不会导致数据的丢失(2)高扩展:在集群间分配任务数据,可方便的扩展数以千计的节点(3)高效性:在MapReduce的思想下,Hadoop是并行工作的,以加快任务处理速度(4)高容错性:能够自动将失败的任务重新分配。Hadoop组成:HDFS架构概述:HadoopDistrib
modi_2020
·
2023-08-04 08:33
Hadoop
hadoop
hadoop 3.1.3
集群搭建
ubuntu20
相关hyper-v安装ubuntu-20-serverhyper-v建立快照hyper-v快速创建虚拟机-导入导出虚拟机准备虚拟机设置采用hyper-v方式安装ubuntu-20虚拟机和koolsharehostnameiph01192.168.66.20h02192.168.66.21h03192.168.66.22静态IP所有机器都需要按需设置sudovim/etc/netplan/00-in
Jason Yien
·
2023-08-04 00:57
大数据
hadoop
大数据
分布式
redis
集群搭建
新建需要搭建的集群文件夹2.复制配置文件并进行修改基本配置如果使用的是公网的服务器(云服务器,那么这里的bindip地址一定要改为内网的ip(使用命令(ifconfig)在服务器内得到IP地址))2.1bind192.168.1.12.2port更改端口以不同端口区分不同的服务2.3pidfilepidfile/varrunredis7000.pid每启动一个redis都会生成一个文件,如果多个r
游侠阿枫
·
2023-08-03 12:57
redis
redis
数据库
缓存
RabbitMQ(二)
二、高级特性、应用问题以及
集群搭建
高级特性1.消息的可靠性投递在使用RabbitMQ的时候,作为消息发送方希望杜绝任何消息丢失或者投递失败场景。
dzWatching
·
2023-08-03 10:38
rabbitmq
ruby
分布式
centos 7 storm
集群搭建
1、搭建zookeeper,请看:https://blog.csdn.net/sunxiaoju/article/details/1030398662、从https://archive.apache.org/dist/storm/apache-storm-1.2.3/地址下载storm,如下图所示:3、下载好后通过tar-xzvfapache-storm-1.2.3.tar.gz解压,如下图所示:
sxjlinux
·
2023-08-03 09:56
大数据
Centos中的storm集群环境搭建
0.准备工作1.jdk配置2.zookeeper
集群搭建
1.软件下载apachestorm官网:下载链接2.解压tar-zxvfapache-storm-1.0.5.tar.gzcdapache-storm
小x今天暴富了吗
·
2023-08-03 09:22
storm
Centos 7 环境 Storm 2.0.0 完全分布式集群的搭建过程
系列博客地址Centos7环境hadoop3.2.0完全分布式
集群搭建
Centos7环境hive3.1.1搭建Centos7环境Spark2.4.3完全分布式集群的搭建过程Centos7环境HBase2.1.5
小不强
·
2023-08-03 09:51
大数据
Redis的主从
集群搭建
与配置
文章目录Redis主从集群模式搭建过程分级管理容灾冷处理Redis主从集群模式Redis的集群模式主从复制模式:利用主从复制原理,一主多从架构。读写分离,主节点可读可写,从节点只能提供读服务。哨兵模式:哨兵实现了自动化的故障恢复,哨兵节点是特殊的redis节点,不存储数据。哨兵监控整个redis集群。Cluster模式:实现了Redis的分布式存储,也就是说每台Redis节点上存储不同的内容。Re
黎明
·
2023-08-02 11:25
Redis
redis
数据库
缓存
伪集群
后端
ELK
集群搭建
1.安装logstash-filter-multiline插件网上下载logstash-filter-multiline-3.0.4.gem插件上传至服务器新建文件夹logstash-filter-multiline-3.0.4,并将gem文件移入新建的文件夹使用zip命令进行压缩zip-rlogstash-filter-multiline-3.0.4.ziplogstash-filter-mul
MFHack
·
2023-08-02 10:02
RocketMQ
环境要求2.2安装RocketMQ2.2.1安装步骤2.2.2目录介绍2.3启动RocketMQ2.4测试RocketMQ2.4.1发送消息2.4.2接收消息2.5关闭RocketMQ3.RocketMQ
集群搭建
李钟意·
·
2023-08-02 07:21
java
java-rocketmq
【云原生】k8s组件&架构介绍与K8s最新版部署
kubernetes专栏:kubernetes_征服bug的博客-CSDN博客目录1集群组件1.1控制平面组件(ControlPlaneComponents)1.2Node组件1.3插件(Addons)2集群架构详细3
集群搭建
征服bug
·
2023-08-02 05:57
kubernetes
云原生
kubernetes
架构
HDFS的QJM方案
QuorumJournalManager仲裁日志管理器介绍主备切换,脑裂问题解决---ZKFailoverController(zkfc)主备切换,脑裂问题解决--Fencing(隔离)机制主备数据状态同步问题解决HA
集群搭建
集群基础环境准备
fiveym
·
2023-08-02 04:05
#
hdfs
hdfs
hadoop
大数据
3节点linux服务器
集群搭建
一,目的由于当前集群部署已经成为主流,适当研究一些集群部署的基本操作,有助于后续像k8s集群、doris集群的部署。大部分集群都是一主两从这种三节点配置。故本文也是采用三节点完成相关学习和记录。二,说明因为会关闭防火墙,所以,本文的方法,在生产中慎用。三,具体步骤1,固定ip、设置机器名字通常在安装系统时,就会在网络上设置好固定ip。这样即便集群的机器重启,IP也不会变化。机器名字通常起nodex
BatmanWayne
·
2023-08-02 03:12
k8s
数据仓库
liunx
服务器
linux
运维
集群
NoSQL之Redis
集群搭建
详解
前言redis是一个开源的keyvalue存储系统,受到了广大互联网公司的青睐。redis3.0版本之前只支持单例模式,在3.0版本及以后才支持集群,我这里用的是redis3.0.0版本;redis集群采用P2P模式,是完全去中心化的,不存在中心节点或者代理节点;redis集群是没有统一的入口的,客户端(client)连接集群的时候连接集群中的任意节点(node)即可,集群内部的节点是相互通信的(
八云家的小幼紫
·
2023-08-02 01:13
centos7
虚拟机
redis
linux
Oracle19c--RAC
集群搭建
安装目录一.新建节点1.创建虚拟机rac12.添加一个iSCSI控制器!3.添加一块新的网卡4.添加6块硬盘,大小50G,要设置磁盘置备为‘厚置备,置零’,并且控制器选择新添加的iSCSI控制器,磁盘模式为独立持久5.选择镜像,安装操作系统6.创建虚拟机rac27.添加一个iSCSI控制器,scsi共享总线选择虚拟8.添加一块新的网卡9.添加硬盘选择现有硬盘,找到rac1对应的的6块硬盘,依次添加
草莓田田圈~
·
2023-08-01 21:41
ORACLE
运维
linux
服务器
Kafka
集群搭建
1、集群规划IP地址系统环境192.168.150.101CentOS7jdk8,Zookeeper3.4.14192.168.150.102CentOS7jdk8,Zookeeper3.4.14192.168.150.103CentOS7jdk8,Zookeeper3.4.142、下载安装2.1、下载下载地址:http://kafka.apache.org/downloads根据自己的需求,选择
OverCoding
·
2023-07-31 20:52
Canal生产环境
集群搭建
一、简介Canal官网二、生产
集群搭建
部署canal-admin官网背景canal-admin设计上是为canal提供整体配置管理、节点运维等面向运维的功能,提供相对友好的WebUI操作界面,方便更多用户快速和安全的操作
鋆坤
·
2023-07-31 11:03
kafka配置文件 中文乱码_Kafka实战及常见问题解决方法-Go语言中文社区
上一篇技术博客讲解了kafka基本原理以及kafka分布式
集群搭建
方法,需要这些知识的小伙伴可以查看小厨的《Kafka原理介绍及其分布式安装使用》。
Yrgo
·
2023-07-31 08:19
kafka配置文件
中文乱码
【大数据】黑马hadoop学习笔记
集群搭建
搭建配置hadoop环境安装编译相关的依赖yuminstallgccgcc-c++makeautoconfautomakelibtoolcurllzo-develzlib-developensslopenssl-develncurses-develsnappysnappy-develbzip2bzip2-devellzolzo-devellzoplibXtstzlib-yyuminstall-yd
飞鸟malred
·
2023-07-31 07:04
大数据
笔记
大数据
hadoop
java
RocketMQ 知识总结
文章目录1.RocketMQ安装2.
集群搭建
2.1各角色介绍2.2集群类型2.3双主双从3.基本使用案例4.知识点4.1消息存储存储介质消息的存储和发送存储结构刷盘机制4.2高可用性机制消息消费高可用消息发送高可用消息主从复制
小柒7
·
2023-07-30 22:02
MQ
队列
上一页
19
20
21
22
23
24
25
26
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他