E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Codis集群搭建
基于k8s1.15搭建Flink集群(一)
文章目录1.前言2.实验环境3.
集群搭建
3.1Yaml配置3.1.1JobManagerYaml配置3.1.2TaskManagerYaml配置3.1.3JobManagerServices配置3.2启动
RivenDong
·
2023-09-06 10:40
#
Flink
#
Kubernetes
k8s 搭建基于session模式的flink集群
1.flink
集群搭建
不废话直接上代码,都是基于官网的,在此记录一下Kubernetes|ApacheFlinkflink-configuration-configmap.yamlapiVersion:
Json_Marz
·
2023-09-06 10:40
kubernetes
flink
容器
Docker部署Redis集群详解【主从复制 + 哨兵模式】
前言注意:该文章不会讲解Redis
集群搭建
的原理,只讲述如何通过Docker容器快速部署搭建Redis主从+哨兵模式的集群准备工作:一台云服务器or本地虚拟机(CentOS和Ubuntu都可以)安装好Docker
Paraverse_徐志斌
·
2023-09-06 07:06
docker
redis
docker-compose
主从复制
Docker部署Hadoop集群
前几天写了文章“Hadoop
集群搭建
”之后,一个朋友留言说希望介绍下如何使用Docker部署,这个建议很好,Docker不仅在生产环境威力巨大,对于我们在自己电脑中搭建学习实验环境更是非常便利。
丨程序之道丨
·
2023-09-06 03:01
大数据技术——hadoop
集群搭建
出现的问题
出现的问题和解决方案ssh免密出现的问题:解决方法:出现上图的是语法错误,在ssh和-keygen中多了空格,去掉即可2.ssh免密登录出现的问题:ssh登陆报错“WARNING:REMOTEHOSTIDENTIFICATIONHASCHANGED“解决方法:1)通过ssh-keygen密钥工具更新ssh-keygen-f~/.ssh/known_hosts-R远程主机IP地址2)手动清除~/.s
肉肉肉肉肉肉~丸子
·
2023-09-06 03:46
大数据
人工智能
hadoop集群搭建
hadoop集群配置
hadoop集群出现的问题
hadoop
集群搭建
出现的一些问题总结
为了实现三台主机(masterslave1slave2)间的免密码登录,分别将slave1和slave2的公钥发送给master,然后再将master复制到slave1和slave2ssh-copy-idmaster验证master里面的authorized_keyscat.ssh/authorized_keys这里出现了问题,只有master和slave2的公钥,没有slave1,最后发现是sl
大角牛向前冲_momo
·
2023-09-06 03:45
hadoop
spring cloud系列教程第六篇-Eureka集群版
转载请注明1:Eureka执行步骤理解2:集群原理3:Eureka
集群搭建
4:修改payment和order项目注册到集群中本文是由凯哥(凯哥Java:kagejava)发布的《springcloud系列教程
凯哥Java
·
2023-09-05 18:04
hadoop 3.3大数据
集群搭建
系列1-安装hadoop
一.软硬件配置1.1主机配置及规划hostnamehp5hp6hp7ip10.31.1.11910.31.1.12010.31.1.121内存8G8G8GusernamerootrootrootIP主机名功能10.31.1.119hp5NameNodeDataNodeResourceManagerNodeManager10.31.1.120hp6DataNodeNodeManager10.31.1
只是甲
·
2023-09-05 18:18
HDFS HA 高可用
集群搭建
详细图文教程
目录一、高可用(HA)的背景知识1.1单点故障1.2如何解决单点故障1.2.1主备集群1.2.2Active、Standby1.2.3高可用1.2.4集群可用性评判标准(x个9)1.3HA系统设计核心问题1.3.1脑裂问题1.3.2数据状态同步问题二、NAMENODE单点故障问题2.1概述2.2解决三、HDFSHA解决方案--QJM3.1QJM—主备切换、脑裂问题解决3.1.1ZKFailover
Stars.Sky
·
2023-09-05 17:37
Hadoop
hdfs
hadoop
大数据
HBase 环境搭建
HBase单机环境的搭建这里先进行单机版环境搭建,主要目的是熟悉HBase,实操角度对HBase有简单认识,后面会分享HBase的原理、架构和
集群搭建
。
44d18503659e
·
2023-09-05 14:19
Kubernetes v1.25.0
集群搭建
实战案例(新版本含Docker容器运行时)
k8s1.24之后弃用了docker容器运行时,安装方式上有所不同,网上找到的大多数都是1.24之前的版本。所以把自己搭建的完整过程记录下来供大家参考。一、前言k8s的部署方式有多种kubeadm、kind、minikube、Kubespray、kops等本文介绍官方推荐的kubeadm的方式搭建集群。二、安装步骤1、虚拟机两台(ip按自己的网络环境相应配置)(master/node)iphost
玄明Hanko
·
2023-09-05 13:36
kubernetes
docker
容器
mqtt
集群搭建
并使用nginx做负载均衡_亲测得结论
mqtt
集群搭建
RabbitMQ
集群搭建
和测试总结_亲测搭建好RabbitMQ集群,并开启mqtt插件功能,mqtt集群也就搭建好了nginx配置mqtt负载均衡#修改rabbitmq1节点ip为1.19
阿亮说技术
·
2023-09-05 10:01
mqtt
mqtt
nginx
springboot
Apache Pulsar
集群搭建
部署2.9.3
集群架构Broker一个或多个Broker处理和负载接受到的生产者发送的消息数据调度消息发送给消费者与Zookeeper进行通信以处理各种协调任务,将消息存储在BookKeeper实例(又称为bookies)中依赖于ZooKeeper集群来执行某些任务,等等ApacheZookeeper(Standby/Cluster)Pulsar使用ZK存储元数据、集群配置,还有协调各Broker协调由那个Br
小韩加油呀
·
2023-09-05 10:31
apache
大数据
linux
Pulsar
集群搭建
部署
一、集群组成说明1.搭建Pulsar集群至少需要3个组件:ZooKeeper集群、BookKeeper集群和broker集群(Broker是Pulsar的自身实例)。这三个集群组件如下:ZooKeeper集群(3个ZooKeeper节点组成)bookie集群(也称为BookKeeper集群,3个BookKeeper节点组成)broker集群(3个Pulsar节点组成)2.Pulsar的安装包已包含
weixin_33775572
·
2023-09-05 10:00
大数据
运维
操作系统
Pulsar
集群搭建
本文介绍一下pulsar的
集群搭建
(在3台linux服务器上)1.集群组成1.1搭建Pulsar集群至少需要3个组件:ZooKeeper集群、BookKeeper集群和broker集群(Broker是Pulsar
小刘想学架构
·
2023-09-05 10:28
消息中间件
#
Pulsar
消息队列
pulsar
集群搭建
_亲测成功
pulsar
集群搭建
_亲测成功单机运行请看:LinuxMacBook单机部署Pulsar并开启认证功能集群组成搭建Pulsar集群至少需要3个组件:ZooKeeper集群、BookKeeper集群和broker
阿亮说技术
·
2023-09-05 10:27
mq
pulsar
mq
mqtt
zookeeper-3.6.4
集群搭建
1、上传zookeeper安装包并解压上传路径:/opt/software/解压路径:/opt/module/2、创建数据目录及日志目录#数据目录:/data/zookeeper/data/#3台机器创建存储目录:sudomkdir-p/data/zookeeper/data#日志目录:/data/log/zookeeper#3台机器创建日志目录:sudomkdir-p/data/log/zook
bigdata-rookie
·
2023-09-05 09:03
zookeeper
分布式
大数据
linux
第三章微服务配置中心
文章目录Nacos配置中心统一配置管理在nacos中添加配置文件从微服务拉取配置配置热更新多环境共享配置搭建Nacos
集群搭建
集群初始化数据库配置Nacos启动nginx反向代理Nacos配置中心Nacos
库里不会投三分
·
2023-09-05 05:34
微服务
微服务
架构
云原生
redis的主从搭建和密码配置
目录主从的概念主从的配置配置主服务器master配置从服务器slave查看主从关系验证主从读写功能master(读写)slave(只读)redis主从搭建与
集群搭建
密码的配置主从的概念主Redis写入数据时
万wu皆可爱
·
2023-09-04 22:05
redis
linux
redis
数据库
centos
python
Redis-Cluster
集群搭建
Redis-Clusterredis集群的原理,redis分片是怎么实现的,你们公司redis用在了哪些环境?笔者回答:reids集群原理:其实它的原理不是三两句话能说明白的,redis3.0版本之前是不支持集群的,官方推荐最大的节点数量为1000,至少需要3(Master)+3(Slave)才能建立集群,是无中心的分布式存储架构,可以在多个节点之间进行数据共享,解决了Redis高可用、可扩展等问
apt_fz
·
2023-09-04 19:04
部署
redis
数据库
缓存
Nginx+keepalived实现高可用项目实战
(master)192.168.85.129(back)192.168.85.132(web1)192.168.85.133(web2)为达到测试目的两台Web服务写不用的发布目录进行区分二、负载均衡
集群搭建
是胡也是福
·
2023-09-03 18:14
nginx
负载均衡
java
kafka配合ElasticStack技术栈的搭配使用
今日内容:-kafka生产环境调优;-kafka配合ElasticStack技术栈的搭配使用;-zookeeper集群部署;-zookeeper的ACL;-zookeeper的调优;-PB级别项目;-ES8
集群搭建
港南四大炮亡
·
2023-09-03 15:23
kafka
linq
分布式
Nacos2.0.3
集群搭建
集群搭建
前置条件JDK1.8MySQL5.7.29Nacos2.0.3搭建过程将Nacos安装包上传至三个服务器,本次搭建使用三个端口来模拟三个不同的主机解压:tar-zvxfnacos-server-
aiYouWei啊
·
2023-09-03 12:01
分布式
nacos集群
5-redis
集群搭建
安装
1.先决条件1.1.OS基础配置CentOS为了能够正常安装redis,需要对CentOS进行常规的一些基础配置,主要有:关闭防火墙与selinux,设置主机名,配置虚拟机IP地址使其能够与外网ping通,配置IP地址与主机名映射,配置yum源。具体配置参见:Linux常规基础配置_小黑要上天的博客-CSDN博客类型版本CentOS7.9Redis7.0.121.2.Redis介质下载(redis
小黑要上天
·
2023-09-03 08:46
redis
redis
数据库
缓存
ES
集群搭建
什么是ES:Elasticsearch是一个分布式、RESTful风格的搜索和数据分析引擎。官网地址:https://www.elastic.co/cn/elasticsearch/单点部署ES:1.安装esyum-ylocalinstallelasticsearch-7.17.5-x86_64.rpm2.修改配置文件vim/etc/elasticsearch/elasticsearch.yml.
港南四大炮亡
·
2023-09-03 06:39
elasticsearch
搜索引擎
大数据
基于
codis
实现分布式锁
文章目录初始化JedisResourcePool使用原子操作来申请与释放锁初始化JedisResourcePoolRoundRobinJedisPool会轮流连接当前可用的
codis
Proxy@ConfigurationProperties
百战天王
·
2023-09-02 19:09
java
Hadoop 3.2.4
集群搭建
详细图文教程
目录一、集群简介二、Hadoop集群部署方式三、集群安装3.1集群角色规划3.2服务器基础环境准备3.2.1环境初始化3.2.2ssh免密登录(在hadoop01上执行)3.2.3各个节点上安装JDK1.8环境3.3安装Hadoop3.4Hadoop安装包目录结构3.5编辑Hadoop配置文件3.5.1hadoop-env.sh3.5.2core-site.xml3.5.3hdfs-site.xm
Stars.Sky
·
2023-09-02 07:01
Hadoop
hadoop
大数据
分布式
Hadoop
集群搭建
(五)-集群配置文件
目录集群部署规划自定义配置文件节点格式化配置workers启动集群配置历史服务器集群部署规划hadoop102hadoop103hadoop104HDFSNameNodeDataNodeSecondaryNameNodeNataNodeYARNNodeManagerResourceManagerNodeManagerNodeManager自定义配置文件core-site.xml、hdfs-site
HUA_8376
·
2023-09-02 06:55
大数据hadoop
hadoop
hdfs
大数据
高级DBA带你从0到1搭建Mysql NDB Cluster 分布式
集群搭建
实战全网最详细
MysqlNDBCluster
集群搭建
实战全网最详细https://dev.mysql.com/doc/refman/8.0/en/mysql-cluster-overview.html#官方的文档介绍地址一
技术很渣
·
2023-09-02 04:57
MySQL
数据库技术
DBA运维
mysql
数据库
服务器
聊聊 Pulsar: Pulsar 分布式
集群搭建
一、
集群搭建
要求1.1搭建设计搭建Pulsar集群至少需要3个组件:ZooKeeper集群、Bookkeeper集群和Broker集群(Broker是Pulsar的自身实例)。
老周聊架构
·
2023-09-01 13:41
ClickHouse
集群搭建
及ODBC配置
1搭建环境192.168.122.100BCEuler01192.168.122.101BCEuler02192.168.122.102BCEuler031.1关闭防火墙#systemctldisablefirewalld#systemctlstopfirewalld1.2关闭selinux#/etc/selinux/configSELINUX=disabled1.3设置时间同步(chrony)将
shif_l
·
2023-09-01 08:02
数据库
clickhouse
运维
ODBC
zookeeper
Hadoop完全分布式
集群搭建
文章目录一、克隆二、网络配置三、SSH服务配置四、hadoop完全分布式配置一、克隆1.在虚拟机关机的状态下选择克隆2.开始克隆3.选择从当前状态创建4.创建一个完整的克隆5.选择新的虚拟机存储位置(选择内存充足的磁盘)6.开始克隆7.克隆完成8.同样的方法克隆第二台虚拟机9.在计算机中存在三台虚拟机将第一台虚拟机更名为hadoop01修改hadoop01的主机名为hadoop01修改hadoop
T³3
·
2023-09-01 07:28
Linux
hadoop
分布式
大数据
centos
linux
Spark自带的集群模式(Standalone),Spark/Spark-ha
集群搭建
1、Spark自带的集群模式对于Spark自带的集群模式,Spark要先启动一个老大(Master),然后老大Master和各个小弟(Worker)进行通信,其中真正干活的是Worker下的Executor。关于提交任务的,需要有一个客户端,这个客户端叫做Driver.这个Driver首先和Master建立通信,然后Master负责资源分配,然后让Worker启动Executor,然后Execut
涂作权的博客
·
2023-09-01 06:32
#
Spark(大数据分析引擎)
spark
集群
Kubernetes最新版v1.27.4安装和
集群搭建
保姆级教程
1.Kubernetes1.27.4发布一:k8s1.27.x的概述太平洋时间2023年4月11日,Kubernetes1.27正式发布。此版本距离上版本发布时隔4个月,是2023年的第一个版本。新版本中release团队跟踪了60个enhancements,比之前版本都要多得多。其中13个功能升级为稳定版,29个已有功能进行优化升级为Beta,另有18个Alpha级别的功能,大多数为全新功能。1
huainian
·
2023-09-01 04:51
K8S
kubernetes
容器
云原生
Elasticsearch集群
1.3分片1.4新增节点1.5水平扩容-启动第三个节点1.6应对故障二、集群概念2.1主节点2.2候选主节点2.3数据节点2.4客户端节点2.5脑裂现象2.5.1脑裂现象成因2.5.2脑裂现象解决方案三、
集群搭建
ww_kobe
·
2023-08-31 11:49
elasticsearch
大数据
第四章 Kubernetes入门及
集群搭建
学习目标:了解Kubernetes的起源和发展掌握如何使用kubeadm搭建Kubernetes集群查看Kubernetes集群部署状态4-1Kubernetes的起源和发展Kubernetes的起源Kubernetes最初源于谷歌内部的Borg,Kubernetes的最初目标是为应用的容器化编排部署提供一个最小化的平台,包含几个基本功能:将应用水平扩容到多个集群为扩容的实例提供负载均衡的策略提供
InsaneLoafer
·
2023-08-31 02:32
分布式锁系列之Redis分布式锁
目录介绍模拟订单超卖场景代码版不加锁情况synchronized加锁编辑lock加锁整合Mysql版不加锁版synchronized加锁lock加锁版jvm加锁失效情况多例模式事务
集群搭建
书写sql解决集群超卖使用悲观锁
暗武逢天
·
2023-08-31 00:38
java
分布式锁
分布式
分布式锁
redis
redisson
悲观锁
乐观锁
elasticsearch8.9.1
集群搭建
目录1.官网文档2.安装步骤2.1环境准备2.2添加用户2.3修改文件profile文件2.4修改elasticsearch.yml2.5修改sysctl.conf3.启动3.1切换到kibana3.2启动elasticsearch3.3启动kibana3.4验证节点情况1.官网文档elasticsearch文档:https://www.elastic.co/guide/en/elasticsea
haohaounique
·
2023-08-30 23:09
java
jenkins
开发语言
Fastdfs
集群搭建
一、简单介绍:FastDFS是一个开源的高性能分布式文件系统(DFS)。它的主要功能包括:文件存储,文件同步和文件访问,以及高容量和负载平衡。主要解决了海量数据存储问题,特别适合以中小文件(建议范围:4KBnginx-->ngx_fastdfs_module(同步集群storage数据+访问tracker获取storage存储信息)-->tracker(mod_fastdfs.conf配置文件)-
LuMaman
·
2023-08-30 15:05
运维
k8s
集群搭建
流量传递到iptables链1.4开启ipvs二、容器化环境和组件安装2.1docker安装2.2设置docker加速镜像器2.4设置yum镜像源2.5安装kubeadm、kubelet和kubectl三、
集群搭建
落叶的悲哀
·
2023-08-30 13:58
k8s
kubernetes
容器
云原生
kafka---- zookeeper
集群搭建
1.准备工作:##准备3个节点,要求配置好主机名称,服务器之间系统时间保持一致##注意/etc/hostname和/etc/hosts配置主机名称(在这个里我准备Prac-zk-133,Prac-zk-134,Prac-zk-135二节点)vim/etc/hosts#保证可以通过主机名互通添加格式为IP主机名称##比如172.16.144.133Prac-zk-133172.16.144.134P
Jeroro_franklin
·
2023-08-30 07:45
kafka
zookeeper
debian
阿里腾讯云 hadoop+spark
集群搭建
(2)
阿里腾讯云hadoop+spark
集群搭建
(2)linux版本:centos7hadoop版本:3.1.1spark版本:2.3.2在1中已经搭建好了hadoop,接下来就是spark。
karwik
·
2023-08-30 04:11
大数据
Hbase2.1
集群搭建
Hbase在大数据的体系中扮演着DB角色,不得不说是重要的一员,在上一篇,大猪已经给大家演示了Hadoop3.2
集群搭建
了,本次我们将继续紧接着搭建Hbase集群。
kikiki2
·
2023-08-30 00:58
Nacos
集群搭建
集群结构三个nacos节点的地址:节点ipportnacos1127.0.0.18845nacos2127.0.0.18846nacos3127.0.0.18847集群步骤搭建集群的基本步骤:搭建数据库,初始化数据库表结构下载nacos安装包配置nacos启动nacos集群nginx反向代理初始化数据库新建一个数据库,命名为nacos,而后导入下面的SQL:CREATETABLE`config_i
无语堵上西楼
·
2023-08-29 20:02
微服务
java
大数据
开发语言
Hadoop高可用
集群搭建
(超详细)
节点布置IP主机名描述部署软件192.168.200.201hadoop-01主节点jdk,hadoop,zookeeper192.168.200.202hadoop-02备用主节点jdk,hadoop,zookeeper192.168.200.203hadoop-03数据服务节点jdk,hadoop,zookeeper配置静态IP#有的可能为ifcfg-ens33vi/etc/sysconfig
程序员 Harry
·
2023-08-29 17:58
笔记
Hadoop
hadoop
大数据
Swarm
集群搭建
( docker安装、docker-compose安装、portainer可视化安装、基本使用命令总结、项目集群部署案例)
docker安装、docker-compose安装、Swarm
集群搭建
、portainer可视化安装、和项目部署案例四台服务器,我这里选用四台虚拟机1核2G,系统centos7,ip:192.168.10.104
李潘杜若
·
2023-08-29 11:28
运维
docker
docker-compose
Swarm集群
Anolis 8.6 下 Redis 7.2.0
集群搭建
和配置
Redis7.2.0搭建和集群配置一.Redis下载与单机部署1.Redis下载2.虚拟机配置3.Redis单机源码安装和测试4.Java单机连接测试1.Pom依赖2.配置文件3.启动类4.配置类5.单元测试6.测试结果二.Redis集群部署1.主从1.从节点配置2.Java测试2.哨兵1.哨兵节点配置2.复制一个哨兵节点(双哨兵)3.Java测试访问哨兵3.集群1.集群配置文件修改2.Java访
猪悟道
·
2023-08-29 09:38
JavaWeb
服务框架
redis
cluster
sentinel
springboot
anolis
RabbitMQ
集群搭建
和测试总结_亲测
RabbiMQ简介RabbitMQ是用Erlang开发的,集群非常方便,因为Erlang天生就是一门分布式语言,但其本身并不支持负载均衡。RabbitMQ模式RabbitMQ模式大概分为以下三种:(1)单一模式。(2)普通模式(默认的集群模式)。(3)镜像模式(把需要的队列做成镜像队列,存在于多个节点,属于RabbitMQ的HA方案,在对业务可靠性要求较高的场合中比较适用)。要实现镜像模式,需要先
阿亮说技术
·
2023-08-29 08:32
mq
rabbitmq
mqtt
linux
redis知识点整理(4)持久化和
集群搭建
redis是个内存数据库,如果不将内存中的数据库状态保存到磁盘,那么一旦服务器进程退出,服务器中的数据库状态也会消失,所以redis提供了持久化功能!Redis的持久化分两种,AOF和RDBRDBredis的默认持久化就是rdb。一般不需要修改这些配置。rdb工作原理:指定时间间隔将内存中的数据集快照写入磁盘中,恢复时是直接将快照文件读到内存中。Redis会单独创建一个子进程来进行持久化。会先将数
唯有努力不欺人丶
·
2023-08-29 05:17
Redis 高可用之
集群搭建
和数据分片
Redis高可用之
集群搭建
和数据分片一、简介1.Redis集群:2.
集群搭建
:二、Redis
集群搭建
1.单机Redis升级为RedisClustera.搭建方法b.搭建方式说明2.环境准备3.配置修改4
格林希尔
·
2023-08-28 22:42
Redis
redis
全文检索
数据结构
架构
大数据
上一页
16
17
18
19
20
21
22
23
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他