E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
——集群搭建
k8s部署redis
集群搭建
过程示例详解
目录写在前面一、redis
集群搭建
1.1使用redis-cli创建集群1.2redis集群状态验证(可选)1.3重启pod,验证集群(可选)1.4创建Service服务1.5Springboot项目配置
·
2023-02-27 18:05
Flink
集群搭建
转载连接https://www.jianshu.com/p/44bd6b652204Flink
集群搭建
Flink可以选择的部署方式有:Local、Standalone(资源利用率低)、Yarn、Mesos
十一师兄
·
2023-02-25 07:50
Flink
flink
Flink基本架构与集群环境搭建
Flink架构与
集群搭建
一、Flink基本架构1.1JobManager与TaskManager1.2无界数据流与有界数据流1.3数据流编程模型二、Flink
集群搭建
2.1Standalone模式安装2.2Yarn
故明所以
·
2023-02-25 07:20
Flink
flink
大数据
hadoop
集群搭建
(超详细版)
1.准备好需要安装的软件虚拟机VMware12.pro操作系统CentOS6.5远程控制虚拟机的终端SecureCRT8.12.在虚拟机中安装CentOS操作系统安装好虚拟机,图形界面如下图创建新的虚拟机,选择自定义(高级),点击下一步虚拟机硬件兼容性默认,浏览需要安装的CentOS6.5镜像文件自定义用户名和密码(用于登录)设置虚拟机名称和存储路径处理器设置默认(后面可以修改),内存设为1GB网
普通网友
·
2023-02-23 14:32
java
java
后端
redis-cluster
集群搭建
安装redis所需环境yuminstall-ygcc-c++yuminstall-ywget创建文件夹cd/mkdirredis/redis-cluster/7001cdredis/redis-clustermkdir7002700370047005700670077008下载redis压缩包并解压安装wgethttps://download.redis.io/redis-stable.tar.g
lightYouUp
·
2023-02-23 11:07
redis
redis
缓存
数据库
Hadoop
集群搭建
文章目录一、运行环境配置(所有节点)1、基础配置2、配置Host二、依赖软件安装(101节点)1、安装JDK2、安装Hadoop(root)3、Hadoop目录结构三、本地运行模式(官方WordCount)1、简介2、本地运行模式(官方WordCount)四、完全分布式运行模式1、文件分发脚本(root)2、SSH免密登录设置3、同步文件4、集群节点资源配置4.1核心配置文件(core-site.
ha_lydms
·
2023-02-23 03:58
大数据
hadoop
linux
java
docker高级篇第二章-分布式存储之实战案例:3主3从redis
集群搭建
本篇,我们就来实战3主3从的哈希槽Redis
集群搭建
。大家好,我是凯哥Java(kaigejava),乐于分享,每日更新技术文章,欢迎大家关注“凯哥Java”,及时了解更多。让我们一起学Java。
凯哥Java
·
2023-02-23 03:48
docker学习系列
java
redis
开发语言
Docker Swarm模式下Docker Stack部署应用
搭建应用实验环境接下来的讲解中会完成基于Linux的三节点Swarm
集群搭建
,同时能满足上面应用的全部前置依赖。完成之后,实验环境如下图所示。接下来内
咖猫
·
2023-02-21 20:33
docker
docker swarm
集群搭建
与服务更新
title:"dockerswarm搭建与服务更新"date:2021-12-15T17:54:53+08:00Description:""Tags:["docker","swarm","docker-compose"]Categories:["docker"]DisableComments:false序研究了好久的docker集群部署终于是在本地服务器跑通了。于是趁着热乎赶紧码下来。1.创建集群
4927525
·
2023-02-21 19:21
docker
docker
服务器
运维
【Docker】docker swarm
集群搭建
和相关命令分享
Dockerswarm集群通过dockercli来创建,并通过dockercli来实现应用的部署和集群的管理。Dockerswarm集群的搭建相对简单,这里使用三台虚拟机(一个管理节点,两个worker节点)来简单演示下集群的搭建过程。|-----------------------------------------------------------------||hostname|IP||-
cnskylee
·
2023-02-21 19:19
Docker
docker
容器
docker
swarm
docker集群
DockerSwarm
集群搭建
-实战
文章目录一、环境1.Swarm环境规划2.永久修改主机名3.硬件要求二、初始化docker-swarm管理节点三、节点添加、删除、权限提升、降低1.添加节点2.节点权限提升降低3.脱离集群4.删除已经脱离集群的节点四.安装图形界面1.拉取visualizer镜像2创建容器并运行(manager节点运行)3.测试访问:5.重启这个容器6.启动docker时自动启动五、创建服务1.三台主机都准备好镜像
seeyoutlb
·
2023-02-21 19:18
docker
linux
docker
容器
运维
Kubernetes + Dashboard
集群搭建
1、环境说明基于kubeadm工具部署k8s集群(还有基于二进制的部署方式但是需要单独部署k8s的每个组件比较繁琐)kubeadm是Kubernetes官⽅提供的⽤于快速部署Kubernetes集群的⼯具基于Kubernetesv1.17.0版本部署2、搭建要求k8s对于服务器的系统配置有一定要求1、一台或多台运行着下列系统的机器:Ubuntu16.04+Debian9+CentOS7+RedHa
笨猪大难临头
·
2023-02-21 11:03
容器化/虚拟化
kubernetes
k8s
运维
后端
大数据
Flink学习笔记:Kafka
集群搭建
文章目录集群规划环境准备、kafka安装包下载解压配置文件server.properties启动器群kafka-topics.sh操作创建topic查看topic列表查看指定topic的具体信息删除topic运行一个productor,发送消息运行一个consumer,接收消息集群规划Hostipk8s-node3192.168.0.52k8s-node5192.168.0.109k8s-node
wangzhongyudie
·
2023-02-20 23:15
FLink
大数据
flink
scala
kafka
RabbitMQ 之
集群搭建
配置集群主要一定是在局域网配置,RabbitMQ集群对延迟非常敏感,在广域网中不应该使用集群而是使用Federation和Shovel来代替多机集群一、修改/etc/hosts文件,在其上添加IP地址与节点名称的映射信息vim/etc/hosts192.168.0.2node1192.168.0.3node2192.168.0.4node3二、编辑RabbitMQ的cookie文件,以确保各个节点
_大叔_
·
2023-02-19 06:29
ElasticSearch-7.4.2版本
集群搭建
安装JDK下载wgethttps://download.oracle.com/otn-pub/java/jdk/8u201-b09/42970487e3af4f5aa5bca3f542482c60/jdk-8u201-linux-x64.tar.gz解压tar-xvfjdk-8u201-linux-x64.tar.gz配置java环境变量vi/etc/profile在文件的末尾添加把JAVA_HO
一个守护线程
·
2023-02-18 09:54
k8s原理知识点总结(上)
章节目录1.容器1.1容器的本质1.2容器镜像1.3容器编排2.k8s
集群搭建
2.1kubeadm工作流程介绍2.2搭建完整的k8s集群2.3编写yaml文件3.K8s容器编排和作业管理3.1Pod3.2Deployment3.3StatfulSet3.4DeamonSet3.5Job1
G0550103ULINpei
·
2023-02-17 23:35
Kafka
集群搭建
环境准备服务器集群我用的CentOS-6.7版本的3个虚拟机,主机名为hadoop01、hadoop02、hadoop03,这3台虚拟机既是zookeeper集群,又是kafka集群(但在生产环境中,这两个集群一般搭建在不同的机架中),另外我会使用hadoop用户搭建集群(生产环境中root用户不是可以任意使用的)关于虚拟机的安装可以参考以下两篇文章:在Windows中安装一台Linux虚拟机通过
CoderJed
·
2023-02-17 15:32
从0学习Kafka--集群部署
Kafka
集群搭建
一、搭建环境系统&软件版本系统:CentOSLinuxrelease7.7.1908(Core)JDK:javaversion"1.8.0_171"zookeeper:zookeeper
星源易码
·
2023-02-06 07:32
centos6
集群搭建
网络配置
centos6集群网络配置原始机(最开始配置用于克隆的机器):修改网卡信息:vim/etc/sysconfig/network-scripts/ifcfg-eth0有的是ens33有的是eth0参数说明:首先要选择root用户或者是拥有管理员权限的用户进行操作ifcfg-eth0是网卡名称默认打开好像都是他如果提升没有的话可以进入/etc/sysconfig/network-scripts/目录查
千世先森
·
2023-02-06 01:41
环境配置
网络
linux
centos
nacos
集群搭建
在官方文档上面就有结束搭建nacos是介绍官方文档提供了一个Nacos集群的架构图,当我们访问Nacos时,首先会经过SLB,也就是负载均衡,通常是一个nginx,通过nginx来进行分发到具体的Nacos服务器上面。我们需要给不同的服务器进行部署Nacos,我们这里演示的是一个伪的集群,在一台服务器上面搭建三个Nacos。1.环境准备请确保是在环境中安装使用:64bitOSLinux/Unix/
胡尚
·
2023-02-03 15:56
springcloud
centos
linux
服务器
Hadoop三节点
集群搭建
详细参考:Zookeeper三节点
集群搭建
。安装过程中涉及到的软件:hadoop-2.6.0-cdh5.14.2.tar.gz,下载地址安装过程上传
HideOnStream
·
2023-02-03 14:41
SpringCloudAlibaba微服务构建
一、父工程搭建,基础框架订单,库存系统搭建父工程搭建测试模块搭建二、注册中心nacos搭建nacos
集群搭建
三、负载均衡openfeign搭建四、分布式事务seata搭建五、网关gateway搭建六、流量控制
新生代农名工
·
2023-02-03 11:09
大数据入门知识总结
数据仓库的基本概念2、数据仓库的主要特征3、数据仓库与数据库区别5、数据仓库——ETL三、Hadoop——HDFS分布式存储系统1、Hadoop简介2、HDFS、Yarn、MapReduce3、Hadoop
集群搭建
长不大的大灰狼
·
2023-02-02 14:25
大数据
数据仓库
大数据
hadoop
数据库
Hadoop
集群搭建
-01前期准备
原文在这里https://my.oschina.net/finchxu/blog/3076991整个搭建hadoop集群的流程,包括前期准备安装zookeeper并配置环境编译安装hadoop并启动安装HDFS管理namenode和dataname管理集群硬盘资源安装启动yarn建立MapReduce管理cpu和内存资源01前期准备:1.部署环境VMware15CentOS7jdk8首先启动一台c
叫我懒猫
·
2023-02-02 01:56
redis sentinel
集群搭建
及备份恢复
操作系统主机IP功能centos710.211.55.8Master:6379/Sentinel:26379centos710.211.55.9Slave:6379/Sentinel:26379centos710.211.55.10Slave:6379/Sentinel:263791.Linux下redis安装官网地址:http://redis.io/download1.1安装GCC编译器//查看
西柚酱_
·
2023-02-01 22:21
2021——平淡而深刻
01工作今年基本摸清了公司大部分业务,尽可能让自己具有全局观,技术方面向架构师靠近,比较好的一点是上司愿意给我实验机会,所以可以做的事很多,大大小小出了不少方案,开发并落地,年末的k8s
集群搭建
与应用算是给整体架构的运维部分开了一个好头
刘开心_8a6c
·
2023-02-01 13:07
ceph实战之ceph集群扩展
在上一篇ceph实战之ceph搭建_Mr.Lilh的博客-CSDN博客介绍了
集群搭建
但是没有对ceph-mon节点和ceph-mgr节点进行高可用扩展,那如何实现ceph-mon和ceph-mgr的高可用呢
Mr.Lilh
·
2023-02-01 12:50
ceph
云原生
ceph实战之ceph
集群搭建
上一篇ceph基础_Mr.Lilh的博客-CSDN博客讲了ceph基础这一篇是ceph实战之ceph搭建一:环境要求服务器系统:centos7.9_x86_64ceph版本:octopus二:搭建架构三:各节点服务器资源分配详情节点类型主机IP主机名系统盘数据盘1数据盘2mgr节点10.19.14.10cephmgrsdasdbsdcmon节点10.19.14.23cephstore2sdasdb
Mr.Lilh
·
2023-02-01 12:19
ceph
云原生
hadoop
集群搭建
集群简介HADOOP集群具体来说包含两个集群:HDFS集群和YARN集群,两者逻辑上分离,但物理上常在一起。HDFS集群负责海量数据的存储,集群中的角色主要有:NameNode、DataNode、SecondaryNameNode。YARN集群负责海量数据运算时的资源调度,集群中的角色主要有:ResourceManager、NodeManager。那mapreduce是什么呢?它其实是一个分布式运
·
2023-02-01 12:51
hadoop大数据
在ubuntu环境下搭建slurm
基于ubuntu的slurm
集群搭建
前言一、关闭防火墙以及SELinux二、修改主机名/etc/hosts,/etc/hostname三、配置SSH免密、NTP、NFS1.SSH免密2.NTP安装(不安装似乎也没影响
风轻云淡这
·
2023-02-01 10:29
slurm
ubuntu
linux
服务器
slurm
集群搭建
Slurm是面向Linux和Unix的开源工作调度程序,由世界上许多超级计算机使用,主要功能如下:1、为用户分配计算节点的资源,以执行工作;2、提供的框架在一组分配的节点上启动、执行和监视工作(通常是并行作业);3、管理待处理作业的工作队列来仲裁资源争用问题;Slurm架构环境配置服务器IP主机名操作系统配置控制节点172.18.0.115masterCentOS7.94核8G计算节点1172.1
zoujiangMr
·
2023-02-01 10:48
slurm
linux
运维
centos
slurm
K8S
集群搭建
及踩坑指南(VirtualBox+centos7.6)!
一、安装虚拟机及配置网络环境1.1virtualBox+centos7.6virtualBox下载centos7.6下载1.2网络环境配置Master节点:至少2GB内存,2个CPU。Node节点:1GB内存,1个CPU。这里我们选择两个网卡(NAT+Bridge)模式,网卡的顺序不能出错,否则会导致虚拟机之间无法通信!1.3集群环境配置主机名IPk8s-master10.222.150.197k
kaiakai111
·
2023-01-31 23:06
运维
k8s
graylog3 日志服务器
集群搭建
环境:centos7.6、graylog3版本架构:前端负载采用nginx、后端node分别部署graylog3集群、ES6集群、mongodb集群。Graylog整体组成:Graylog:提供graylog对外接口,webUI,CPUElasticsearch:日志文件的持久化存储和检索,IOMongoDB:存储一些Graylog的配置数据Nginx:负载均衡逻辑架构.png开始部署:1、关闭防
都市小木屋
·
2023-01-31 15:30
kafka
集群搭建
文档
1Kafka
集群搭建
zookeeper
集群搭建
https://www.jianshu.com/p/6ab2b2cb8f3fzookeeper常见用法https://www.jianshu.com/p/29a1792820aa
条子在洗澡
·
2023-01-31 12:17
golang 使用grpc前的准备,基于ETCD服务发现、服务注册
主要使用ETCD来实现服务注册和服务发现ETCD
集群搭建
参考https://www.jianshu.com/p/690d8adcb8c6为什么使用grpc前要实现服务发现、服务注册?
青果山圣斗士
·
2023-01-31 12:35
k8s
集群搭建
k8s
集群搭建
前言今天我们来使用kubeamd方式搭建一下k8s集群,为后面我们要写的微服务项目做个环境准备工作,首先我们看下搭建步骤关闭防火墙systemctlstopfirewalld.servicesystemctldisablefirewalld.service
janker0718
·
2023-01-30 18:33
Hadoop
集群搭建
(二)-网络配置
目录一、VMware网络配置二、Windows网络配置三、CentOS网络配置之前创建虚拟机是选择了NAT模式,需要宿主机的Windows和虚拟机的Linux能够进行网络连接,同时虚拟机的Linux可以通过宿主机的Windows进入互联网。一、VMware网络配置编辑->虚拟网络编辑器点击右下角的更改设置选择VMnet8,将子网IP修改成192.168.10.0,点击NAT设置点击NAT设置,修改
HUA_1740
·
2023-01-30 15:54
hadoop集群搭建
hadoop
网络
linux
Hadoop的
集群搭建
windows基于VMware虚拟机超详细教程(一主二从)
Hadoop
集群搭建
(一主二从)文章目录Hadoop
集群搭建
(一主二从)前言一、VMware安装包以及所需要的jdk,Hadoop安装包二、XSHELL和XFTP下载与安装三、在VMware虚拟机中安装
南风未闻
·
2023-01-30 15:54
linux
hadoop
centos
Hadoop
集群搭建
一、模板虚拟机配置1)设置ip地址设置ip是保证ip地址与主机名保持一致,如:192.168.10.100->hadoop1002)设置hostname修改/etc/hostname文件修改3)设置hostname与ip地址的映射映射的配置文件保存在/etc/hosts中,网络中的每一台机器都是独立保存这份配置文件的。4)yum安装额外的rpm包:yuminstall-yepel-release(
weixin_43038102
·
2023-01-30 15:52
hadoop
大数据
搭建hadoop集群,从安装虚拟机开始直到hadoop成功搭建
要求:1、认真理解
集群搭建
过程,通过实践成功搭建Hadoop集群。2、结合实践内容和教材的相关章
司空良
·
2023-01-30 15:20
hadoop
hadoop
hdfs
linux
大数据基石-Hadoop3.x学习教程-Hadoop产品了解与快速上手
版本全系列教程===楼兰===文章目录一、关于Hadoop1、关于Hadoop产品2、Hadoop课程内容3、Hadoop的主要组件二、Hadoop环境搭建以及快速上手1、Linux环境搭建2、Hadoop
集群搭建
roykingw
·
2023-01-30 15:49
大数据相关
big
data
java
大数据
hadoop
hdfs
大数据
集群搭建
目录一、安装jdk二、安装tomcat三、安装mysql四、搭建集群(三台)4.1新增linux系统4.2关闭防火墙4.3关闭selinux4.4配置hosts文件4.5scp远程文件拷贝4.5.1本地机器内容拷贝到远程机器4.5.2远程机器内容拷贝到本地机器4.6ssh远程登录4.6.1使用ssh基于密码的远程登录(了解)4.6.2使用ssh基于秘钥的免密码登录(掌握)4.7三台机器时钟同步4.
铁疙瘩掉了俩
·
2023-01-30 15:48
大数据
大数据
linux
搭建这个hadoop集群电脑表示要离家出走!
1.hadoop
集群搭建
的详细过程实验前的准备:==jdk==jdk-8u11-linux-x64.tar.gz提取码:wgte==hadoop==hadoop-2.10.1.tar.gz提取码:bfxz
♚ 悲欢自饮
·
2023-01-30 15:17
教程
hadoop
linux
centos
6
centos
大数据
hadoop3
集群搭建
1环境准备hadoop1192.168.38.150jdk1.8hadoop2192.168.38.151jdk1.8hadoop3192.168.38.152jdk1.82环境准备#3台yuminstallsshpdsh#修改hostvim/etc/hosts192.168.38.150hadoop1192.168.38.151hadoop2192.168.38.152hadoop3#修改主机名
响彻天堂丶
·
2023-01-30 15:46
Hadoop
hadoop
hdfs
大数据
大数据之Hadoop
集群搭建
(4个节点)
大数据必备–搭建Hadoop集群(4个节点)初学大数据肯定第一步先搭建hadoop集群,虽然不知道怎么用,但是先搭建集群是你大数据学习之旅的第一步,操作步骤有以下这几步,用的centos系统对四台虚拟机进网络和静态IP设置Hadoop、jdk的安装创建hadoop文件目录导入jdk和hadoop的环境变量修改hadoop配置文件修改虚拟机主机名绑定hostname与ip地址关闭防火墙配置节点之间的
普通网友
·
2023-01-30 15:46
java
java
后端
大数据基础平台搭建-(三)Hadoop集群HA+Zookeeper搭建
大数据基础平台搭建-(三)Hadoop集群HA+Zookeeper搭建大数据平台系列文章:1、大数据基础平台搭建-(一)基础环境准备2、大数据基础平台搭建-(二)Hadoop
集群搭建
3、大数据基础平台搭建
dyj095
·
2023-01-30 14:43
大数据
hadoop
大数据
zookeeper
kafka.2
集群搭建
文章目录1.启动kakfa自带的zk2.启动kafka集群3.查看zookeeper的kafka节点信息启停kafka集群脚本创建主题增加分区模拟生产消费模拟消费组消费主题,查看offset1.启动kakfa自带的zk参考:https://blog.csdn.net/justlpf/article/details/127261664?utm_medium=distribute.pc_relevan
yan_baby_liu
·
2023-01-30 09:19
kafka
kafka
分布式
hadoop大数据平台的构建
hadoop特点hadoop组成hadoop默认端口hadoop分布
集群搭建
前置准备关闭防火墙修改各个节点的主机名修改自己所用节点的IP映射需要在所有节点上完成网络配置时间同步(三台机器均执行)ssh免密
JeremyHeria
·
2023-01-30 04:27
#
hadoop
大数据
hadoop
big
data
mapreduce
分布式
大数据
大数据平台安装部署(适用虚拟机级真实服务器,亲测)
大数据
集群搭建
一、基础环境准备(虚拟环境or服务器环境)1.虚拟环境准备(服务器安装跳过此步骤)1.1安装vmware注意:安装centos8系统及以上需要高版本vmware,实测vmware12.x会出现错误
小崔编码
·
2023-01-30 04:06
Hadoop
hadoop
spark
zookeeper
大数据
系统安装
Redis高可用篇:Cluster集群能支持的数据量有多大?,中软国际Java笔试题和答案
集群安装====点击->《Redis6.XCluster
集群搭建
》查看一个Redis集群通常由多个节点(node)组成,在刚开始的时候,每个节点都是相互独立的,它们都处于一个只包含自己的集
普通网友
·
2023-01-29 13:48
程序员
面试
java
后端
上一页
33
34
35
36
37
38
39
40
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他