E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop2.7.3集群搭建
Solr
集群搭建
zookeeper配置1.下载zookeeper,解压2.conf同级目录新建data,log两个文件夹3.data中新建myid文件,内容分别存放server的名称(1,2,3)(对应zoo.zfg中的server.1,server.2,server.3)4.进入conf文件夹,拷贝zoo.example.zfg文件为zoo.zfg5.修改zoo.zfg文件:dataDir=XXX/XXX/zo
炼心之旅
·
2023-03-09 19:42
hadoop3.x-尚硅谷笔记1(入门与背景知识)
20220114-20220115听的课,P1-P17尚硅谷大数据Hadoop3.x(入门搭建+安装调优)_哔哩哔哩_bilibili课前背景课程改变:hadoop3.1.3主要变化内容yarn调度器与调度算法
集群搭建
完毕后的压测
还我的鸭脖!
·
2023-03-09 11:43
hadoop
hadoop
mapreduce
大数据
Centos7 安装MongoDB-4.2.5
集群搭建
以及测试
MongoDb-4.2.5:下载地址解压tar-zxfmongodb-linux-x86_64-rhel70-4.2.5.tgz修改名称mvmongodb-linux-x86_64-rhel70-4.2.5.tgzmongodb-4.2.5添加MongoDb环境变量vim~/.bashrc添加下列内容例子:#exportPATH=/bin:$PATH实际添加:exportPATH=/home/wx
IT_小白
·
2023-03-09 10:19
搭建k8s集群(一)------创建虚拟机
参考视频教程:**Kubernetes实战高可用
集群搭建
,配置,运维与应用**在搭建kubernetes集群之前,我们需要先创建三个完全相同的虚拟机。
challenge-linge
·
2023-03-09 10:41
it
it
公网k8s
集群搭建
史上超详细的教程!!!
一、背景:1、实验背景在学习k8s搭建中,网上大部分教程都是用虚拟机做单机集群,只有极少数是使用服务器搭建教程;但是用云服务器搭建的教程中教程版本都比较老(随着时间的推移),因为没有详细说明之后更新的版本需要怎么搭建?搭建完后可能会有小白问,为什么k8s搭建需要指定版本的kubeletkebeadmdocker等等环境?如果以后有更新的k8s那又需要怎么找到合适的版本进行搭建,这个是很多网上都没有
一季樱花落雨殇ing
·
2023-03-09 10:36
编程
k8s
kubernetes
docker
容器
基于Centos7安装k8s集群
参考文章:部署k8s集群(k8s
集群搭建
详细实践版)k8sGithub地址:https://github.com/kubernetes/kubernetesk8s组件简介:k8s集群概念组件简介1、部署
风情客家__
·
2023-03-09 10:02
K8s
K8s
Centos7
Redis哨兵详解
Redis详解DevToCoding|Java面试指南、学习笔记目录Redis哨兵工作原理哨兵的作用服务状态监控工作原理总结redis哨兵
集群搭建
RedisTemplate操作哨兵Redis哨兵工作原理哨兵的作用
阿里巴巴P8资深技术专家
·
2023-03-09 07:35
Java
Redis
redis
缓存
数据库
Hadoop高可用(HA)
集群搭建
高可用(highavailability,HA)指的是若当前工作中的机器宕机了,系统会自动处理异常,并将工作无缝地转移到其他备用机器上,以保证服务的高可靠性与可用性。而Zookeeper是一个分布式协调服务,Zookeeper即可用来保证Hadoop集群的高可用性。通过zookeeper集群与Hadoop2.X中的两个NameNode节点之间的通信,保证集群中总有一个可用的NameNode(即ac
five小点心
·
2023-03-09 07:03
Hadoop
hadoop
ZooKeeper
集群搭建
步骤
zookeeper是一个分布式协调服务。所谓分布式协调主要是来解决分布式系统中多个进程之间的同步限制,防止出现脏读,例如我们常说的分布式锁。zookeeper中的数据是存储在内存当中的,因此它的效率十分高效。它内部的存储方式十分类似于文件存储结构,采用了分层存储结构。但是它和文件存储结构的区别是,它的各个节点中是允许存储数据的,需要注意的是zk的每个节点存储数据不能超过1M。它的内存数据结果如下图
five小点心
·
2023-03-09 07:02
Hadoop
java-zookeeper
zookeeper
java
centos7 redis
集群搭建
1.前提redis版本必须是3.0以上否则只能主从复制和哨兵!下载redis就不赘述了请参阅http://www.runoob.com/redis/redis-install.html1.下载ruby集群脚本语言需借助rubyyum-yinstallrubyruby-develrubygemsrpm-build2.如出现以下错误说明ruby版本太低(centos默认安装2的版本)ERROR:Err
每天都是幸运的一天
·
2023-03-09 06:39
搭建 RabbitMQ Server 高可用集群
阅读目录:准备工作搭建RabbitMQServer单机版RabbitMQServer高可用集群相关概念搭建RabbitMQServer高可用
集群搭建
HAProxy负载均衡因为公司测试服务器暂不能用,只能在自己电脑上重新搭建一下
foveni
·
2023-03-09 00:43
k8s部署redis集群实现过程实例详解
目录写在前面前置准备一、nfs安装二、SC、PV创建2.1创建SC2.2创建PV三、redis
集群搭建
3.1创建headless服务3.2创建redis对应pod集群写在前面一般来说,REDIS部署有三种模式
·
2023-02-27 18:05
k8s部署redis
集群搭建
过程示例详解
目录写在前面一、redis
集群搭建
1.1使用redis-cli创建集群1.2redis集群状态验证(可选)1.3重启pod,验证集群(可选)1.4创建Service服务1.5Springboot项目配置
·
2023-02-27 18:05
Flink
集群搭建
转载连接https://www.jianshu.com/p/44bd6b652204Flink
集群搭建
Flink可以选择的部署方式有:Local、Standalone(资源利用率低)、Yarn、Mesos
十一师兄
·
2023-02-25 07:50
Flink
flink
Flink基本架构与集群环境搭建
Flink架构与
集群搭建
一、Flink基本架构1.1JobManager与TaskManager1.2无界数据流与有界数据流1.3数据流编程模型二、Flink
集群搭建
2.1Standalone模式安装2.2Yarn
故明所以
·
2023-02-25 07:20
Flink
flink
大数据
hadoop
集群搭建
(超详细版)
1.准备好需要安装的软件虚拟机VMware12.pro操作系统CentOS6.5远程控制虚拟机的终端SecureCRT8.12.在虚拟机中安装CentOS操作系统安装好虚拟机,图形界面如下图创建新的虚拟机,选择自定义(高级),点击下一步虚拟机硬件兼容性默认,浏览需要安装的CentOS6.5镜像文件自定义用户名和密码(用于登录)设置虚拟机名称和存储路径处理器设置默认(后面可以修改),内存设为1GB网
普通网友
·
2023-02-23 14:32
java
java
后端
redis-cluster
集群搭建
安装redis所需环境yuminstall-ygcc-c++yuminstall-ywget创建文件夹cd/mkdirredis/redis-cluster/7001cdredis/redis-clustermkdir7002700370047005700670077008下载redis压缩包并解压安装wgethttps://download.redis.io/redis-stable.tar.g
lightYouUp
·
2023-02-23 11:07
redis
redis
缓存
数据库
Hadoop
集群搭建
文章目录一、运行环境配置(所有节点)1、基础配置2、配置Host二、依赖软件安装(101节点)1、安装JDK2、安装Hadoop(root)3、Hadoop目录结构三、本地运行模式(官方WordCount)1、简介2、本地运行模式(官方WordCount)四、完全分布式运行模式1、文件分发脚本(root)2、SSH免密登录设置3、同步文件4、集群节点资源配置4.1核心配置文件(core-site.
ha_lydms
·
2023-02-23 03:58
大数据
hadoop
linux
java
docker高级篇第二章-分布式存储之实战案例:3主3从redis
集群搭建
本篇,我们就来实战3主3从的哈希槽Redis
集群搭建
。大家好,我是凯哥Java(kaigejava),乐于分享,每日更新技术文章,欢迎大家关注“凯哥Java”,及时了解更多。让我们一起学Java。
凯哥Java
·
2023-02-23 03:48
docker学习系列
java
redis
开发语言
Docker Swarm模式下Docker Stack部署应用
搭建应用实验环境接下来的讲解中会完成基于Linux的三节点Swarm
集群搭建
,同时能满足上面应用的全部前置依赖。完成之后,实验环境如下图所示。接下来内
咖猫
·
2023-02-21 20:33
docker
docker swarm
集群搭建
与服务更新
title:"dockerswarm搭建与服务更新"date:2021-12-15T17:54:53+08:00Description:""Tags:["docker","swarm","docker-compose"]Categories:["docker"]DisableComments:false序研究了好久的docker集群部署终于是在本地服务器跑通了。于是趁着热乎赶紧码下来。1.创建集群
4927525
·
2023-02-21 19:21
docker
docker
服务器
运维
【Docker】docker swarm
集群搭建
和相关命令分享
Dockerswarm集群通过dockercli来创建,并通过dockercli来实现应用的部署和集群的管理。Dockerswarm集群的搭建相对简单,这里使用三台虚拟机(一个管理节点,两个worker节点)来简单演示下集群的搭建过程。|-----------------------------------------------------------------||hostname|IP||-
cnskylee
·
2023-02-21 19:19
Docker
docker
容器
docker
swarm
docker集群
DockerSwarm
集群搭建
-实战
文章目录一、环境1.Swarm环境规划2.永久修改主机名3.硬件要求二、初始化docker-swarm管理节点三、节点添加、删除、权限提升、降低1.添加节点2.节点权限提升降低3.脱离集群4.删除已经脱离集群的节点四.安装图形界面1.拉取visualizer镜像2创建容器并运行(manager节点运行)3.测试访问:5.重启这个容器6.启动docker时自动启动五、创建服务1.三台主机都准备好镜像
seeyoutlb
·
2023-02-21 19:18
docker
linux
docker
容器
运维
Kubernetes + Dashboard
集群搭建
1、环境说明基于kubeadm工具部署k8s集群(还有基于二进制的部署方式但是需要单独部署k8s的每个组件比较繁琐)kubeadm是Kubernetes官⽅提供的⽤于快速部署Kubernetes集群的⼯具基于Kubernetesv1.17.0版本部署2、搭建要求k8s对于服务器的系统配置有一定要求1、一台或多台运行着下列系统的机器:Ubuntu16.04+Debian9+CentOS7+RedHa
笨猪大难临头
·
2023-02-21 11:03
容器化/虚拟化
kubernetes
k8s
运维
后端
大数据
Flink学习笔记:Kafka
集群搭建
文章目录集群规划环境准备、kafka安装包下载解压配置文件server.properties启动器群kafka-topics.sh操作创建topic查看topic列表查看指定topic的具体信息删除topic运行一个productor,发送消息运行一个consumer,接收消息集群规划Hostipk8s-node3192.168.0.52k8s-node5192.168.0.109k8s-node
wangzhongyudie
·
2023-02-20 23:15
FLink
大数据
flink
scala
kafka
RabbitMQ 之
集群搭建
配置集群主要一定是在局域网配置,RabbitMQ集群对延迟非常敏感,在广域网中不应该使用集群而是使用Federation和Shovel来代替多机集群一、修改/etc/hosts文件,在其上添加IP地址与节点名称的映射信息vim/etc/hosts192.168.0.2node1192.168.0.3node2192.168.0.4node3二、编辑RabbitMQ的cookie文件,以确保各个节点
_大叔_
·
2023-02-19 06:29
ElasticSearch-7.4.2版本
集群搭建
安装JDK下载wgethttps://download.oracle.com/otn-pub/java/jdk/8u201-b09/42970487e3af4f5aa5bca3f542482c60/jdk-8u201-linux-x64.tar.gz解压tar-xvfjdk-8u201-linux-x64.tar.gz配置java环境变量vi/etc/profile在文件的末尾添加把JAVA_HO
一个守护线程
·
2023-02-18 09:54
k8s原理知识点总结(上)
章节目录1.容器1.1容器的本质1.2容器镜像1.3容器编排2.k8s
集群搭建
2.1kubeadm工作流程介绍2.2搭建完整的k8s集群2.3编写yaml文件3.K8s容器编排和作业管理3.1Pod3.2Deployment3.3StatfulSet3.4DeamonSet3.5Job1
G0550103ULINpei
·
2023-02-17 23:35
Kafka
集群搭建
环境准备服务器集群我用的CentOS-6.7版本的3个虚拟机,主机名为hadoop01、hadoop02、hadoop03,这3台虚拟机既是zookeeper集群,又是kafka集群(但在生产环境中,这两个集群一般搭建在不同的机架中),另外我会使用hadoop用户搭建集群(生产环境中root用户不是可以任意使用的)关于虚拟机的安装可以参考以下两篇文章:在Windows中安装一台Linux虚拟机通过
CoderJed
·
2023-02-17 15:32
hadoop(一)CentOS7安装单机版
Hadoop2.7.3
CentOS7安装单机版
Hadoop2.7.3
前期准备安装java,拷贝oracle官网下载的jdk-8u111-linux-x64.rpm到虚拟机内。
文子轩
·
2023-02-17 09:48
从0学习Kafka--集群部署
Kafka
集群搭建
一、搭建环境系统&软件版本系统:CentOSLinuxrelease7.7.1908(Core)JDK:javaversion"1.8.0_171"zookeeper:zookeeper
星源易码
·
2023-02-06 07:32
centos6
集群搭建
网络配置
centos6集群网络配置原始机(最开始配置用于克隆的机器):修改网卡信息:vim/etc/sysconfig/network-scripts/ifcfg-eth0有的是ens33有的是eth0参数说明:首先要选择root用户或者是拥有管理员权限的用户进行操作ifcfg-eth0是网卡名称默认打开好像都是他如果提升没有的话可以进入/etc/sysconfig/network-scripts/目录查
千世先森
·
2023-02-06 01:41
环境配置
网络
linux
centos
nacos
集群搭建
在官方文档上面就有结束搭建nacos是介绍官方文档提供了一个Nacos集群的架构图,当我们访问Nacos时,首先会经过SLB,也就是负载均衡,通常是一个nginx,通过nginx来进行分发到具体的Nacos服务器上面。我们需要给不同的服务器进行部署Nacos,我们这里演示的是一个伪的集群,在一台服务器上面搭建三个Nacos。1.环境准备请确保是在环境中安装使用:64bitOSLinux/Unix/
胡尚
·
2023-02-03 15:56
springcloud
centos
linux
服务器
Hadoop三节点
集群搭建
详细参考:Zookeeper三节点
集群搭建
。安装过程中涉及到的软件:hadoop-2.6.0-cdh5.14.2.tar.gz,下载地址安装过程上传
HideOnStream
·
2023-02-03 14:41
SpringCloudAlibaba微服务构建
一、父工程搭建,基础框架订单,库存系统搭建父工程搭建测试模块搭建二、注册中心nacos搭建nacos
集群搭建
三、负载均衡openfeign搭建四、分布式事务seata搭建五、网关gateway搭建六、流量控制
新生代农名工
·
2023-02-03 11:09
大数据入门知识总结
数据仓库的基本概念2、数据仓库的主要特征3、数据仓库与数据库区别5、数据仓库——ETL三、Hadoop——HDFS分布式存储系统1、Hadoop简介2、HDFS、Yarn、MapReduce3、Hadoop
集群搭建
长不大的大灰狼
·
2023-02-02 14:25
大数据
数据仓库
大数据
hadoop
数据库
Hadoop
集群搭建
-01前期准备
原文在这里https://my.oschina.net/finchxu/blog/3076991整个搭建hadoop集群的流程,包括前期准备安装zookeeper并配置环境编译安装hadoop并启动安装HDFS管理namenode和dataname管理集群硬盘资源安装启动yarn建立MapReduce管理cpu和内存资源01前期准备:1.部署环境VMware15CentOS7jdk8首先启动一台c
叫我懒猫
·
2023-02-02 01:56
redis sentinel
集群搭建
及备份恢复
操作系统主机IP功能centos710.211.55.8Master:6379/Sentinel:26379centos710.211.55.9Slave:6379/Sentinel:26379centos710.211.55.10Slave:6379/Sentinel:263791.Linux下redis安装官网地址:http://redis.io/download1.1安装GCC编译器//查看
西柚酱_
·
2023-02-01 22:21
2021——平淡而深刻
01工作今年基本摸清了公司大部分业务,尽可能让自己具有全局观,技术方面向架构师靠近,比较好的一点是上司愿意给我实验机会,所以可以做的事很多,大大小小出了不少方案,开发并落地,年末的k8s
集群搭建
与应用算是给整体架构的运维部分开了一个好头
刘开心_8a6c
·
2023-02-01 13:07
ceph实战之ceph集群扩展
在上一篇ceph实战之ceph搭建_Mr.Lilh的博客-CSDN博客介绍了
集群搭建
但是没有对ceph-mon节点和ceph-mgr节点进行高可用扩展,那如何实现ceph-mon和ceph-mgr的高可用呢
Mr.Lilh
·
2023-02-01 12:50
ceph
云原生
ceph实战之ceph
集群搭建
上一篇ceph基础_Mr.Lilh的博客-CSDN博客讲了ceph基础这一篇是ceph实战之ceph搭建一:环境要求服务器系统:centos7.9_x86_64ceph版本:octopus二:搭建架构三:各节点服务器资源分配详情节点类型主机IP主机名系统盘数据盘1数据盘2mgr节点10.19.14.10cephmgrsdasdbsdcmon节点10.19.14.23cephstore2sdasdb
Mr.Lilh
·
2023-02-01 12:19
ceph
云原生
hadoop
集群搭建
集群简介HADOOP集群具体来说包含两个集群:HDFS集群和YARN集群,两者逻辑上分离,但物理上常在一起。HDFS集群负责海量数据的存储,集群中的角色主要有:NameNode、DataNode、SecondaryNameNode。YARN集群负责海量数据运算时的资源调度,集群中的角色主要有:ResourceManager、NodeManager。那mapreduce是什么呢?它其实是一个分布式运
·
2023-02-01 12:51
hadoop大数据
在ubuntu环境下搭建slurm
基于ubuntu的slurm
集群搭建
前言一、关闭防火墙以及SELinux二、修改主机名/etc/hosts,/etc/hostname三、配置SSH免密、NTP、NFS1.SSH免密2.NTP安装(不安装似乎也没影响
风轻云淡这
·
2023-02-01 10:29
slurm
ubuntu
linux
服务器
slurm
集群搭建
Slurm是面向Linux和Unix的开源工作调度程序,由世界上许多超级计算机使用,主要功能如下:1、为用户分配计算节点的资源,以执行工作;2、提供的框架在一组分配的节点上启动、执行和监视工作(通常是并行作业);3、管理待处理作业的工作队列来仲裁资源争用问题;Slurm架构环境配置服务器IP主机名操作系统配置控制节点172.18.0.115masterCentOS7.94核8G计算节点1172.1
zoujiangMr
·
2023-02-01 10:48
slurm
linux
运维
centos
slurm
K8S
集群搭建
及踩坑指南(VirtualBox+centos7.6)!
一、安装虚拟机及配置网络环境1.1virtualBox+centos7.6virtualBox下载centos7.6下载1.2网络环境配置Master节点:至少2GB内存,2个CPU。Node节点:1GB内存,1个CPU。这里我们选择两个网卡(NAT+Bridge)模式,网卡的顺序不能出错,否则会导致虚拟机之间无法通信!1.3集群环境配置主机名IPk8s-master10.222.150.197k
kaiakai111
·
2023-01-31 23:06
运维
k8s
graylog3 日志服务器
集群搭建
环境:centos7.6、graylog3版本架构:前端负载采用nginx、后端node分别部署graylog3集群、ES6集群、mongodb集群。Graylog整体组成:Graylog:提供graylog对外接口,webUI,CPUElasticsearch:日志文件的持久化存储和检索,IOMongoDB:存储一些Graylog的配置数据Nginx:负载均衡逻辑架构.png开始部署:1、关闭防
都市小木屋
·
2023-01-31 15:30
kafka
集群搭建
文档
1Kafka
集群搭建
zookeeper
集群搭建
https://www.jianshu.com/p/6ab2b2cb8f3fzookeeper常见用法https://www.jianshu.com/p/29a1792820aa
条子在洗澡
·
2023-01-31 12:17
golang 使用grpc前的准备,基于ETCD服务发现、服务注册
主要使用ETCD来实现服务注册和服务发现ETCD
集群搭建
参考https://www.jianshu.com/p/690d8adcb8c6为什么使用grpc前要实现服务发现、服务注册?
青果山圣斗士
·
2023-01-31 12:35
k8s
集群搭建
k8s
集群搭建
前言今天我们来使用kubeamd方式搭建一下k8s集群,为后面我们要写的微服务项目做个环境准备工作,首先我们看下搭建步骤关闭防火墙systemctlstopfirewalld.servicesystemctldisablefirewalld.service
janker0718
·
2023-01-30 18:33
Hadoop
集群搭建
(二)-网络配置
目录一、VMware网络配置二、Windows网络配置三、CentOS网络配置之前创建虚拟机是选择了NAT模式,需要宿主机的Windows和虚拟机的Linux能够进行网络连接,同时虚拟机的Linux可以通过宿主机的Windows进入互联网。一、VMware网络配置编辑->虚拟网络编辑器点击右下角的更改设置选择VMnet8,将子网IP修改成192.168.10.0,点击NAT设置点击NAT设置,修改
HUA_1740
·
2023-01-30 15:54
hadoop集群搭建
hadoop
网络
linux
上一页
33
34
35
36
37
38
39
40
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他