E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
linux集群
linux集群
的部署
linux集群
的部署1、在虚拟机中实例三个虚拟机主机,三个虚拟主机需要配置IP,且两两之间可以ping通2、关闭防火墙(需要在所有的主机中进行设置)/etc/init.d/iptablesstopchkconfigiptablesoff3
Guoxiang1030_
·
2019-10-21 17:13
Linux CentOS VMware创建3台服务器的
Linux集群
并简单配置(四)功能性配置
ssh免密登录首先测试ssh登录sshhadoop02输入密码后,登陆成功现在,设置免密登录(1)把你的node01,node02,node03虚拟机都开启(2)在hadoop01,hadoop02,hadoop03上分别执行ssh-keygen,连续按三次回车,出现如下效果cd/root/.ssh/[enter]ssh-keygen[enter][enter][enter][enter]切换到/
大数据DENGAI
·
2019-10-21 17:18
linux
Linux
基础
CentOS
Linux CentOS VMware创建3台服务器的
Linux集群
并简单配置(二)安装操作系统
打开VMware,选中三台中的第一台虚拟机,点击开启此虚拟机如果出现这个窗口,点击否开机后,卡在这里,说明没使用iso镜像关机编辑此虚拟机设置点击浏览,找到你的iso镜像文件然后打开勾选启动时连接,点击确定开启此虚拟机在这里直接按回车稍等片刻,出现如下界面,点击skip点next选择中文简体,再next键盘选美国英语式,next使用基本存储设备,next出现一个窗口,选择是,忽略所有数据主机名修改
大数据DENGAI
·
2019-10-21 15:04
Linux
基础
CentOS
Linux CentOS VMware创建3台服务器的
Linux集群
并简单配置(一)创建虚拟机
1,创建三台相同配置的虚拟机首先创建3个空文件夹,分别用来装3台虚拟机。打开VMware点击创建新的虚拟机,选择自定义,点击下一步选择Workstation15.x或者Workstation14.x都行选择稍后安装操作系统选择LinuxCentOS64位这是第一个,选择node01,下一步更改虚拟机名称为node01,下一步双核处理器,下一步4G内存,下一步使用NAT,下一步选择LSILogic,
大数据DENGAI
·
2019-10-21 14:05
linux
Linux
基础
CentOS
linux下nacos的1.1.3版本集群部署
windows单机版参见0.9.0.RELEASE版本的springcloudalibabanacos实例,
linux集群
版我们还是用上次下载的nacos压缩包,通过rz-y上传到wlf用户下soft目录
不想下火车的人
·
2019-09-18 16:00
使用VirtualBox模拟
Linux集群
的方法
1.在主机Macbook上设置HOST前文书已经把虚拟机的静态IP地址设置好,以后可以通过ip地址登录了。不过为了方便,还是设置一下,首先在Mac下修改hosts文件,这样在ssh时就不用输入ip地址了。sudovim/etc/hosts或者sudovim/private/etc/hosts这两个文件其实是一个,是通过link做的链接。注意要加上sudo,以管理员运行,否则不能存盘。###Host
峻祁连
·
2019-09-16 10:47
[大数据学习研究]2.利用VirtualBox模拟
Linux集群
1.在主机Macbook上设置HOST前文书已经把虚拟机的静态IP地址设置好,以后可以通过ip地址登录了。不过为了方便,还是设置一下,首先在Mac下修改hosts文件,这样在ssh时就不用输入ip地址了。sudovim/etc/hosts或者sudovim/private/etc/hosts这两个文件其实是一个,是通过link做的链接。注意要加上sudo,以管理员运行,否则不能存盘。###Host
峻祁连
·
2019-09-16 10:00
Linux集群
系列——iSCSI协议、gfs、cLVM
ISCSI协议侦听在TCP/3260ISCSI会话iSCSITarget:scsi-target-utils客户端认证方式:1、基于IP2、基于用户,CHAPiSCSIInitiator:iscsi-initiator-utilsopen-iscsi计算机内部架构图解:SCSI协议详情:SAN:SCSI协议结构:FCSAN与IPSAN存储协议:FCoEvsFCvsiSCSIvsIBiscsi传输机
TomJames
·
2019-08-19 14:17
iscsi
gfs
cLVM
Linux集群
系列——分布式复制块设备drbd的基础概念及配置
DRBD:DistributedReplicatedBlockDevice分布式复制块设备heartbeat-ldirectord作用生成规则健康状态检查corosync+ldirectordkeepalived+ipvsserver:rsync+inotifyClient:rsync,sersyncSAN:把SAN网络模拟成SCSI总线,HOSTinitiatorSANservertarget(
TomJames
·
2019-08-14 17:02
DRBD
Linux集群
系列——高可用集群之corosync基础概念及安装配置.
高可用衡量标准:corosync:集群管理引擎SAForum——>OpenAIS——>Wilson——>corosync向后延伸为衍生出来的版本REHL6.xRHCS:corosyncREHL5.xRHCS:OpenAIS,cman,rgmanagercorosync:MessagingLayer需要CRM(+pacemaker)SUSELinuxEnterpriseserverHawkWEBGU
TomJames
·
2019-08-14 16:40
corosync
Linux集群
——高可用集群之heartbeat
Heartbeat:UDP694heartbeatv2hawebnode1,node2节点名称,/etc/hosts节点名称必须跟uname-n命令的执行结果一致ssh互信通信时间同步HeartbeatHeartbeatsubsystemforHigh-AvailabilityLinuxheartbeat-develHeartbeatdevelopmentpackageheartbeat-guiP
TomJames
·
2019-08-09 16:55
Heartbeat
Linux集群
——高可用集群原理详解
主备节点名称:Active/PassivePrimary/Standby心跳:HeartbeatHAResource:IP,Service,STONITHFailOver:故障转移FailBack:服务切回资源粘性:资源更倾向于运行于哪个节点集群内部信息传递是基于UDP的MessagingLayer资源管理器CRMClusterResourceManagerDC:DesignatedCoordin
TomJames
·
2019-08-08 17:18
HA
Linux集群
——LVS类型详解
LB:调度算法:rrwrr分类:HardwareF5,BIGIPCitrix,NetscalerA10Software四层LVS七层反向代理nginxhttp,smtp,pop3,imaphaproxyhttp,tcp(mysql,smtp)LVS:LinuxVirtualServerdirector:调度器realserverlvs与iptables不能同时使用LVSipvsadm:管理集群服务
TomJames
·
2019-08-05 17:09
LVS
Linux集群
系列——集群基础概念
Linux集群
:ScaleOn:向上扩展ScaleOut:向外扩展架构LoadBalancing:LBRoundRobin:轮调WRR:加权rsync+inotify同步+通知Healthcheck:健康检查
TomJames
·
2019-08-05 16:42
集群
Linux集群
部署文件及目录共享
一、服务器端配置1、nfs-utils安装首先检查是否安装:#rpm-aqnfs-utilsrpcbind说明已经默认安装,如果没有,可以使用如下命令安装:#yum -y install rpcbind nfs-utils2、启动nfs,prcbind服务查看nfs服务启动状态:#servicenfsstatus启动命令:#serviceprcbindstart#servicenfssta
落叶1210
·
2019-07-18 11:57
linux
Saltstack安装
linux集群
管理,配置基本相同。刚开始维护几台服务器登录服务器一台一台改也不费事。当手头主机有上百台的时候,操作起来就有些崩溃了。
wx5c99da787fd83
·
2019-06-28 20:11
Saltstack安装
Linux集群
基础--lvs
系统扩展方式:scaleup:向上扩展scaleout:集群类型:LB:loadbalance负载均衡集群,HA:highavailability,高可用集群HP:很少用Availability:平均无故障时间/平均无故障时间+故障修复时间系统:可扩展性;可用性容量性能系统运维:可用-->标准化-->自动化构建高可用系统原则:避免串行化交互GSLB:globeserviceloadbalanceS
啃瓜皮的小
·
2019-06-21 22:11
lvs基础
PyCharm搭建Spark开发环境实现第一个pyspark程序
一,PyCharm搭建Spark开发环境Windows7,Java1.8.0_74,Scala2.12.6,Spark2.2.1,Hadoop2.7.6通常情况下,Spark开发是基于
Linux集群
的,
-赶鸭子上架-
·
2019-06-13 16:24
Linux 集群
原文地址
Linux集群
计算Linux中集群项目的数量就象计算硅谷中创业公司的数量一样。不象WindowsNT已经受其自身的封闭环境阻碍,Linux有大量的集群系统可供选择,适合于不同的用途和需要。
-零
·
2019-05-31 18:00
CENTOS7 高性能
Linux集群
通过yum进行 haproxy配置 !安装 !使用!HAProxy配置文件详解
照片参考:https://blog.csdn.net/weixin_...Haproxy配置永久修改名字:便于区分虚拟机!Haproxy:hostnamectlset-hostnamehaproxyWeb1:hostnamectlset-hostnameWEB1Web2:hostnamectlset-hostnameWEB2Test:hostnamectlset-hostnametest1、hap
HWP_可爱的小胖胖
·
2019-05-22 00:00
负载均衡
centos
linux
linux集群
免密码登录,集群直接文件传递
IP主机名192.168.101.130centos1192.168.101.131centos2为演示
linux集群
直接的免密码登录,集群文件传输,只用两台机器的集群,集群搭建的过程参考近期博客首先在
今夕今年
·
2019-04-29 11:36
linux
2019最新java架构师(实战篇)
Solr应用大数据高并发架构实战案例UML建模视频教程storm入门到精通Solr千万级的海量搜索实战Redis从入门到精通Nginx网络架构Nginx+Tomcat+Memcached群集配置软件包
Linux
kklfyt
·
2019-03-27 18:31
linux集群
的配置
CentOS-7-x86_64-Minimal-1804.isoc.jdkjdk-8u181-linux-x64.tar.gzd.hadoop-2.7.3.tar.gze.securcrt#shell客户端2.
linux
奋斗的周周
·
2019-03-27 11:48
linux
Linux集群
间ssh免密登陆
在使用VMwareWorkstation创建了Linux虚拟机之后,我们首先应该知道它的ip地址,我们可以通过命令ipaddr查看IP地址例如:上图中的192.168.133.128就是这个虚拟机的ip地址其中root@bigdata128代表当前用户为root,主机名为bigdata128以三台虚拟机为例:在进行免密登录之前,我们先要修改hosts文件vi/etc/hosts在文档末尾追加文件前
hongxiao2016
·
2019-03-26 16:12
初始大数据-虚拟机配置hadoop伪分布式_02
1.
linux集群
情况1.window宿主192.168.137.188node01.hadoop.comnode01192.168.137.10000:50:56:3D:7D:CCroot123456node02
啊策策
·
2019-03-19 09:41
Hadoop
伪分布式
shell
core-site.xml
hdfs-site.xml
marped-site.xml
运行环境jre版本和jar包编译版本不一致导致:Unsupported major.minor version 52.0
问题我在本地使用IntellijIdea打包了一个spark的程序jar包,放到
linux集群
上运行,报错信息是:Unsupportedmajor.minorversion52.0环境本机系统->windows10
stone-zhu
·
2019-03-09 13:21
Java
linux集群
自动化搭建(生成密钥对+分发公钥+远程批量执行脚本)
之前介绍过ansible的使用,通过ssh授权批量控制服务器集群但是生成密钥和分发公钥的时候都是需要确认密码的,这一步也是可以自动化的,利用ssh+expect+scp就可以实现,其实只用这几个命令结合也可以实现类似ansible的功能了为了远程操作服务器进行环境初始化,总结我们都需要以下几步操作1.ssh-keygen生成密钥对2.将生成的公钥发送到node服务器3.scp拷贝安装包到node服
雪山飞猪
·
2019-02-24 11:00
linux集群
:设置时间同步
1,使用命令date-s配置crond定时计划,执行以下脚本for((i=101;is102[192.168.56.112]-->s103[192.168.56.113]设置:s101为时间服务器,其他节点同步s101的时间1,所有节点,统一使用yum安装ntp2,修改/etc/ntpd.confa,服务器master节点集群不能访问外网:修改/etc/ntpd.conf##允许56网段的服务器来
根哥的博客
·
2019-01-27 22:57
linux编程-shell
Windws环境下eclipse中开发MapReduce程序详细步骤
Step1:下载Hadoop利用Xftp软件连接(一台主机)Linux文件目录,将
Linux集群
中配置的hadoop-2.8.5文件夹下载到windows本地目录(放到一个目录),下面的讲解是以F盘为例
FLEMMINGS
·
2019-01-07 18:04
Hadoop
Linux rhel7.0 pacemaker集群搭建和配置
一集群环境介绍一
Linux集群
发展史高可用集群的层次结构1消息/基础架构corosync2成员关系:监听心跳信息,并进行处理成员关系和计算成员关系的票数等信息3资源管理VIP磁盘文件系统CRM(群集资源管理器
长跑者1号
·
2019-01-07 11:20
pacemaker
集群相关操作及配置
pacemaker集群资源添加
KVM
虚拟化
nginx常用模块示例
1、详细描述常见nginx常用模块和模块的使用示例2、简述
Linux集群
类型、系统扩展方式及调度方法3、简述lvs四种集群有点及使用场景4、描述LVS-NAT、LVS-DR的工作原理并实现配置1、详细描述常见
N33_LvQing
·
2019-01-04 16:28
Linux集群
架构(下)
原文链接:https://my.oschina.net/u/3991860/blog/2996773一、LVSDR模式搭建由于之前试验更改182和140两台机器的网关,现需重新修改回去DR模式搭建–准备工作•三台机器•分发器,也叫调度器(简写为dir)•0.236•rs1•0.182•rs2•0.140•vip•0.110•dir上编写脚本vim/usr/local/sbin/lvs_dr.sh/
chiluo7579
·
2019-01-04 10:00
linux集群
集群介绍根据功能划分为两大类:高可用和负载均衡高可用集群通常为两台服务器,一台工作,另外一台作为冗余,当提供服务的机器宕机,冗余将接替继续提供服务实现高可用的开源软件有:heartbeat、keepalived负载均衡集群,需要有一台服务器作为分发器,它负责把用户的请求分发给后端的服务器处理,在这个集群里,除了分发器外,就是给用户提供服务的服务器了,这些服务器数量至少为2实现负载均衡的开源软件有L
城南旧梦
·
2019-01-03 23:43
Linux
第十七章
Linux集群
架构(二)
八、LVSDR模式搭建九、keepalived+LVS十、扩展八、LVSDR模式搭建实验环境三台虚拟机,都需要关闭firewalld服务,并且安装iptables-serives服务,启动iptables服务,并清空iptables规则分发器,也叫调度器(简写为dir)主机名:lvs-lb内网:192.168.239.133主机名:rs1内网:192.168.239.137主机名:rs2内网:19
dwy2018
·
2019-01-03 03:12
Linux新手学习笔记
第十七章
Linux集群
架构(一)
一、集群介绍二、keepalived介绍三、用keepalived配置高可用集群四、负载均衡集群介绍五、LVS介绍六、LVS调度算法七、LVSNAT模式搭建一、集群介绍集群功能划分:1:高可用:高可用集群通常为两台服务器,一台工作,另外一台作为冗余,当提供服务的机器宕机,冗余将接替继续提供服务。实现高可用的开源软件有:heartbeat、keepalived2:负载均衡负载均衡集群,需要有一台服务
dwy2018
·
2019-01-01 01:37
Linux新手学习笔记
VMware搭建多台linux虚拟机内网环境
现在的环境经常要使用linux系统组成的局域网环境来做各种测试,使用windows的用户如何如何在一台机器上模拟多台linux系统组成的
linux集群
环境呢?
西丽小帅
·
2018-12-30 13:25
linux
linux集群
架构(下)
原文链接:https://my.oschina.net/u/3959687/blog/299177918.11LVSDR模式搭建DR模式搭建-准备工作·三台机器·分发器,也叫调度器(简写为dir)133.130·rs1133.132·rs2133.133·vip133.200DR模式搭建·vim/usr/local/sbin/lvs_dr.shdir上编写脚本,内容如下:#!/bin/bashec
chyita2015
·
2018-12-21 21:00
windows本地Eclipse开发spark程序打包到集群运行
https://blog.csdn.net/ASN_forever/article/details/84747317本篇主要记录如何在windows本地用Eclipse开发spark程序以及如何打包到
Linux
ASN_forever
·
2018-12-03 17:06
hadoop
spark
大数据
spark2.1.0配置windows本地基于java语言的Eclipse开发环境
前面配置过在windows本地通过Eclipse开发hadoop程序然后打成jar包在
Linux集群
中运行的经历,因此一方面是基于同样的需求,另一方面是因为我是spark小白,想通过这种方式快速了解和学习
ASN_forever
·
2018-12-03 11:27
spark
大数据
搭建Cockpit服务器,
Linux集群
管理工具,DevOps开发运维一体化集群系统/持续集成
Cockpit平台演示#打开浏览器,访问http://ip-address:9090ip-address为搭建cockpit服务器的IPAddress#进入管理界面可以参考CPUMEMSTOREGE等等信息,可以自动化管理Docker容器,启动Container#展示某个Container的配置信息,内网IP/Gateway,内网端口,宿主机端口等等,#直接在网页上的terminal进入SSH客户
YumWisdom
·
2018-11-30 14:11
集群介绍、keepalived介绍、用keepalived配置高可用集群、负载均衡集群介绍、LVS介绍 、LVS调度算法、LVS NAT模式搭建
一、集群介绍
Linux集群
根据功能划分为两大类:高可用和负载均衡。高可用集群高可用集群通常为2台服务器,一台工作,另一台作为冗余,当提供服务的机器宕机时,冗余将接替继续提供服务。
iamfishhh
·
2018-10-20 10:35
Linux集群
架构(下)
内容摘要LVSDR模式搭建keepalivedlvs扩展一、LVSDR模式搭建在实际生产环境中企业应用最多的一般是DR模式,但是DR模式因为每台机器都是需要配置公网IP非常浪费,所以可以让所有机器都在自建的内网上使用LVS,然后让公网IP端口映射到内网的vip端口上的。实验环境,设置三台虚拟机分发器,也叫调度器(简写为dir)内网:192.168.157.128(仅主机),vip=192.168.
CN_SHzhaoyujie
·
2018-10-18 12:09
笔记
Linux集群
:ntp时间服务器同步&&数据库时间同步
autogen、ntp、ntpdata安装与配置工具在:https://download.csdn.net/download/qq_33997121/10722837注:使用rmp-vih包名安装错误时,使用yuminstall-y包名[root@10-121-2-96opt]#rpm-ivhautogen-libopts-5.18-5.el7.x86_64.rpmwarning:autogen-
哟哟哟_蒋大傻
·
2018-10-15 17:13
关于Linux
Linux集群
存储——day4——Ceph分布式存储搭建、OSD块存储、COW快照、RBD存储镜像
Ceph的专有名词OSDs存储设备Monitors集群监控组件MDSs存放文件系统的元数据部署Ceph分布式存储Ceph集群中一般是一个管理服务器(control)多个存储服务器(node),所以下面所有关于存储服务器的操作都需要对每个存储器进行操作(主机名为node1的操作需要在每个存储服务器上进行一次)0.部署前准备工作:0.1我们进行配置操作前,要先将所有服务器配置好yum网络等基本配置0.
Lu-Yu
·
2018-10-11 22:03
Linux
集群存储
Linux集群
存储——day1——udev管理技术、多路径服务
存储技术分为:直连式存储,网络存储直连存储SCSI接口(双绞线)小型计算接口、其接口对应的系统中的磁盘名是sd开头DAS技术将存储设备通过SCSI接口或者光纤通道链接计算机优点:存储速度综合较快,短距离中性价比高缺点:不能数据共享,在数据量巨大的时候,其性能下降较快网络存储NAS是一个专用数据存储服务器,属于一个用于数据共享的设备,用户可以通过TCP/IP协议访问数据SAN通过网络交换设备把存储设
Lu-Yu
·
2018-10-08 23:28
Linux
集群存储
Linux集群
架构——LVS负载均衡集群
2019独角兽企业重金招聘Python工程师标准>>>负载均衡集群介绍主流开源软件LVS、keepalived、haproxy、nginx等其中LVS属于4层(网络OSI7层模型),nginx属于7层,haproxy既可以认为是4层,也可以当做7层使用keepalived的负载均衡功能其实就是lvslvs这种4层的负载均衡是可以分发除80外的其他端口通信的,比如MySQL的,而nginx仅仅支持h
weixin_33810006
·
2018-09-06 21:00
数据库
开发工具
python
Elastic Stack-Elasticsearch使用介绍(一)
这款工具方便各位前端大大或者对接口调试的神器;安装过于简单我不做过多介绍,推荐一些文章供大家参考安装:windows:windows单机版内含head插件windows集群版Linux:Linux单机版内含head插件
Linux
大魔王先生
·
2018-09-03 08:00
学习 - 网址
zookeeper和storm的
Linux集群
搭建基本视频https://www.imooc.com/video/17150storm大数据流式计算基础https://www.imooc.com/learn
搬砖小农
·
2018-08-23 16:41
Linux集群
类型、系统扩展方式及调度方法简述
linux集群
类型:LB负载均衡集群将用户请求合理的分配至后端服务器处理,使集群负载平衡,并合理利用计算资源。
readygood
·
2018-08-13 15:22
集群
负载均衡
Linux集群
架构(二)
DR模式LVS搭建DR模式也需要三台虚拟机,三台机器只需要有“公网”IP,但该模式下又多了一个VIP。罗列一下对应的机器和IP:dir(调度器)192.168.33.127rs1(真实服务器)192.168.33.128rs2(真实服务器)192.168.33.129VIP192.168.33.100先把之前两台rs的网关改成原始网关:#vim/etc/sysconfig/network-scri
最爱喝酸奶
·
2018-07-24 19:08
#
Linux基础
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他