E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
集群配置
keepalived
集群配置
+Nginx应用
前言nginx可以在应用层面做到负载均衡,但如果nginx主机挂掉,则整个服务就会down了,因此有必要通过服务器层面的负载保障服务正常运行,这里我们应用keepalived来实现这个功能。拓扑结构图:1、keepalived安装#yum-yinstallkeepalived配置文件目录/etc/keepalived/keepalived.conf2、配置文件192.168.3.105[root@
wolf1105
·
2020-07-15 09:52
linux
运维
Hadoop高可用集群搭建(实操、干货)
Hadoop一、HDFS-HA
集群配置
1.1配置HDFS-HA集群1.官方地址:http://hadoop.apache.org/2.HDFS高可用集群规划,请保证Hadoop完全分布式和ZooKeeper
跳蛙pass
·
2020-07-15 09:03
hadoop
Hadoop学习笔记(五)—— 搭建Hadoop HA集群
文章目录三台虚拟机的集群节点规划搭建环境准备搭建HadoopHA
集群配置
core-site.xml文件配置hdfs-site.xml文件配置mapred-site.xml文件配置yarn-site.xml
JCManZZ
·
2020-07-15 08:50
Hadoop
大数据-Hadoop环境搭建
2:环境搭建在Hadoop具体开始前,先来搭建一下环境创建虚拟机安装虚拟机VMWare创建虚拟机安装CentOS组成
集群配置
每台主机关闭防火墙关闭SELinux设置主机名重启设置时钟同步服务配置用户权限免密登录安装辅助软件
cwl_java
·
2020-07-15 07:01
大数据
zookeeper伪分布
集群配置
1、上传tar文件zookeeper-3.4.12.tar.gz2、解压zookeeper-3.4.12.tar.gz[root@localhostzookeeper]#tar-zxvfzookeeper-3.4.12.tar.gz3、重命名为zk01[root@localhostzookeeper]#mvzookeeper-3.4.12zk014、配置zoo.cfgtickTime=2000in
WWWWWWWWolf
·
2020-07-15 05:31
Spark on Yarn:java.sql.SQLException: No suitable driver found for jdbc:microsoft:sqlserver://localho...
具体出现原因,可能是spark版本问题,也可能是
集群配置
问题。yarn-client方式下:通过--jars参数指定驱动文件位置,提交后提示:“。。。
weixin_34232744
·
2020-07-15 05:09
【Big Data】HADOOP集群的配置(二)
Hadoop集群的配置(二)摘要:hadoop
集群配置
系列文档,是笔者在实验室真机环境实验后整理而得。以便随后工作所需,做以知识整理,另则与博客园朋友分享实验成果,因为笔者在学习初期,也遇到不少问题。
weixin_34194087
·
2020-07-15 05:37
大数据
运维
ui
部署cassandra 2.2.4
集群配置
Cassandra集群部署主机信息172.28.18.10mongodb-test7172.28.18.11mongodb-test8172.28.18.20mongodb-test9操作系统参数配置root@test-mysql~]#cat/etc/security/limits.d/90-nproc.conf*softnproc32000*hardnproc32000rootsoftnproc
weixin_34153893
·
2020-07-15 05:41
Hadoop平台配置总结
一个原因是要配置的地方多,还有个原因就是
集群配置
要在几台机器上都配置正确,才能保证配置好hadoop,跑起任务。经过昨晚加今天上午的折腾,总算成功配好了集群模式,其中苦不堪言啊,中间好几次都想要放弃。
weixin_33991418
·
2020-07-15 04:36
Hbase集群类型|
集群配置
|服务器选型|磁盘容量规划
HBase和Hadoop的集群类型1、单机模式主要用于开发工作,一台机器上运行所有的守护进程,或者一台机器运行多个虚拟机。一般用于评估和测试。2、小型集群20台机器以内的集群,不同的机器运行不同的守护进程,适用于数据量和处理请求较少的小型生产环境。3、中型集群20到1000台机器集群,3到5个zookeeper节点,适用于成熟的生产环境。4、大型集群1000台机器以上的集群,属于超大规模集群了,适
weixin_30687587
·
2020-07-15 03:39
CentOS6安装各种大数据软件 第十章:Spark集群安装和部署
各个软件版本介绍CentOS6安装各种大数据软件第二章:Linux各个软件启动命令CentOS6安装各种大数据软件第三章:Linux基础软件的安装CentOS6安装各种大数据软件第四章:Hadoop分布式
集群配置
weixin_30319153
·
2020-07-15 02:39
Hadoop
集群配置
搭建
环境:Centos6.9,Hadoop2.7.1,JDK1.8.0_161,Maven3.3.9前言:1、配置一台master服务器,两台或多台slave服务器。2、master可以无密码ssh登陆slave3、解压安装Hadoop,配置hadoop的core-site.xml、hdfs-site.xml、mapred-site.xml、yarn-site.xml文件,配置好之后启动hadoope
weixin_30276935
·
2020-07-15 02:25
基于ZooKeeper搭建Hadoop高可用集群
基于ZooKeeper搭建Hadoop高可用集群一、高可用简介二、集群规划三、
集群配置
四、启动集群五、查看集群六、集群的二次启动一、高可用简介Hadoop高可用(HighAvailability)分为HDFS
鱼骨 Sam
·
2020-07-15 02:04
Zookeeper
Hadoop
大数据
hadoop
Elasticsearch 多机
集群配置
一.集群健康值Elasticsearch是有集群健康值的,红色,黄色,绿色1)如果我们是单机单节点的Elasticsearch,也就是说只有一个主节点的情况下,集群健康值是黄色的。也就是说只保存了一份数据。2)如果此时我们新增一个节点,那么这个节点会默认成为主节点的副本节点,并同步对应数据。此时集群健康值是绿色的。即有2份数据可用。3)如果一开始就有多个节点,一个主节点,多个字节点,此时往es集群
一掬净土
·
2020-07-15 02:29
DB
ElasticSearch集群安装配置
ElasticSearch集群安装配置ElasticSearch7.2.0操作系统软件及版本安装包准备JDK安装ElasticSearch安装ElasticSearch-head安装Kibana安装
集群配置
安全验证对人工智能感兴趣点下面链接现在人工智能非常火爆
周天祥
·
2020-07-15 02:12
ElasticSearch
大数据
Hive配置+haddop为底层存储系统+远程mysql+简单的hive数据操作(详细哦)
Hive配置+haddop为底层存储系统+远程mysql+简单的hive数据操作说明:关于hadoop集群、habse
集群配置
可参考我的前三篇博客。
洲洲的第二人生
·
2020-07-15 00:19
hadoop
hbase
hive
hadoop
hive
数据存储
分布式
java大数据最全课程学习笔记(2)--Hadoop完全分布式运行模式
目前CSDN,博客园,简书同步发表中,更多精彩欢迎访问我的giteepages目录Hadoop完全分布式运行模式步骤分析:编写集群分发脚本xsync
集群配置
集群部署规划配置集群集群单点启动SSH无密登陆配置登录状态的环境变量群起集群集群启动
假装文艺范儿
·
2020-07-14 22:00
java大数据最全课程学习笔记(2)--Hadoop完全分布式运行模式
目前CSDN,博客园,简书同步发表中,更多精彩欢迎访问我的giteepages目录Hadoop完全分布式运行模式步骤分析:编写集群分发脚本xsync
集群配置
集群部署规划配置集群集群单点启动SSH无密登陆配置登录状态的环境变量群起集群集群启动
假装文艺范儿
·
2020-07-14 22:00
hadoop与zookeeper完全分布式安装
集群配置
主机名NNDNRMNMZKJNnode1√√√√node2√√√node3√√√√√node4√√√√注:打勾的说明,本台主机配置有该项服务。
qq_806913882
·
2020-07-14 21:20
大数据
集群
Hadoop集群的搭建3(很全面)
安装好并激活(2)配置虚拟机参数(3)安装CentOS6.9(4)虚拟机的克隆(5)SecureCRT的安装(6)系统网络配置(7)SSH服务配置(8)JDK以及Hadoop环境配置(9)Hadoop
集群配置
青春是首不老歌丶
·
2020-07-14 20:34
hadoop集群搭建
zookeeper和Kafka的关系
Kafka通过Zookeeper管理
集群配置
,选举leader,以及在ConsumerGroup发生变化时进行rebalance。Producer使用push模式将消息发布到broker,Co
谦卑t
·
2020-07-14 20:32
Kafka
解决Java程序读写HDFS文件的错误:No FileSystem for scheme: hdfs
『3』Hadoop
集群配置
依赖要能正确读取HDFS文件,程序就需要知道Hadoop集群的配置信息,如果你不是用“hadoopjar”命令来运行你的程序,而是用“java”命令来运行的(例如javacom.codelast.MyProgramme
bean-Lee
·
2020-07-14 20:13
hdfs
Hadoop
集群配置
jdk
1、下载和解压jdk包tar-zxvf文件-C目录新建一个java目录,把解压后的移动到这里面2、配置环境变量#vi/etc/profile在后面追加语句exportJAVA_HOME=/bigdata/app/jdk1.8.0_151exportCLASSPATH=.:$JAVA_HOME/jre/lib/rt.jar:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/t
alanjia163
·
2020-07-14 18:07
hadoop
[ERR] Node 192.168.1.77:7000 is not empty. Either the node already knows other nodes (check with CLU
checkwithCLUSTERNODES)orcontainssomekeyindatabase0.解决方法:1)、将需要新增的节点下aof、rdb、nodes.conf等本地备份文件删除;2)、同时将新Node的
集群配置
文件删除
苏洛荨
·
2020-07-14 16:22
redis
七、分布式环境搭建——ElasticSearch集群搭建及集群管理工具cerebro
首先各节点安装好elasticsearch参考:https://mp.csdn.net/mdeditor/91390470#1
集群配置
elasticsearch.yml(1)节点1配置cluster.name
仁钦宝
·
2020-07-14 15:15
ElasticSearch
分布式
环境搭建
41、nacos单机以及
集群配置
nacos单机以及
集群配置
安装准备1、下载库从Github上拉取NacosGithub最新版地址:https://github.com/alibaba/nacos2、本地解压tar-zxvfnacos-server
贝壳里的沙
·
2020-07-14 14:29
nacos
ESXi
集群配置
一例(HP C7000+DELL EQlogic+HUAWEI 6700)
本案例为ESXi集群的一个例子,正如[VMware集群常见硬件配置、架构说明]说的,此架构应该为第4种安全,即“刀片服务器+IPSAN万兆存储+万兆核心交换机”。这里的刀片服务器为HPC7000,IPSAN万兆存储为DELLEQlogic,万兆存储交换机为华为S6700。说明:该文档只会描述案例的整个架构,以及如何实现等,不会涉及详细的配置说明,如需了解请网上自行搜索相关设备的教程,具体内容如下:
kepa520
·
2020-07-14 13:23
VMware
vSphere
RTMP视频直播系统(PC网页/微信小程序/播放器/流媒体)
tuin=2c77f7f0所学知识:掌握RTMP协议理论掌握HLS协议理论掌握OBS推流工具使用掌握播放器配置及使用掌握流媒体SRS安装配置及使用掌握流媒体
集群配置
方法理解连麦原理理解并掌握源服务器朝边缘服务分发技术掌握
亢少军
·
2020-07-14 13:36
RTMP视频直播
RTMP
HLS
微信小程序
Node
Elasticsearch:
集群配置
及异常解决
节点1cluster.name:my-esnode.name:154transport.tcp.port:9300transport.tcp.compress:truediscovery.zen.ping.unicast.hosts:["172.16.254.154:9300","172.27.28.79:9300"]discovery.zen.minimum_master_nodes:1netw
夕阳西下,断肠人在天涯
·
2020-07-14 10:43
Elasticsearch
elasticsearch
redis5.0集群搭建实战,spring-boot整合redis集群测试
1.下载redis5.0.2redis-5.0.22.安装tar-zxvfredis-5.0.2.tar.gzcdredis-5.0.2make&&makeinstall3.创建并使用
集群配置
创建redis-cluster
chfuwtu6599
·
2020-07-14 08:36
Hadoop中的zookeeper
比如:在典型的Kafka集群中,Kafka通过Zookeeper管理
集群配置
,选举leader,以及在ConsumerGroup发生变化时进行rebalance。
caiyefly
·
2020-07-14 08:09
Hadoop
zookeeper
Hadoop2、Mac系统上,Hadoop
集群配置
,基于Centos7与Hadoop2.7.3
一、安装了一台虚拟机,先安装单机版Hadoop,为克隆做准备首先本地下载Hadoop2.7.3文件,然后打开Mac终端上传文件到服务器上指定位置:上传文件命令:
[email protected]
:/usr/bigdata/tools/文件的目录结构:开始安装:1、先解压:tar-xzvfhadoop2.7.tgz.gz-C/usr/bigdata/2、创建
臭臭在奔跑
·
2020-07-14 08:27
Kafka Manager与Kafka SASL+ACL配置
根据需求,给Kafka
集群配置
不使用Kerberos的SASL+ACL。Kafka配置部分参考资料比较充足,这里参考了胡夕老师的《ApacheKafka实战》中相关章节,配置过程顺利。
bao_since
·
2020-07-14 08:22
Kafka
[ERR] Node 127.0.0.1:6381 is not empty. Either the node already knows other nodes (check with CLUSTE
6381isnotempty.Eitherthenodealreadyknowsothernodes(checkwithCLUSTERNODES)orcontainssomekeyindatabase0问题解决方案1)、将需要新增的节点下aof、rdb等本地备份文件删除;2)、同时将新Node的
集群配置
a656678879
·
2020-07-14 07:12
REDIS
Linux的学习
redis创建集群时显示错误: [ERR] Node xxx is not empty. Either the node already knows other no...
在redis
集群配置
的最后一步,使用命令报错[ERR]Nodexxxisnotempty.Eitherthenodealreadyknowsotherno...redis-trib.rbcreate--
樊先知樊先知
·
2020-07-14 06:30
linux
springCloud-Alibaba——nacos安装linux集群
nacos:(10)关闭nacos:A、查找进程ID:B、杀死进程ID:(11)访问nacos服务:首先设计好nacos集群使用的节点服务器,然后就是在集群中各个节点linux上安装单机nacos,然后在
集群配置
文件中配置上集群各
LSY_csdn_
·
2020-07-14 05:52
Eureka
集群配置
Eureka的
集群配置
。Eureka集群的运行机制是"相互注册,相互守望"。主要是为了实现高可用。防止出现单点故障。假如有三个Eureka服务注册中心。7001,7002,7003。
番茄炒蛋F_
·
2020-07-14 04:40
java
Eureka
企业 rhel7集群
文章目录环境设置配置
集群配置
yum源配置集群软件配置集群建立自定义
集群配置
集群资源
集群配置
服务配置apache服务配置共享磁盘创建共享资源配置fence节点测试配置mariadb服务环境设置server1
Howei__
·
2020-07-14 04:05
企业环境运维操作
【详细】VMware虚拟机配置Hadoop集群实验[CentOS8]
centos83.配置安装hadoop需要的基本环境4.克隆多台虚拟机5.配置多台虚拟机的网络互通6.Master机安装Hadoop7.启动Hadoop集群8.Hadoop样例试验9.关闭Hadoop10.参考资料
集群配置
情况
Coder_C9
·
2020-07-14 04:29
007 Hadoop
集群配置
Hadoop集群的启动和测试 SSH免登陆配置( start-all.sh) hdfs常用的shell
Hadoop
集群配置
三种模式本地伪分布式全分布式伪分布式看官网配置比较简单?
C_time
·
2020-07-14 04:43
大数据
又双叒叕来更新啦!!Hadoop——基础篇
MapReduce架构大数据的技术生态体系开发环境搭建安装jdk安装Hadoop本地模式伪分布式模式启动HDFS并运行MapReduce程序配置集群启动集群启动YARN并运行MapReduce程序配置集群启动
集群配置
历史服务器日志的聚集配置完全分布式模式
5akura
·
2020-07-14 03:23
【Big Data】HADOOP集群的配置(一)
Hadoop集群的配置(一)摘要:hadoop
集群配置
系列文档,是笔者在实验室真机环境实验后整理而得。以便随后工作所需,做以知识整理,另则与博客园朋友分享实验成果,因为笔者在学习初期,也遇到不少问题。
weixin_33901926
·
2020-07-14 02:24
Mongodb
集群配置
用户名密码认证
2019独角兽企业重金招聘Python工程师标准>>>Mongodb
集群配置
登录认证跟单节点的不一样,本文主要介绍一下配置的流程1.启动mongodb集群,不开启auth,配置admin数据库用户useadmindb.createUser
weixin_33806300
·
2020-07-14 02:43
Redis的
集群配置
的基本操作和遇到的坑
Redis的
集群配置
的基本操作和遇到的坑今天自己学习了redis的集群的配置,在配置的期间,发现了许多的坑的存在,现在将配置的过程以及具体的问题进行分析下载并安装redis首先在redis的官网上面下载最新版本的
菜鸟程序猿进阶之路
·
2020-07-13 23:38
JavaEE
JavaSe
create创建一个新的cluster集群
create创建一个新的cluster
集群配置
好redis.conf后,使用下命令创建新的一个3个节点集群$redis-trib.rbcreate:::如需要指定分配slave机,则使用replicas
丰色木夕
·
2020-07-13 23:33
redis
Hadoop配置文件配置项定义说明
hadoop的
集群配置
中,大部分都用的默认设置,如果想要提高整个集群的性能,可以考虑通过修改配置的方法实现,配置项大部分都配置在这三个文件里:core_site.xml,hdfs_site.xml,mapred_site.xml
Sachiel阳
·
2020-07-13 22:54
Hadoop集群的配置及常见问题总结
Hadoop
集群配置
建立一个三台服务器的hadoop集群,三台服务器ip和对应的主机名分别为:192.168.0.100:shirleyren100,192.168.0.101:shirleyren101,192.168.0.102
xiaotuzipaopao
·
2020-07-13 22:14
hadoop学习
elasticsearch
集群配置
配置master主库修改配置文件viconfig/elasticsearch.yml添加下面配置#是否支持跨域,默认为falsehttp.cors.enabled:true#当设置允许跨域,默认为*,表示支持所有域名,如果我们只是允许某些网站能访问,那么可以使用正则表达式。比如只允许本地地址。/https?:\/\/localhost(:[0-9]+)?/http.cors.allow-origi
锐牙子
·
2020-07-13 21:17
服务器配置
nacos
集群配置
参考官方文档将nacos程序包解压到/usr/local/springCloud/nacos/server1/cp/usr/local/springCloud/nacos/server1/cluster.conf.example/usr/local/springCloud/nacos/server1/cluster.conf#修改配置文件vi/usr/local/springCloud/nacos
锐牙子
·
2020-07-13 21:17
服务器配置
spring
cloud
alibaba
hadoop
集群配置
完全分布式•Hadoop最大的优势就是分布式集群计算,所以在生产环境下都是搭建的最后一种模式:完全分布模式主机角色软件192.168.6.10masterNameNodeSecondaryNameNodeResourceManagerHDFSYARN192.168.6.11node1DataNodeNodeManagerHDFSYARN192.168.6.12node2DataNodeNodeMa
乐于技术分享
·
2020-07-13 19:26
上一页
25
26
27
28
29
30
31
32
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他