E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
slaves
func安装
FedoraUnifiedNetworkController(统一网络控制器),主要用在Radhat,Fedora,OpenSuse,Centos系列系统上由一个server管理任意台服务器的工具,建立了Master-
Slaves
weixin_30647065
·
2020-08-15 19:01
hadoop伪分布式遇到的坑
start-all.shThisscriptisDeprecated.Insteadusestart-dfs.shandstart-yarn.shStartingnamenodeson[hadoop000]hadoop000:/home/hadoop/app/hadoop-2.6.0-cdh5.15.1/sbin/
slaves
.s
muyingmiao
·
2020-08-15 07:30
Hadoop
Hadoop 添加节点和删除节点
增加节点1.解压hadoop程序,并把namnode的配置文件复制到配置文件目录下2.修改namenode的
slaves
文件增加该节点3.在该节点对ssh,hosts,jdk进行配置,并修改所有节点的/
AI_skynet
·
2020-08-14 22:55
hadoop
hadoop
添加
删除
节点
datanode
Redis 主从、哨兵和集群 区别
主从模式(master-slave)备份数据、负载均衡,一个Master可以有多个
Slaves
。主从模式强调数据备份,读写分离等Redis复制功能的几个重要方面:一个主服务器可以有多个从服务器。
草鱼狂飙
·
2020-08-14 20:43
运维经验
【Redis主从架构】搭建经典的3节点哨兵集群
1.哨兵配置文件位于redis解压根目录下:sentinel.conf最小配置每一个哨兵都可以去监控多个master-
slaves
的主从架构因为生产环境一般会部署多个master-
slaves
的redis
程序员不弃
·
2020-08-14 17:28
【Redis】
MySQL binlog(二进制日志)解析
binlog主要作用复制:MySQLReplication在Master端开启binlog,Master把它的二进制日志传递给
slaves
并回放来达到master-slave数据一致的目的数据恢复:
lxw1844912514
·
2020-08-14 09:18
jmeter性能测试实战——基础篇
文章目录一、下载jmeter安装包二、分布式环境部署前准备1.找到下行代码,修改fales为true同时取消注释(#)2.修改输出报告仪表盘的文本,修改为以下样式:3.分布式环境的话在master需要将
slaves
爱吃鱼的小测试
·
2020-08-11 17:45
jmeter
jmeter
性能测试
MySQL主从同步以及索引的原理
1、主从同步原理1.1、mysql主从同步(复制)概念将Mysql某一台主机数据复制到其它主机(
slaves
)上,并重新执行一遍来实现的。
. 恶汉
·
2020-08-09 19:31
MySQL
Spark分布式环境搭建
xiaoxiangzi222/article/details/52757168一、spark集群搭建这里介绍spark的集群安装,需要依赖于hadoop的集群所以,首先搭建了一个hadoop集群,1个master,2个
slaves
1
zhanglupingsinosoft
·
2020-08-09 16:21
spark
hadoop
JAVA
scala
spark
hadoop
java
scala
Hadoop3.x安装(2)
Slaves
文件在etc/hadoop/workers文件中,列出所有的worker的hostname或则IP地址。一行一个。
Jeremy-D
·
2020-08-09 11:51
Hadoop
hadoop之hdfs的3个节点以同一进程启动
HDFS三个进程启动都以xxxxxxxx启动:以我自己的机器名称为例:HDFS三个进程启动以hadoop001启动:etc/hadoop目录下设置之前在部署hdfs时候修改了core-site.xml文件
slaves
仙人掌仙人
·
2020-08-09 06:54
hadoop
零基础
Bigdata
learning
大数据
Redis(设计与实现):40---复制之心跳检测(REPLCONF命令、lag标志、min-
slaves
-to-write选项、min-
slaves
-max-lag选项)
向主服务器发送命令:REPLCONFACK//其中replication_offset是从服务器当前的复制偏移量发送REPLCONFACK命令对于主从服务器有三个作用:①检测主从服务器的网络连接状态②辅助实现min-
slaves
江南、董少
·
2020-08-06 11:56
Redis(设计与实现)
Hadoop分布式集群搭建
hadoopsshrsyncntpMapReduce1.分布式集群规划2.网络IP规划3.修改hadoop配置3.1core-site.xml3.2hdfs-site.xml3.3mapred-site.xml3.4yarn-site.xml3.5
slaves
3.6
dgush2000
·
2020-08-06 11:27
大数据
运维
操作系统
Hadoop集群搭建过程及配置文件总结
1.配置文件总结总共8个配置文件,4个site的xml文件,3个环境脚本,1个
slaves
4个site文件:hdfs-site.xml,yarn-site.xml,mapred-site.xml,core-site.xml3
G5Lorenzo
·
2020-08-03 22:03
Hadoop
java 怎么处理多数据,高并发问题?
我推荐的是M-M-
Slaves
方式,2个主
GGFGGzz
·
2020-08-03 21:35
《Hadoop》"呶呶不休"(二)HDFS体系结构概述
一、体系结构简介HDFS采用的是master/
slaves
这种主从的结构模型来管理数据,这种结构模型主要由四个部分组成,分别是Client(客户端)、Namenode(
从明老师
·
2020-08-01 10:33
hadoop
大数据
Hadoop之简答题
上传和安装hadoop7.配置hadoop配置文件(hadoop-env.sh、core-site.xml、hdfs-site.xml、mapred-site.xml、yarn-site.xml)8.配置
slaves
默默在路上
·
2020-08-01 09:38
面试题之Hadoop
39 BlockManager深入理解
主要内容:1.BlockManager源码再探2.BlockManagerMaster3.BlockManager具体读写数据源码一、BlockManager概述BlockManager也是Master-
slaves
sinat_25306771
·
2020-08-01 00:42
大数据
spark
大数据
6. 缓存Redis Cluster & Key 寻址
如果数据量很少,主要是承载高并发高性能的场景,比如你的缓存一般就几个G,单机就足够了,可以使用replication,一个master多个
slaves
,要几个slave跟你要求的读吞吐量有关,然后自己搭建一个
花神子
·
2020-07-31 17:55
MBus协议详解(二)
4.4slave设计传输特性:
slaves
被设计为具有两种不同恒定sink电流,因此在总线上电压有1V的变化的时候,sink电流的变化一定不能超过0.2%。
xiebingsuccess
·
2020-07-30 05:18
网易博客搬迁之研发人生
Spark集群配置和Spark-shell 一些列命令
1.安装配置JDK2.安装配置Spark,修改Spark配置文件(两个配置文件spark-env.sh和
slaves
)vimspark-env.sh#指定JAVA_HOME位置exportJAVA_HOME
zkhong07
·
2020-07-29 03:34
Spark
Hadoop平台优化
Hadoop采用的是master/
slaves
唔系小老虎
·
2020-07-29 00:35
分布式计算
大数据||分布式部署常遇到的问题及基准测试
启动yarn时报错异常信息错误原因在启动子节点(senior02,senior03)时读取
slaves
时报错。原因是
slaves
文件有问题。字符编码的问题。
weixin_34233679
·
2020-07-28 19:08
HBase 磁盘爆满 无法启动
查看配置发现是zookeeper在三台
slaves
上面,可能会造成资源抢占,zookeeper会被hbase挤掉。
weixin_30386713
·
2020-07-28 16:05
大数据
数据库
Hadoop各个模块的架构(分布式)功能
分布式相对于集中式:集中式:一台计算机:将所有东西(软件)放在此计算上(安装)分布式:多台机器:将东西进行划分,每台机器存储一部分主从架构:主节点:master管理者,调度者从节点:
slaves
被管理者
super-yong
·
2020-07-28 12:00
大数据专栏预写
大数据开发学习
python redis连接数暴增问题
total_connections_received:160运行以来新创建连接总个数rejected_connections:0redis连接个数达到maxclients限制,拒绝新连接的个数connected_
slaves
一析合
·
2020-07-28 08:49
python
Hadoop2.2.0中配置SecondaryNameNode
在Hadoop1.x.x的版本中,masters文件里记录SecondaryNameNode的机器列表,每行一个
slaves
文件里记录启动datanode和tasktracker的机器列表,hadoop2.2.0
陈振阳
·
2020-07-27 20:15
Hadoop
namenode
hdfs
dfs
hadoop
hadoop集群
Flink高可用集群搭建
文章目录1.高可用集群搭建1.1上传安装包1.2解压1.3重命名1.4配置环境变量1.5修改配置文件1.5.1masters1.5.2
slaves
1.5.3flink-conf.yaml1.6拷贝配置文件
DanielMaster
·
2020-07-27 18:04
Flink
redis主从环境搭建
1).同一个Master可以同步多个
Slaves
。2).Slave同样可以接受其它
Slaves
的连接和同
罗曼蒂克
·
2020-07-16 06:55
Spark系列01,Spark简介、安装、相关名词解释
Spark简介、相关名词解释导论Spark概述Spark集群的安装本地提交一个Spark的作业Spark的安装单机式安装完全分布式的配置修改spark文件夹下conf目录中的spark-env.sh修改
slaves
猫猫爱弹琴
·
2020-07-16 05:34
大数据
Spark
大型网站的架构演进以及对mysql与nosql的使用
随着数据量和访问量的增长,网站构架大致有这么几个发展阶段(以PHP+MySQL+Memcached为例):1:PHP+MySQL2:PHP+MySQL(Master+
Slaves
)3:PHP+MySQL
joesay
·
2020-07-16 01:29
架构
Tkinter教程之Pack篇
printroot.pack_
slaves
jcodeer
·
2020-07-16 00:57
Python
UI
hadoop 安装
andererynodemounttogetthefiles2.修改用户的gid,uidusermod-g502-u502hadoopkeepallnodesuser"hapdoop"issameuidandgid3.masters和
slaves
fishrui
·
2020-07-15 23:35
Java开发
系统配置
大数据
运维
多次进行hdfs namenode -format命令时,启动DataNode自动死亡的原因
1.安装环境,三个节点,在配置的时候不小心忘记配置
slaves
节点,导致,进行2次namenode-format2.进行start-dfs.sh命令时,发现主节点可以启动,但是其他两个从节点,启动以后,
ChrisYANG23521
·
2020-07-15 14:18
大数据
数据库
linux
hadoop
hadoop
Android Things:外设I/O接口-I2C
控制时钟信号的设备被称为master,其它所有连接的外设被认为是
Slaves
,每个设备连接到同一组数据信号以形成总线。I2C设备连接使用3线
1024工场
·
2020-07-15 13:14
hadoop 2.7伪分布安装
hadoop2.7的“伪”分式安装与“全”分式安装相比,大部分操作是相同的,主要区别在于不用配置
slaves
文件,而且其它xxx-core.xml里的参数很多也可以省略,下面是几个关键的配置:(安装JDK
youzhouliu
·
2020-07-15 11:09
大数据
hadoop
伪分布安装
Hadoop学习笔记(五)—— 搭建Hadoop HA集群
文章目录三台虚拟机的集群节点规划搭建环境准备搭建HadoopHA集群配置core-site.xml文件配置hdfs-site.xml文件配置mapred-site.xml文件配置yarn-site.xml文件配置
slaves
JCManZZ
·
2020-07-15 08:50
Hadoop
DNS服务之主从DNS复制
named.rfc1912.zones如下图所示然后关闭防火墙后去第一台主DNS服务器vim/etc/named.rfc1912.zones修改一下配置文件如下图所示添加一句话到etc/resolv.conf进行解析并查看
slaves
weixin_34318326
·
2020-07-15 05:20
缓存架构之14:在项目中以经典的3节点方式部署哨兵集群
动手实操,练习如何操作部署哨兵集群,如何基于哨兵进行故障转移,还有一些企业级的配置方案1、哨兵的配置文件sentinel.conf最小的配置每一个哨兵都可以去监控多个maser-
slaves
的主从架构因为可能你的公司里
踏雪无痕722
·
2020-07-15 01:36
搭建Spark真实分布式运行环境
真实分布式运行环境配置不依赖于HDFS的sparkstandslone模式准备工作配置基本环境配置免密登录分布式sparkstandalone环境部署,不依赖于HDFS配置spark-env.sh文件配置
slaves
.template
jeewang
·
2020-07-15 01:16
Spark
GraphX
图计算系统
hadoop关键进程
hadoop集群中主要进程有master:NameNode,ResourceManager,
slaves
:DataNode,NodeManager,RunJar,MRAppMaster,YarnChild
lemonlhy
·
2020-07-14 13:12
hadoop
进程
大数据
mysql主从复制和并行复制
将Mysql的数据分布到多个系统上去,这种分布的机制,是通过将Mysql的某一台主机的数据复制到其它主机(
slaves
)上,并重新执行一遍来实现的。
Mryiyi
·
2020-07-14 05:13
Hadoop的配置文件详解
注:我的示范代码种三台机器的名字为node1、node2、node3,示范代码中需要替换成你自己的1、slavesnode1node2node3hadoop3.0以后
slaves
更名为workers了2
Ben_小b
·
2020-07-13 22:13
大数据学习
MySQL主从复制(4)——级联复制架构的搭建
将MySQL的数据分布到多个系统,这种分布机制是通过将MySQL的某一台主机(master)的数据复制到其它主机(
slaves
)上,并重新执行一遍来实现的。
睿思达DBA
·
2020-07-13 20:08
MySQL数据备份与恢复
【完全分布式Hadoop】(四)新建hadoop用户以及用户组,并赋予sudo免密码权限
搭建hadoop集群环境不仅master和
slaves
安装的hadoop路径要完全一样,也要求用户和组也要完全一致。因此第一步就是新建用户以及用户组。
蜗牛!Destiny
·
2020-07-13 15:31
环境
Hadoop
IDE的使用,打包spark应用提交
2,启动spark的master和
slaves
,本地测试
正义飞
·
2020-07-13 15:43
hadoop
ide
spark
hadoop
spark应用打包
scala
HDFS 相关细节研究
1.hdfs-可拓展性----hsdf配置文件中
slaves
文件是为了在namenode端使用ssh命令方便启动目前系统所有的datanode节点。
tamir_2017
·
2020-07-13 09:30
hadoop
linux(deepin15.4)下部署集群RabbitMQ消息队列镜像模式(三)
2、镜像模式配置完成之后,会存在一个主节点和多个镜像节点(或称为热备队列,
Slaves
),主节点在收到消息后,会同步消息至当前所有的镜像,若主节点消息被处理删除之后,镜像节点的数据会同步删除;3、当主节点发生异常后
jxgahxs
·
2020-07-13 06:38
rabbitmq集群
Hadoop配置文件说明
TaskTracker加入集群的机器列表:(3)dfs.hosts.excludemapred.hosts.exclude分别包含待移除的机器列表;(4)master记录运行辅助NameNode的机器列表;(5)
slaves
奋斗的憨憨小S
·
2020-07-12 21:46
大数据
redis 主从复制
redis主从复制官网介绍是一个Master可以有多个Slave,
Slaves
能过接口其他slave的链接,除了可以接受同一个master下面
slaves
的链接以外,还可以接受同一个结构图中的其他
slaves
ypp91zr
·
2020-07-12 18:38
redis
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他