E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
slaves
高性能Mysql主从架构的复制原理及配置详解
将Mysql的数据分布到多个系统上去,这种分布的机制,是通过将Mysql的某一台主机的数据复制到其它主机(
slaves
)上,并重新执行一遍来实现的。
J-贾
·
2024-08-26 15:53
Mysql
Flink-部署实践
flink/conf/flink-conf.yaml文件:jobmanager.rpc.address:hadoop1132)修改/conf/masters文件:hadoop1133)修改/conf/
slaves
魔笛Love
·
2024-02-19 20:52
flink
HDFS 之 数据管理(namespace 和
slaves
)
1、namespaceNamespace在HDFS中是一个非常重要的概念,也是有效管理数据的方法。Namespace有很多优点:可伸缩性。使HDFS集群存储能力可以轻松进行水平拓展;系统性能。单点性能受限,影响系统吞吐;隔离性。不同业务类型访问集群有时容易互相干扰,使用多Namespace可以有效管理访问分类。1.1Namespace概况HDFS具有良好的拓展性,单集群可以很轻松地部署数百至数千服
Studying!!!
·
2024-02-07 17:57
中间件
hdfs
hadoop
大数据
Spark 2.3.4 StandAlone 集群模式部署
/etc/profile配置$SPARK_HOME/conf/spark-env.sh配置$SPARK_HOME/conf/spark-defaults.conf配置$SPARK_HOME/conf/
slaves
JP.Hu
·
2024-01-26 19:07
Spark
spark
大数据
分布式
mysql binlog 日志详解及恢复
其主要是用来记录对mysql数据更新或潜在发生更新的SQL语句,并以"事务"的形式保存在磁盘中;作用主要有:复制:MySQLReplication在Master端开启binlog,Master把它的二进制日志传递给
slaves
不吃稻米的熊
·
2024-01-11 23:34
mysql
mysql
数据库
flink Standalone独立集群模式配置和部署:
jobmanger.rpc.addresssjia加上机器名下面红的地方配置就好,注意3台机器都是一样的IP,这样保证这台是主机器2,配置每个文件,首先是works文件,里面的IP地址是你的机器除外的另外2台机器的IP3.配置
slaves
平凡天下
·
2024-01-10 12:33
Redis 哨兵主备切换的数据丢失问题解决方案
数据丢失问题的解决方案进行如下配置:min-
slaves
-to-write1min-
slaves
-max-lag10表示,要求至少有1个slave,数据复制和同步的延迟不能超过10秒。
流光的咸鱼
·
2024-01-08 00:19
redis
数据库
缓存
Spark内核解析-脚本解析2(六)
我们一般会看相关脚本了解其初始化信息以及Bootstrap类,Spark也不例外,而Spark中相关的脚本如下:%SPARK_HOME%/sbin/start-master.sh%SPARK_HOME%/sbin/start-
slaves
.sh
有语忆语
·
2024-01-05 10:05
大数据之Spark
spark
ajax
大数据
Linux集成Redis相关命令及知识点
登录redis客户端redis-cli-p6379登录之后查看redis状态127.0.0.1:6379>inforeplication#Replicationrole:masterconnected_
slaves
小陈 不秃头
·
2024-01-04 17:26
linux
redis
chrome
redis集群搭建详解
启动哨兵一、主从复制#查看信息inforeplication127.0.0.1:6379>inforeplication#Replicationrole:master#当前为主角色connected_
slaves
mapyking
·
2023-12-31 20:49
redis
redis
数据库
【头歌实训】Spark 完全分布式的安装和部署
文章目录第1关:Standalone分布式集群搭建任务描述相关知识课程视频Spark分布式安装模式示例集群信息配置免密登录准备Spark安装包配置环境变量修改spark-env.sh配置文件修改
slaves
撕得失败的标签
·
2023-12-27 20:56
【头歌实训】
分布式
spark
大数据
头歌实训
【头歌实训】Spark 完全分布式的安装和部署(新)
文章目录第1关:Standalone分布式集群搭建任务描述相关知识课程视频Spark分布式安装模式主机映射免密登录准备Spark安装包配置环境变量修改spark-env.sh配置文件修改
slaves
文件分发安装包启动
撕得失败的标签
·
2023-12-27 20:56
【头歌实训】
分布式
spark
wpf
头歌实训
Hadoop学习笔记[6]-MapReduce与Yarn安装部署流程
NodeManager和DataNode一般都是1:1,主要是为了计算向数据移动,如果NM和DN分开,就得用网路拷贝数据,在Yarn的体系里NM也是从节点,既然其和DN是1:1的关系,所以配置中和HDFS共用一个
slaves
kinglinch
·
2023-12-25 19:09
大数据
mapreduce
yarn
hadoop
大数据
MySQL主从复制原理以及架构
将Mysql的数据分布到多个系统上去,这种分布的机制,是通过将Mysql的某一台主机的数据复制到其它主机(
slaves
)上,并重新执行一遍来实现的。
nullptr_
·
2023-12-23 01:58
Mysql
Redis 连接池
最近两天我想到一个问题:当redis执行读命令的时候,是从master中读取,还是
slaves
中读取呢?
packet
·
2023-12-05 11:56
大数据开源框架环境搭建(七)——Spark完全分布式集群的安装部署
的气象数据处理与分析_木子一个Lee的博客-CSDN博客_spark舆情分析目录实验环境:实验步骤:一、解压二、配置环境变量:三、修改配置文件1.修改spark-env.sh配置文件:2.修改配置文件
slaves
木子一个Lee
·
2023-11-30 02:31
大数据开源
教程分享
大数据
spark
分布式
Spark完全分布式搭建(On Yarn)
目录一、集群规划二、配置Spark路径三、修改配置文件1.spark-env.sh2.修改
slaves
文件四、启动集群1.先起动Hadoop的HDFS和Yarn2.启动Spark五、Web查看集群启动情况六
Congee小周
·
2023-11-30 02:00
大数据
hadoop
spark
完全分布式
spark-env.sh
slaves
Redis深入理解-主从架构下内核数据结构、主从同步以及主节点选举
Redis主从挂载后的内核数据结构分析主节点中,会通过clusteNode中的
slaves
来记录该主节点包含了哪些从节点,这个
slaves
是一个指向*clusterNode[]数组的数据结构从节点中,会通过
无敌少年小旋风
·
2023-11-29 07:58
Redis
redis
架构
数据结构
Spark---Master启动及Submit任务提交
资源任务调度对象关系图2、集群启动过程Spark集群启动之后,首先调用$SPARK_HOME/sbin/start-all.sh,start-all.sh脚本中调用了“start-master.sh”脚本和“start-
slaves
.sh
30岁老阿姨
·
2023-11-29 07:38
Spark
spark
大数据
分布式
hadoop2.x linux集群部署
配置节点
slaves
配置免密ssh访问没有ssh-copy
何浩翔
·
2023-11-24 18:21
hadoop
大数据
【Hadoop】安装部署-完全分布式搭建
Hadoop环境变量三、准备三台虚拟机1.修改主机名与IP映射2.修改主机上的hadoop相关配置文件2.1core-site.xml2.2hdfs-site.xml2.3yarn-site.xml2.4
slaves
3
db_lmr_2071
·
2023-11-23 22:05
分布式
hadoop
大数据
Spark常用命令
/sbin/start-master.sh启动
slaves
:进入spark安装目录:./sbin/
在努力的Jie
·
2023-11-23 02:27
-bash:jps:command not found
今天配置hadoop集群时,将master主机上的etc/profile文件拷贝到
slaves
主机上后,
slaves
主机上的jps命令不能用呢,最后确定是由于
slaves
主机上的jdk有问题。
weixin_34274029
·
2023-11-22 13:39
git
大数据
java
Spark Worker 启动流程及源码详解
环境:spark2.3.3scala2.11.8Java1.8.0_141可以参考【SparkMaster启动流程及源码详解】${SPARK_HOME}/sbin/start-
slaves
.sh#Launchtheslaves
ustbxyls
·
2023-11-13 17:59
大数据
Spark
Spark源码
Redis主从配置、哨兵模式、集群模式
Redis集群环境搭建主从配置(基础)优点:MasterServer是以非阻塞的方式为
Slaves
提供服务。所以在Master-Slave同步期间,客户端仍然可以提交查询或修改请求。
jl935418600
·
2023-11-08 10:55
redis
redis
集群
sentinel
cluster
flink集群搭建
1flink下载2.上传安装包3解压4修改配置文件4.1配置
slaves
4.2修改配置文件flink-conf.yaml5传送安装包到集群其他服务器6启动集群7验证7.1本地提交作业7.2打包提交作业1flink
菜菜的中年程序猿
·
2023-11-07 22:49
flink
flink集群搭建
Ubuntu18.04 部署Flink HA
Ubuntu18.04部署Flink1.Flink安装1.1安装Flink1.2配置Flink1.2.1配置flink-conf.yaml1.2.2配置
slaves
1.2.4配置master2.1启动Flink1
_林小凡
·
2023-11-03 03:22
bigdata
flink
ubuntu
mysql binlog 日志详解
其主要是用来记录对mysql数据更新或潜在发生更新的SQL语句,并以"事务"的形式保存在磁盘中;作用主要有:复制:MySQLReplication在Master端开启binlog,Master把它的二进制日志传递给
slaves
zll4859291
·
2023-10-31 04:58
数据库
mysql
java
Python3 Tkinter-Pack
1.创建fromtkinterimport*root=Tk()print(root.pack_
slaves
())Label(root,text='pack').pack()print(root.pack_
slaves
zmqqq
·
2023-10-27 22:04
redis 常见问题以及解决
slave节点,redis配置文件中设置要求必须存在一个slave节点才能写入解决:1.添加追踪slave节点2.修改redis配置文件,设置没有slave节点也可以写入,具体配置key为:-min-
slaves
-to-write1
one_8274
·
2023-10-23 13:44
分布式内存计算Spark环境部署与分布式内存计算Flink环境部署
Spark环境部署1.简介2.安装2.1【node1执行】下载并解压2.2【node1执行】修改配置文件名称2.3【node1执行】修改配置文件,spark-env.sh2.4【node1执行】修改配置文件,
slaves
2.5
时光の尘
·
2023-10-19 05:03
Linux学习
分布式
spark
大数据
flink
StringBuilder
constructor
【elasticsearch】elasticsearch7.x集群搭建
、将es上传到Linux并解压2、创建数据、日志存储文件夹3、配置config/elasticsearch.yml4、配置jvm5、创建es用户6、赋权限7、修改配置文件8、启动服务9、启动验证(二)
slaves
郝少
·
2023-10-18 07:54
#
Elasticsearch
大数据
elasticsearch
大数据
搜索引擎
Linux 搭建Flink教程
保存后去配置
slaves
把flink和环境配置分发到另外两台服务器启动flink集群start-cluster.sh通过端口
JAVA百练成神
·
2023-10-14 17:14
linux
大数据
linux
flink
服务器
查看所有集群节点运行情况脚本 Jpsall
/bin/bashforiin`cat/opt/module/hadoop-2.7.2/etc/hadoop/
slaves
`doecho"==========$i=========="ssh$i'/opt
天涯问路
·
2023-10-11 19:01
脚本
Jpsall
Hadoop伪分布式环境搭建过程
的安装目录添加到环境变量中4.配置hadoop-env.sh5.配置core-site.xml6.配置hdfs-site.xml7.配置map-site.xml8.配置yarn-site.xml9.配置
slaves
SELECT *
·
2023-10-07 06:11
hadoop
分布式
hdfs
Redis集群方案整理
2、实战总结经验一个Master可以有多个
Slaves
wellzhi
·
2023-09-26 07:27
redis
集群方案
Sentinel介绍与运行机制
支持集群三、关于Sentinel版本四、运行Sentinel五、Sentinel的配置六、Sentinel的“仲裁会”七、配置版本号八、配置传播九、SDOWN和ODOWN的更多细节十、Sentinel之间和
Slaves
勤天
·
2023-09-26 05:24
redis
Sentinel
redis集群
HA
redis集群部署
redis集群部署本次部署为三台服务器,部署三主集群和三主三从集群1.IP主从规划规划IP主机名192.168.2.57master192.168.2.197
slaves
1192.168.2.43
slaves
2
看到代码头都是大的
·
2023-09-18 18:04
redis
bootstrap
数据库
pyspark(一):常用术语及环境搭建
1.2standaloneStandalone模式使用Spark自带的资源调度框架采用Master/
Slaves
的典型架构,选用ZooK
吾系司机
·
2023-09-11 17:41
AUTOSAR LIN: LDF(LIN Description File)文件解析
LIN_description_file"lin_example.ldf"{LIN_protocol_version="2.0";LIN_language_version="2.0";nodes{master:MasterNode;
slaves
galene
·
2023-09-07 09:01
LIN
autosar
lin
双语快读 - 迎接被冤枉的兄弟 MEETING A BROTHER WHO HAD BEEN WRONGED - E1.8
译】迎接被冤枉的兄弟【单词】WRONGED原型:wrong动词过去分词[rɒŋ]v.冤枉;不公正地对待IntimeJacobbecameverywealthy,andhehadlargeflocks,
slaves
陆满庭
·
2023-08-28 13:05
redis集群简单介绍
R2|----+----|R3||S2||S3|+----++----+quorum=2保证顺利投票1.由于redis没有类似mongo的writeconcern选项,切换会丢数据,可以用配置min-
slaves
-to-write
Teech
·
2023-08-26 19:40
docker+selenium搭建分布式web自动化测试环境
SeleniumGrid主要使用master-
slaves
(orhub-nodes)理念--一个master
尘世风
·
2023-08-18 12:17
docker
selenium
linux
chrome
nginx
基于docker部署的Selenium Grid分布式自动化测试
SeleniumGrid主要使用master-
slaves
(orhub-nodes)理念--一个mas
爱学习的潇潇
·
2023-08-18 12:46
技术分享
软件测试
自动化测试
docker
selenium
python
软件测试
自动化测试
Redis心跳检测
辅助实现min-
slaves
选项。检测命令丢失。下面将分别介绍这三个作用。检测主从服务器的网络连接状态:主从服务器可以通过发送和接收REPLCONFACK命
coolshyman
·
2023-08-12 15:49
中间件
redis
数据库
缓存
基于docker部署的Selenium Grid分布式自动化测试
SeleniumGrid主要使用master-
slaves
(orhub-nodes)理念--一个mas
软件测试潇潇
·
2023-08-12 07:32
自动化测试
软件测试
软件测试工程师
selenium
测试工具
软件测试
程序人生
自动化测试
职场发展
功能测试
hdfs启动问题:
在主节点上执行start-dfs.sh命令启动hdfs,无法启动datanode:1)看一下
slaves
文件有没有配置正确2)检查从namenode节点到datanode节点的免密登录是否配置正确;3)
舒奇Q
·
2023-08-03 14:40
大数据
hdfs
hadoop
big
data
【无标题】
一、什么是主从复制:通过将MySQL的某一台主机(master)的数据复制到其他主机(
slaves
)上。从主机根据主(master)的二进制文件在本机上执行sql实现数据复制。
Figust_07
·
2023-08-02 23:21
mysql
数据库
mysql(六)读写分离
2.从服务器(
Slaves
):负责处理所有的读操作(
黑影680
·
2023-07-31 05:35
mysql
数据库
linux
运维
服务器
Redis主从模式的优缺点
优点:一个Master可以同步多个SlavesSlave同样可以接受其它
Slaves
的连接和同步请求,这样可以有效的分载Master的同步压力。
云之彼端ღ
·
2023-07-29 23:59
Redis
redis
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他