E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
LNMP集群
docker-compose -volumes 两种不同定义方式
学习docker-compose部署hadoop
集群
、看到docker-compose一种不同volumes定义方式version:"3"services:namenode:image:bde2020/
胖胖胖胖胖虎
·
2025-02-26 14:34
Docker
docker
hadoop
big
data
mysql案例 ~ 监控以及如何避免从库延迟问题
一简介:今天咱们来汇总下如何避免主从延迟二方案:1
集群
硬件配置统一,磁盘组更好(SSD最佳),更大的内存2linux系统+mysql的配置参数已经优化3mysql从库没有任何慢语句进行IO的消耗4mysql
weixin_33910434
·
2025-02-26 13:24
数据库
Oracle 高可用性与数据保护
这些技术包括
集群
与实时应用
集群
(RAC)、数据卫士(DataGuard)和闪回技术。
鱼弦
·
2025-02-26 13:19
人工智能时代
oracle
数据库
初识hadoop
客户端在存入的数据的时候先经过nn,查要存入的数据是否存在(通过元数据查询),如果存在就返回拒绝写入,若不存在,就开始返回可以往
集群
里面写入,而且还分配存入那些dn。
西门吹水之城
·
2025-02-26 12:45
hadoop
hadoop
HDFS是如何存储和管理大数据
以下是HDFS存储和管理大数据的详细机制:一、HDFS架构HDFS采用主从架构,主要包括以下组件:NameNode(主节点):作为
集群
的“大脑”,NameNode负责管理文件系统的命名空间,维护文件和目录的元
python资深爱好者
·
2025-02-26 11:38
大数据
hdfs
hadoop
Hadoop 基础原理
Hadoop基础原理基本介绍Hadoop的必要性Hadoop核心组件Hadoop生态系统中的附加组件HDFSHDFS
集群
架构HDFS读写流程HDFS写流程HDFS读流程NameNode持久化机制MapReduce
disgare
·
2025-02-26 11:38
数据库
hadoop
大数据
分布式
Flink-02-flink技术架构及工作原理
Flink组件栈自下而上,分别针对每一层进行解释说明:Deployment该层主要涉及了Flink的部署模式,Flink支持多种部署模式:本地、
集群
(Standalone/YARN)、云(GCE/EC2
TRX1024
·
2025-02-26 10:35
Flink
本地Oracle数据库复制数据到Apache Hive的Linux服务器
集群
的分步流程
我们已经有安装ApacheHive的Linux服务器
集群
,它可以连接到一个OracleRDS数据库,需要在该Linux服务器上安装配置sqoop,然后将OracleRDS数据库中所有的表数据复制到Hive
weixin_30777913
·
2025-02-26 10:34
数据库
大数据
hive
Flink
集群
架构
从本章节开始,我们对flink从它的一个
集群
的一个架构以及它的一个部署模式着手,去了解flink如何去部署在不同的这样的一个
集群
的一些资源管理器上面,以及相应的一些原理的一些解析。
流量留
·
2025-02-26 06:32
Apache
Flink
FLINK
java
运维
数据库
GaussDB 数据库迁移方案设计与实践
GaussDB(华为云分布式关系型数据库)凭借其高吞吐、强一致性、弹性扩展等特性,成为政企客户替换传统数据库(如MySQL、Oracle)或升级原有GaussDB
集群
的首选目标。
如清风一般
·
2025-02-26 05:56
gaussdb
数据库
K8S
集群
搭建(kubeadm+calico)
准备阶段环境显卡:4060ti系统:ubuntu22.041.安装docker官网安装步骤:#AddDocker'sofficialGPGkey:sudoapt-getupdatesudoapt-getinstallca-certificatescurlsudoinstall-m0755-d/etc/apt/keyringssudocurl-fsSLhttps://download.docker.
·
2025-02-26 05:02
kubernetes
什么容错性以及Spark Streaming如何保证容错性
容错系统的关键特性包括负载平衡、
集群
、冗余、复制和故障转移等。
python资深爱好者
·
2025-02-26 04:48
spark
大数据
分布式
微服务架构是什么?怎么使用?
微服务架构一.服务架构演变过程1.1单体应用架构所有的功能都在一个项目中1.2
集群
架构把一个单体项目部署多个,使用nginx进行负载均衡,根据负载均衡策略调用后端服务。
刘zy_9527
·
2025-02-25 21:34
架构
微服务
java
Spark
集群
架构
文章目录Spark架构Spark执行任务流程Spark运行环境SparkonYARNSparkStandaloneSpark架构Spark可以运行在YARN上也可以运行Mesos上,无论运行在哪个
集群
管理架构上
情深不仅李义山
·
2025-02-25 20:25
spark
spark
大数据
四、spark
集群
架构
spark
集群
架构官方文档:http://spark.apache.org/docs/latest/cluster-overview.html
集群
架构我们先看这张图这张图把spark架构拆分成了两块内容
weixin_34411563
·
2025-02-25 20:54
大数据
开发工具
精选 ES(elasticsearch)添加、修改、查询、删除详细使用语法
es使用简单,支持
集群
,适用于海量数据的存储、搜索与分析,应用十分广泛。
代码讲故事
·
2025-02-25 20:54
架构师成长之路
ELK
中间件
elasticsearch
ES
使用
查询
语法
Spark
集群
架构介绍
Spark之YARN介绍一、导语二、Spark及其特性三、Spark架构总览一、导语ApacheSpark(后续简称为Spark)是一款正在点燃大数据世界的开源
集群
计算框架。
olifchou
·
2025-02-25 20:23
Spark
spark
apache
spark
大数据
分布式
Spark Standalone
集群
架构
北风网spark学习笔记SparkStandalone
集群
架构SparkStandalone
集群
集群
管理器,clustermanager:Master进程,工作节点:Worker进程搭建了一套Hadoop
htfenght
·
2025-02-25 20:22
spark
spark
Spark----Spark 在不同
集群
中的架构
Spark注重建立良好的生态系统,它不仅支持多种外部文件存储系统,提供了多种多样的
集群
运行模式。
XiaodunLP
·
2025-02-25 20:22
Spark
运维实践 | 使用K3S之快速搭建精简版本K8S
集群
环境,助力开发测试环境!
欢迎关注「WeiyiGeek」点击下方卡片即可关注我哟!设为「星标⭐」每天带你基础入门到全栈实践再到放弃学习!涉及网络安全运维、应用开发、物联网IOT、学习路径、个人感悟等知识“花开堪折直须折,莫待无花空折枝。”作者主页:[https://www.weiyigeek.top]作者博客:[https://blog.weiyigeek.top]作者答疑学习交流群:请关注
全栈工程师修炼指南
·
2025-02-25 19:17
云原生落地实用指南
kubernetes
运维
容器
云原生
docker
k8s
集群
内的pod连接
集群
外部的mysql, k8s
集群
内部服务如何连接
集群
外部mysql? 一文搞明白
一、为什么不将mysql服务部署到k8s
集群
中使用呢?1.有状态服务在K8s中的管理比较复杂,特别是持久化存储的问题。
终端行者
·
2025-02-25 19:17
Kubernetes
kubernetes
mysql
容器
使用kuboard管理kubernetes
集群
官网:https://kuboard.cn/learning/准备一台新的服务并安装docker[root@docker-server~]#dockerrun-d--restart=unless-stopped--name=kuboard-p80:80/tcp-p10081:10081/tcp-eKUBOARD_ENDPOINT="http://192.168.209.176:80"-eKUBOA
终端行者
·
2025-02-25 19:17
Kubernetes
kubernetes
容器
云原生
如何添加
集群
节点与token过期如何重新生成?
Kubernetes
集群
部署零、版本信息操作系统:CentosStream9、Centos7通过k8s版本:1.26.11.28.2本文档未使用docker,使用containerd从版本1.24开始已经去掉默认对
终端行者
·
2025-02-25 19:17
Kubernetes
centos
kubernetes
docker修改command_只要 8 个步骤,学会这个 Docker 命令终极教程!
花费1-2天的时间来设置Docker
集群
,或找出导致Docker容器启动失败的代码,你是不是也有过类似的经历?
凶残小龙虾
·
2025-02-25 18:39
docker修改command
MySQL 主从
集群
同步延迟问题分析与解决方案
MySQL主从复制(Replication)是构建高可用架构的核心技术,但在实际应用中,主从同步延迟(ReplicationLag)是常见且棘手的问题。延迟会导致从库数据不一致、读请求返回旧数据,甚至引发业务逻辑错误。本文将深入分析延迟原因并提供系统性解决方案,助你彻底优化主从同步性能。一、主从同步延迟的本质主从同步延迟是指从库(Slave)的数据落后于主库(Master)的时间差,通常由以下环节
豪宇刘
·
2025-02-25 17:35
mysql
sql
spark程序提交到
集群
上_Spark
集群
模式&Spark程序提交
Spark
集群
模式&Spark程序提交1.
集群
管理器Spark当前支持三种
集群
管理方式Standalone—Spark自带的一种
集群
管理方式,易于构建
集群
。
毫无特色
·
2025-02-25 16:25
spark程序提交到集群上
JUC并发—9.并发安全集合三
CopyOnWriteArrayList2.并发安全的链表队列ConcurrentLinkedQueue3.并发编程中的阻塞队列概述4.JUC的各种阻塞队列介绍5.LinkedBlockingQueue的具体实现原理6.基于两个队列实现的
集群
同步机制
东阳马生架构
·
2025-02-25 15:53
JUC并发原理及源码
JUC并发
Java
并发安全的集合
Redis原理—3.复制、哨兵和
集群
大纲1.Redis使用sync命令实现的复制功能2.Redis使用psync命令实现的复制功能3.Redis主从服务器之间的心跳检测4.从服务器如何实现复制主服务器的(复制的实现)5.Redis的复制拓扑介绍6.Redis主从复制数据延迟的处理7.Redis主从复制的问题8.RedisSentinel和高可用9.Redis如何保存更多的数据10.一个普通Redis服务器的初始化过程11.一个Sen
东阳马生架构
·
2025-02-25 15:53
Redis底层原理与应用
redis
数据库
基于docker-compose安装spark 1+3及Spark On Yarn模式
集群
基于docker-compose安装spark1+3及SparkOnYarn模式
集群
1、`docker-compose.yml`:2、`spark.env`:此处的样例是参考别人的,之后自己整合一套可以使用的
dh12313012
·
2025-02-25 15:20
docker-compose
spark
docker
解决 kubeasz 安装k8s
集群
跨节点pod 无法使用cluster ip通讯问题
问题描述使用kubeasz搭建k8s
集群
后使用的配置文件#'etcd'clustershouldhaveoddmember(s)(1,3,5,...)
CHEN_RUI_2200
·
2025-02-25 13:00
k8s运维
kubernetes
docker
容器
从入门到放弃之生产环境基于Kubernetes V1.21.10搭建高可用
集群
1.资源规划名称系统配置IP组件k8s-master01CentOS7.94核8G500G存储172.16.97.27kube-apiserverkube-controller-managerkube-scheduleretcdk8s-master02CentOS7.94核8G500G存储172.16.97.28kube-apiserverkube-controller-managerkube-s
收破烂的小白
·
2025-02-25 12:25
docker
linux
kubernetes
redis
集群
节点起不来_深入学习Redis:
集群
写的时间有点长,喜欢的朋友点赞关注收藏素质三连,谢谢前言Redis
集群
解决了上述问题,实现了较为完善的高可用方案。
翻书汪
·
2025-02-25 11:48
redis
集群
节点起不来
Zookeeper(71)Zookeeper在分布式数据库中的应用是什么?
节点管理:Zookeeper可以跟踪分布式数据库
集群
中的节点信息,监控节点的状态(上线、下线、故障等)。
辞暮尔尔-烟火年年
·
2025-02-25 09:38
微服务
分布式
zookeeper
数据库
云原生降本之路:技术创新与应用解析
内容,深入探讨了云原生技术在降低企业成本方面的应用,包括资源利用现状、成本优化思路、Kubernetes中的资源分配、横向与纵向伸缩、Kubernetes原生能力的不足、全链路降本的思考与价值主张、多种
集群
形态的利用
ITPUB-微风
·
2025-02-25 08:33
云原生
Redis哨兵模式(sentinel)学习总结及部署记录(主从复制、读写分离、主从切换)
Redis哨兵模式(sentinel)学习总结及部署记录(主从复制、读写分离、主从切换)https://segmentfault.com/a/1190000020849841Redis的
集群
方案大致有三种
coding996
·
2025-02-25 06:47
A100核心加速:高效计算方案解析
建议技术团队在部署前,优先完成工作负载特征分析与
集群
拓扑规划。第三代TensorCore架构的突破性设计,不仅
智能计算研究中心
·
2025-02-25 03:25
其他
YashanDB实例架构
#单机部署#分布式部署#共享
集群
部署#主要模块介绍数据库客户端一般是指客户基于YashanDB驱动开发的应用程序或YashanDB提供的客户端工具。驱动:应用程
YashanDB
·
2025-02-25 02:16
YashanDB
数据库
崖山数据库
YashanDB
YashanDB体系架构
部署架构YashanDB支持三种部署形态,分别是单机(主备)部署(简称:单机部署)、分布式
集群
部署(简称:分布式部署)和共享
集群
部署。
YashanDB
·
2025-02-25 02:13
YashanDB
数据库
崖山数据库
YashanDB
Hadoop之jdk的安装
并且在
集群
中每台主机操作一次,发现没有,不必卸载因为我的查看没有jdk,所以不需要卸载原有的,只需直接安装即可。2.安装此项的所有操作步
快来削我吖
·
2025-02-25 01:11
云存储
hadoop
jdk
centos
华为云GaussDB部署指南:主备架构的常见问题与解决方案
主备架构的常见问题与解决方案背景介绍部署步骤1.修改主机名2.软件安装检查3.禁用交换内存4.创建数据目录并挂载5.配置NTP时钟同步6.添加资源限制参数7.修改网卡的MTU8.上传安装工具包9.编辑
集群
配置文件
Byyyi耀
·
2025-02-24 21:13
GaussDB
华为云
gaussdb
架构
RabbitMQ
集群
搭建:使用HAProxy和Keepalived实现RabbitMQ的高可用负载均衡
在本文中,我们将探讨如何使用HAProxy和Keepalived来搭建RabbitMQ的高可用负载均衡
集群
。我们还将介绍如何将SpringBoot与RabbitMQ集成,以便在应用程序中使用消息队列。
EvktJava
·
2025-02-24 20:35
rabbitmq
负载均衡
ruby
YashanDB自动选主
#主备自动选主在分布式
集群
节点组和单机一主多备(大于一个备库)部署形态下,可以开启主备自动选主功能来实现主库选举以及故障自动切换。主备自动选主采用Raft算法,并支持设置Quorum。
·
2025-02-24 18:34
数据库
docker-compose 搭建redis
集群
(三台服务器,每台服务器上一主一从)
2.2、docker-compose安装2.3目录创建3、redis配置文件3.1生成redis.conf文件3.2shell文件无法执行问题解决3.3docker-compose.yml文件编写4、启动
集群
及初始化
黑尾土拨鼠
·
2025-02-24 16:34
redis
docker
docker
redis
服务器
docker-compose
支持增量备份、Redis分片
集群
继续优化...还有更多Addon功能优化等你体验!
KubeBlocksv0.9.3正式发布啦!本次发布包含了一些新功能、关键的错误修复以及各种改进,继续优化数据库管理体验。更多新功能等您探索!以下是详细的更新内容。升级指南指路:https://cn.kubeblocks.io/docs/preview/user-docs/upgrade-kubeb...KubeBlocks新特性MemberJoinAction:生命周期操作支持memberjoi
·
2025-02-24 14:30
Hadoop HDFS基准测试
一、测试写入速度确保HDFS
集群
和YARN
集群
成功启动hadoopjar/export/server/hadoop-3.1.4/share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient
Yvonne978
·
2025-02-24 14:22
大数据
hadoop
hdfs
大数据
Redis
集群
:Sentinel哨兵模式讲解
Sentinel:分布式系统的流量防卫兵Sentinel简介:随着微服务的流行,服务器和服务器之间的稳定性变得越来越重要。Sentinel是面向分布式服务架构的轻量级流量控制产品,主要以流量为切入点,从流量控制、熔断降级、系统负载保护等多个维度来帮助您保护服务的稳定性。Sentinel具有以下特征:丰富的应用场景:Sentinel承接了阿里巴巴近10年的双十一大促流量的核心场景,例如秒杀(即突发流
太阳打伞
·
2025-02-24 14:49
云服务
redis
sentinel
java
linux
分布式
RocketMq学习笔记
相关文章RocketMq5.0proxy的引入:https://juejin.cn/post/7293788137662758946RocketMqDocker
集群
搭建:https://www.cnblogs.com
花开不识君
·
2025-02-24 09:16
java
中间件
rocketmq
Docker部署Django(三)docker-compose编排Django+Uwsgi+Nginx+MySQL
写在前面实际的生产环境中,我们往往需要定义数量庞大的docker容器,并且容器之间具有错综复杂的依赖联系,一个一个去手动创建容器并记录和配置这些复杂的容器关系,不仅效率低下而且容易出错,所以迫切需要一种定义容器
集群
编排和部署的工具
诸葛钢铁云
·
2025-02-24 09:11
Docker
30道你不得不会的Elasticsearch面试题【附答案解析】
还是平安、顺丰等传统企业都对Elasticsearch有广泛的使用,但是在Elasticsearch6.8发布以前,大部分Elasticsearch功能都是付费的,开源版本的Elasticsearch在
集群
管控方面能力有限
麒麟改bug
·
2025-02-24 09:11
Java面试
elasticsearch
java
big
data
Hadoop常用操作命令
在NameNode节点格式化
集群
初始化
集群
hdfsnamenode-format启动HDFSsbin/start-dfs.sh启动yarnsbin/start-yarn.sh启动NodeManageryarn-daemon.shstartnodemanager
hzw0510
·
2025-02-24 07:02
hadoop
大数据
分布式
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他