E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
均衡集群
Hadoop 基础原理
Hadoop基础原理基本介绍Hadoop的必要性Hadoop核心组件Hadoop生态系统中的附加组件HDFSHDFS
集群
架构HDFS读写流程HDFS写流程HDFS读流程NameNode持久化机制MapReduce
disgare
·
2025-02-26 11:38
数据库
hadoop
大数据
分布式
短视频矩阵服务架构指南
API网关作为系统的入口,负责请求路由、负载
均衡
、认证和授权等功能。此外,系统还采用多租户设计,确保数据隔离,每个租户的数据是独立的,但可以共享基础架构,从而实现资源的高效利用。
李lrh9166
·
2025-02-26 11:37
架构
Flink-02-flink技术架构及工作原理
Flink组件栈自下而上,分别针对每一层进行解释说明:Deployment该层主要涉及了Flink的部署模式,Flink支持多种部署模式:本地、
集群
(Standalone/YARN)、云(GCE/EC2
TRX1024
·
2025-02-26 10:35
Flink
本地Oracle数据库复制数据到Apache Hive的Linux服务器
集群
的分步流程
我们已经有安装ApacheHive的Linux服务器
集群
,它可以连接到一个OracleRDS数据库,需要在该Linux服务器上安装配置sqoop,然后将OracleRDS数据库中所有的表数据复制到Hive
weixin_30777913
·
2025-02-26 10:34
数据库
大数据
hive
Flink
集群
架构
从本章节开始,我们对flink从它的一个
集群
的一个架构以及它的一个部署模式着手,去了解flink如何去部署在不同的这样的一个
集群
的一些资源管理器上面,以及相应的一些原理的一些解析。
流量留
·
2025-02-26 06:32
Apache
Flink
FLINK
java
运维
数据库
GaussDB 数据库迁移方案设计与实践
GaussDB(华为云分布式关系型数据库)凭借其高吞吐、强一致性、弹性扩展等特性,成为政企客户替换传统数据库(如MySQL、Oracle)或升级原有GaussDB
集群
的首选目标。
如清风一般
·
2025-02-26 05:56
gaussdb
数据库
K8S
集群
搭建(kubeadm+calico)
准备阶段环境显卡:4060ti系统:ubuntu22.041.安装docker官网安装步骤:#AddDocker'sofficialGPGkey:sudoapt-getupdatesudoapt-getinstallca-certificatescurlsudoinstall-m0755-d/etc/apt/keyringssudocurl-fsSLhttps://download.docker.
·
2025-02-26 05:02
kubernetes
【Python爬虫(36)】深挖多进程爬虫性能优化:从通信到负载
均衡
【Python爬虫】专栏简介:本专栏是Python爬虫领域的集大成之作,共100章节。从Python基础语法、爬虫入门知识讲起,深入探讨反爬虫、多线程、分布式等进阶技术。以大量实例为支撑,覆盖网页、图片、音频等各类数据爬取,还涉及数据处理与分析。无论是新手小白还是进阶开发者,都能从中汲取知识,助力掌握爬虫核心技能,开拓技术视野。目录一、引言二、优化进程间通信以减少开销2.1共享内存的运用2.2优化
奔跑吧邓邓子
·
2025-02-26 04:18
Python爬虫
python
爬虫
性能优化
开发语言
多进程
负载均衡
什么容错性以及Spark Streaming如何保证容错性
容错系统的关键特性包括负载平衡、
集群
、冗余、复制和故障转移等。
python资深爱好者
·
2025-02-26 04:48
spark
大数据
分布式
Linux故障排查清单:让你调试不再迷茫!
据权威统计,Linux在服务器领域的市场份额已高达75%以上,广泛应用于Web服务器、数据库服务器、负载
均衡
服务器等关键场景。
深度Linux
·
2025-02-26 02:36
C/C++全栈开发
性能优化
linux
项目实战
性能调优
微服务架构是什么?怎么使用?
微服务架构一.服务架构演变过程1.1单体应用架构所有的功能都在一个项目中1.2
集群
架构把一个单体项目部署多个,使用nginx进行负载
均衡
,根据负载
均衡
策略调用后端服务。
刘zy_9527
·
2025-02-25 21:34
架构
微服务
java
面试题:SpringCloud的优缺点有哪些
:SpringCloud的优点微服务生态完善SpringCloud提供了微服务架构中常见的解决方案,如服务注册与发现(Eureka、Consul)、配置中心(SpringCloudConfig)、负载
均衡
clownAdam
·
2025-02-25 21:30
SpringCloud面试
spring
cloud
后端
面试
微服务
Spark
集群
架构
文章目录Spark架构Spark执行任务流程Spark运行环境SparkonYARNSparkStandaloneSpark架构Spark可以运行在YARN上也可以运行Mesos上,无论运行在哪个
集群
管理架构上
情深不仅李义山
·
2025-02-25 20:25
spark
spark
大数据
四、spark
集群
架构
spark
集群
架构官方文档:http://spark.apache.org/docs/latest/cluster-overview.html
集群
架构我们先看这张图这张图把spark架构拆分成了两块内容
weixin_34411563
·
2025-02-25 20:54
大数据
开发工具
精选 ES(elasticsearch)添加、修改、查询、删除详细使用语法
es使用简单,支持
集群
,适用于海量数据的存储、搜索与分析,应用十分广泛。
代码讲故事
·
2025-02-25 20:54
架构师成长之路
ELK
中间件
elasticsearch
ES
使用
查询
语法
高并发问题解决方案
以下是一些常见的解决高并发问题的方法和技术:1.负载
均衡
目的:分担单个服务器的压力,提高系统处理能力。实现方式:应用层负载
均衡
:使用负载
均衡
器(如Nginx、HAProxy、Traef
·
2025-02-25 20:45
负载均衡缓存异步处理限流微服务
Spark
集群
架构介绍
Spark之YARN介绍一、导语二、Spark及其特性三、Spark架构总览一、导语ApacheSpark(后续简称为Spark)是一款正在点燃大数据世界的开源
集群
计算框架。
olifchou
·
2025-02-25 20:23
Spark
spark
apache
spark
大数据
分布式
Spark Standalone
集群
架构
北风网spark学习笔记SparkStandalone
集群
架构SparkStandalone
集群
集群
管理器,clustermanager:Master进程,工作节点:Worker进程搭建了一套Hadoop
htfenght
·
2025-02-25 20:22
spark
spark
Spark----Spark 在不同
集群
中的架构
Spark注重建立良好的生态系统,它不仅支持多种外部文件存储系统,提供了多种多样的
集群
运行模式。
XiaodunLP
·
2025-02-25 20:22
Spark
运维实践 | 使用K3S之快速搭建精简版本K8S
集群
环境,助力开发测试环境!
欢迎关注「WeiyiGeek」点击下方卡片即可关注我哟!设为「星标⭐」每天带你基础入门到全栈实践再到放弃学习!涉及网络安全运维、应用开发、物联网IOT、学习路径、个人感悟等知识“花开堪折直须折,莫待无花空折枝。”作者主页:[https://www.weiyigeek.top]作者博客:[https://blog.weiyigeek.top]作者答疑学习交流群:请关注
全栈工程师修炼指南
·
2025-02-25 19:17
云原生落地实用指南
kubernetes
运维
容器
云原生
docker
k8s
集群
内的pod连接
集群
外部的mysql, k8s
集群
内部服务如何连接
集群
外部mysql? 一文搞明白
一、为什么不将mysql服务部署到k8s
集群
中使用呢?1.有状态服务在K8s中的管理比较复杂,特别是持久化存储的问题。
终端行者
·
2025-02-25 19:17
Kubernetes
kubernetes
mysql
容器
使用kuboard管理kubernetes
集群
官网:https://kuboard.cn/learning/准备一台新的服务并安装docker[root@docker-server~]#dockerrun-d--restart=unless-stopped--name=kuboard-p80:80/tcp-p10081:10081/tcp-eKUBOARD_ENDPOINT="http://192.168.209.176:80"-eKUBOA
终端行者
·
2025-02-25 19:17
Kubernetes
kubernetes
容器
云原生
如何添加
集群
节点与token过期如何重新生成?
Kubernetes
集群
部署零、版本信息操作系统:CentosStream9、Centos7通过k8s版本:1.26.11.28.2本文档未使用docker,使用containerd从版本1.24开始已经去掉默认对
终端行者
·
2025-02-25 19:17
Kubernetes
centos
kubernetes
docker修改command_只要 8 个步骤,学会这个 Docker 命令终极教程!
花费1-2天的时间来设置Docker
集群
,或找出导致Docker容器启动失败的代码,你是不是也有过类似的经历?
凶残小龙虾
·
2025-02-25 18:39
docker修改command
MySQL 主从
集群
同步延迟问题分析与解决方案
MySQL主从复制(Replication)是构建高可用架构的核心技术,但在实际应用中,主从同步延迟(ReplicationLag)是常见且棘手的问题。延迟会导致从库数据不一致、读请求返回旧数据,甚至引发业务逻辑错误。本文将深入分析延迟原因并提供系统性解决方案,助你彻底优化主从同步性能。一、主从同步延迟的本质主从同步延迟是指从库(Slave)的数据落后于主库(Master)的时间差,通常由以下环节
豪宇刘
·
2025-02-25 17:35
mysql
sql
spark程序提交到
集群
上_Spark
集群
模式&Spark程序提交
Spark
集群
模式&Spark程序提交1.
集群
管理器Spark当前支持三种
集群
管理方式Standalone—Spark自带的一种
集群
管理方式,易于构建
集群
。
毫无特色
·
2025-02-25 16:25
spark程序提交到集群上
JUC并发—9.并发安全集合三
CopyOnWriteArrayList2.并发安全的链表队列ConcurrentLinkedQueue3.并发编程中的阻塞队列概述4.JUC的各种阻塞队列介绍5.LinkedBlockingQueue的具体实现原理6.基于两个队列实现的
集群
同步机制
东阳马生架构
·
2025-02-25 15:53
JUC并发原理及源码
JUC并发
Java
并发安全的集合
Redis原理—3.复制、哨兵和
集群
大纲1.Redis使用sync命令实现的复制功能2.Redis使用psync命令实现的复制功能3.Redis主从服务器之间的心跳检测4.从服务器如何实现复制主服务器的(复制的实现)5.Redis的复制拓扑介绍6.Redis主从复制数据延迟的处理7.Redis主从复制的问题8.RedisSentinel和高可用9.Redis如何保存更多的数据10.一个普通Redis服务器的初始化过程11.一个Sen
东阳马生架构
·
2025-02-25 15:53
Redis底层原理与应用
redis
数据库
基于docker-compose安装spark 1+3及Spark On Yarn模式
集群
基于docker-compose安装spark1+3及SparkOnYarn模式
集群
1、`docker-compose.yml`:2、`spark.env`:此处的样例是参考别人的,之后自己整合一套可以使用的
dh12313012
·
2025-02-25 15:20
docker-compose
spark
docker
解决 kubeasz 安装k8s
集群
跨节点pod 无法使用cluster ip通讯问题
问题描述使用kubeasz搭建k8s
集群
后使用的配置文件#'etcd'clustershouldhaveoddmember(s)(1,3,5,...)
CHEN_RUI_2200
·
2025-02-25 13:00
k8s运维
kubernetes
docker
容器
程序员读点微观经济学
微观经济学学习路径、核心内容、数据来源、实际作用及案例实践的系统性总结:一、微观经济学学习框架1.核心知识模块模块关键内容基础理论-供需理论(
均衡
价格、弹性分析)-消费者行为(效用最大化、无差异曲线)-
猿脑2.0
·
2025-02-25 12:28
python
从入门到放弃之生产环境基于Kubernetes V1.21.10搭建高可用
集群
1.资源规划名称系统配置IP组件k8s-master01CentOS7.94核8G500G存储172.16.97.27kube-apiserverkube-controller-managerkube-scheduleretcdk8s-master02CentOS7.94核8G500G存储172.16.97.28kube-apiserverkube-controller-managerkube-s
收破烂的小白
·
2025-02-25 12:25
docker
linux
kubernetes
redis
集群
节点起不来_深入学习Redis:
集群
写的时间有点长,喜欢的朋友点赞关注收藏素质三连,谢谢前言Redis
集群
解决了上述问题,实现了较为完善的高可用方案。
翻书汪
·
2025-02-25 11:48
redis
集群
节点起不来
Zookeeper(71)Zookeeper在分布式数据库中的应用是什么?
节点管理:Zookeeper可以跟踪分布式数据库
集群
中的节点信息,监控节点的状态(上线、下线、故障等)。
辞暮尔尔-烟火年年
·
2025-02-25 09:38
微服务
分布式
zookeeper
数据库
云原生降本之路:技术创新与应用解析
内容,深入探讨了云原生技术在降低企业成本方面的应用,包括资源利用现状、成本优化思路、Kubernetes中的资源分配、横向与纵向伸缩、Kubernetes原生能力的不足、全链路降本的思考与价值主张、多种
集群
形态的利用
ITPUB-微风
·
2025-02-25 08:33
云原生
Redis哨兵模式(sentinel)学习总结及部署记录(主从复制、读写分离、主从切换)
Redis哨兵模式(sentinel)学习总结及部署记录(主从复制、读写分离、主从切换)https://segmentfault.com/a/1190000020849841Redis的
集群
方案大致有三种
coding996
·
2025-02-25 06:47
A10高效配置实战技巧
本文围绕A10Thunder系列设备的全流程调优展开,系统梳理从基础参数校准到高级功能部署的关键步骤,重点解析负载
均衡
算法与业务场景的适配逻辑、会话保持机制的性能平衡点以及SSL加速优化的硬件资源分配策略
智能计算研究中心
·
2025-02-25 03:55
其他
A100核心加速:高效计算方案解析
建议技术团队在部署前,优先完成工作负载特征分析与
集群
拓扑规划。第三代TensorCore架构的突破性设计,不仅
智能计算研究中心
·
2025-02-25 03:25
其他
YashanDB实例架构
#单机部署#分布式部署#共享
集群
部署#主要模块介绍数据库客户端一般是指客户基于YashanDB驱动开发的应用程序或YashanDB提供的客户端工具。驱动:应用程
YashanDB
·
2025-02-25 02:16
YashanDB
数据库
崖山数据库
YashanDB
YashanDB体系架构
部署架构YashanDB支持三种部署形态,分别是单机(主备)部署(简称:单机部署)、分布式
集群
部署(简称:分布式部署)和共享
集群
部署。
YashanDB
·
2025-02-25 02:13
YashanDB
数据库
崖山数据库
YashanDB
Hadoop之jdk的安装
并且在
集群
中每台主机操作一次,发现没有,不必卸载因为我的查看没有jdk,所以不需要卸载原有的,只需直接安装即可。2.安装此项的所有操作步
快来削我吖
·
2025-02-25 01:11
云存储
hadoop
jdk
centos
DPVS_dpvs: DPVS架构图 介绍 DPVS是基于DPDK的高性能第4层负载
均衡
器
DPVSIntroductionDPVSisahighperformanceLayer-4loadbalancerbasedonDPDK.It'sderivedfromLinuxLVSandit'smodificationalibaba/LVS.thenameDPVScomesfrom"DPDK-LVS".Differenttechniquesareappliedforhighperformanc
weixin_39878247
·
2025-02-25 01:10
DPVS
软考高级架构师/分析师论文【论面向服务架构设计及应用/SOA】
一、摘要 2020年4月,某互联网公司开始了“基础架构管理平台”项目的实施,该项目主要为基础架构团队提供基础设施、中间件、负载
均衡
、任务调度管理等功能。
saikey0379
·
2025-02-25 01:10
软考高级论文
系统架构设计师
系统分析师
计算机软件资格考试
soa
Nginx 负载
均衡
详解
Nginx不仅适用于静态资源的快速分发,还广泛应用于负载
均衡
、反向代理等场景。通过Nginx,可以轻松地构建一个高效、可靠且可扩展的Web服务架构。
m0_74823878
·
2025-02-25 00:32
面试
学习路线
阿里巴巴
nginx
负载均衡
运维
解锁健康密码,拥抱养生生活
遵循“五谷为养,五果为助,五畜为益,五菜为充”的原则,确保营养
均衡
。
lanlande33
·
2025-02-24 22:47
生活
拥抱健康养生,开启活力人生
均衡
饮食是养生的基础。多吃蔬菜,像菠菜富含铁元素,西兰花饱含维生素C和K,它们为身体提供丰富养分;水果也不能少,苹果、橙子等富含维生素与果胶,能促进肠道蠕动。
lanlande33
·
2025-02-24 22:17
生活
华为云GaussDB部署指南:主备架构的常见问题与解决方案
主备架构的常见问题与解决方案背景介绍部署步骤1.修改主机名2.软件安装检查3.禁用交换内存4.创建数据目录并挂载5.配置NTP时钟同步6.添加资源限制参数7.修改网卡的MTU8.上传安装工具包9.编辑
集群
配置文件
Byyyi耀
·
2025-02-24 21:13
GaussDB
华为云
gaussdb
架构
Linux系统中的负载
均衡
为了实现系统的高效运行和充分利用服务器资源,负载
均衡
技术应运而生。负载
均衡
(LoadBalancing)是一种将系统的负载均匀地分配给多个服务器或设备的技术,以提高系统的性能、可靠性和稳定性。
嵌入式胖哥
·
2025-02-24 21:38
linux
运维
服务器
RabbitMQ
集群
搭建:使用HAProxy和Keepalived实现RabbitMQ的高可用负载
均衡
在本文中,我们将探讨如何使用HAProxy和Keepalived来搭建RabbitMQ的高可用负载
均衡
集群
。我们还将介绍如何将SpringBoot与RabbitMQ集成,以便在应用程序中使用消息队列。
EvktJava
·
2025-02-24 20:35
rabbitmq
负载均衡
ruby
YashanDB自动选主
#主备自动选主在分布式
集群
节点组和单机一主多备(大于一个备库)部署形态下,可以开启主备自动选主功能来实现主库选举以及故障自动切换。主备自动选主采用Raft算法,并支持设置Quorum。
·
2025-02-24 18:34
数据库
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他