E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Distributed
论分布式存储系统架构设计
【题目】论分布式存储系统架构设计分布式存储系统(
Distributed
StorageSystem)通常将数据分散存储在多台独立的设备上。
jizhijiangren
·
2025-03-30 18:53
分布式
hadoop相关面试题以及答案
其主要组件包括Hadoop
Distributed
FileSystem(HDFS)和MapReduce。解释HDFS的工作原理。HDFS采用主从架构,包括一个NameNode和多个DataNode。
酷爱码
·
2025-03-28 13:12
编程学习
hadoop
大数据
分布式
网络安全威胁与防护措施(中)
6.拒绝服务攻击(DoS/DDoS,DenialofService/
Distributed
DenialofService)**拒绝服务攻击(DoS)和分布式拒绝服务攻击(DDoS)**是两种常见的网络攻击方式
冬冬小圆帽
·
2025-03-26 03:07
web安全
安全
推荐文章:探索分布式数据存储的新纪元 —— Irmin
推荐文章:探索分布式数据存储的新纪元——IrminirminIrminisa
distributed
databasethatfollowsthesamedesignprinciplesasGit项目地址:
班妲盼Joyce
·
2025-03-25 08:09
【服务器数据恢复】数据中心存储服务器VMware vSAN分布式存储架构数据恢复解析
分布式文件系统(
Distributed
FileSystem,DFS)是一种能够在多台计算机之间共
海境超备
·
2025-03-21 08:40
服务器
分布式
架构
网络安全
系统安全
运维
Starrocks 命令 Alter table
DISTRIBUTED
重分布数据的实现
背景在前文Starrocks写入报错primarykeymemoryusageexceedsthelimit中,可以通过ALTERTABLExxxx
DISTRIBUTED
BYHASH(xx)BUCKETS50
鸿乃江边鸟
·
2025-03-20 15:23
大数据
StarRocks
starrocks
大数据
鸿蒙API14开发【@ohos.account.
distributed
Account (分布式账号管理)】短距通信服务
导入模块import{
distributed
Account}from'@kit.BasicServicesKit';
distributed
Account.get
Distributed
AccountAbilitygetDis
移动开发技术栈
·
2025-03-20 08:19
鸿蒙开发
harmonyos
分布式
华为
鸿蒙系统
鸿蒙
通信
【机器学习】基于t-SNE数据可视化工程
一、说明t-SNE(t-
Distributed
StochasticNeighborEmbedding)是一种常用的非线性降维技术。它可以将高维数据映射到一个低维空间(通常是2D或3D)来便于可视化。
无水先生
·
2025-03-16 04:17
AI原理和python实现
人工智能综合
人工智能
算法
AUTOSAR从入门到精通-汽车电子电气架构(EEA)
目录前言算法原理EEA发展历程->分布式架构(
distributed
):->基于域的集中式架构(DCUbasedcentralized):->基于域融合的带状架构(DCUfusionbasedzonal
格图素书
·
2025-03-15 23:40
汽车
【大模型LLM面试合集】分布式训练_总结
我们首先以PyTorch数据并行的发展(DataParallel、
Distributed
DataParallel、FullyShardedDataParallel)为主线进行讲述了数据并行的技术原理。
X.AI666
·
2025-03-14 17:28
大模型LLM面试合集
面试
分布式
人工智能
语言模型
浅显易懂——连接池、分布式系统、微服务等概念
文章目录连接池比喻技术层面关键参数实际应用示例分布式系统概念实现方式实际应用场景关键概念分布式会话管理分布式计数器分布式锁分布式事务(
Distributed
Transaction)分布式追踪集群环境比喻优缺微服务架构比喻优缺实际场景服务间通信负载均衡服务发现连接池比喻想象你是一家餐厅的顾客
十五春会
·
2025-03-14 17:25
分布式
微服务
ClickHouse 学习笔记
ClickHouse服务器clickhouse-client--host=10.16.226.100--user=default--password2.在ClickHouse中,如果你想要单独删除一行记录,且使用的是
Distributed
金州饿霸
·
2025-03-13 19:20
Big
Data
分布式数据库
clickhouse
学习
笔记
Java中的分布式锁:原理、实现与最佳实践
**分布式锁(
Distributed
Lock)**正是解决这一问题的核心技术。本文将深入探讨分布式锁的实现原理、常见方案及其在Java生态中的实践应用,涵盖5000字详细解析。一、为什么需要分布式锁?
Lill_bin
·
2025-03-13 10:42
java
java
分布式
开发语言
算法
数据结构
排序算法
maven
PyTorch分布式训练
模型并行启动训练性能优化建议示例代码参考资料和相关问题以下是为您整理的PyTorch分布式训练教程指南:一、PyTorch分布式训练核心概念数据并行:通过分割数据集实现多GPU并行训练,主流方法包括:
Distributed
DataParallel
阳光明媚大男孩
·
2025-03-13 02:16
pytorch
分布式
人工智能
Hadoop、Spark和 Hive 的详细关系
核心组件:HDFS(Hadoop
Distributed
FileSystem):分布式文件系统,提供高吞吐量的数据访问。
夜行容忍
·
2025-03-11 18:46
hadoop
spark
hive
鸿蒙(HarmonyOS NEXT)开发实战:
Distributed
Service Kit(分布式管理服务开发)
Distributed
ServiceKit(分布式管理服务)实现了分布式设备管理、分布式硬件管
我很英俊 小名男男
·
2025-03-11 09:01
OpenHarmony
HarmonyOS
鸿蒙开发
harmonyos
华为
前端
开发语言
鸿蒙
移动开发
分布式
【技术干货】三大常见网络攻击类型详解:DDoS/XSS/中间人攻击,原理、危害及防御方案
DDoS(
Distributed
DenialofService,分布式拒绝服务攻击)通过操控大量“僵尸设备”(Botnet)向目标服务器发送海量请求,耗尽服务器资源(带宽、CPU、内存),导致正常用户无法访问服务
挣扎与觉醒中的技术人
·
2025-03-11 05:01
网络安全入门及实战
ddos
xss
前端
网络
Hadoop介绍:什么是Hadoop?了解Hadoop的应用
Hadoop框架主要包括HDFS(Hadoop
Distributed
FileSystem,Hadoop分布式文件系统)、MapReduce、YA
Zzzxt007
·
2025-03-09 21:55
hadoop
大数据
分布式
SpringBoot与Sentinel整合,解决异常爬虫请求问题
DDoS攻击DDoS(
Distributed
DenialofService)是一种恶意攻击手段,攻击者通过控制大量计算机设备(如僵尸网络),向目标服务
奔向理想的星辰大海
·
2025-03-09 20:19
Java研发实用技巧
云原生
spring
boot
sentinel
爬虫
redis分布式锁setnx
importredis.clients.jedis.Jedis;importjava.util.UUID;importredis.clients.jedis.params.SetParams;publicclass
Distributed
Lock
xiaogg3678
·
2025-03-09 04:25
redis
分布式
数据库
论分布式存储系统架构设计
在这种背景下,分布式存储系统(
Distributed
StorageSystem)应运而生。
一休哥助手
·
2025-03-08 21:37
架构
软考系统架构师
分布式
大数据计算框架深入:Spark SQL、DataFrame、RDD 性能优化
1.引言ApacheSpark是当前最流行的大数据计算框架之一,其中SparkSQL、DataFrame和RDD(Resilient
Distributed
Dataset)是数据处理的三大核心API。
晴天彩虹雨
·
2025-03-08 10:48
大数据
spark
big
data
鸿蒙系统分布式文件概述、访问、拷贝
1.分布式文件系统概述分布式文件系统(hmdfs,HarmonyOS
Distributed
FileSystem)提供跨设备的文件访问能力,适用于如下场景:两台设备组网,用户可以利用一台设备上的编辑软件编辑另外一台设备上的文档
小时代的大玩家
·
2025-03-08 09:20
鸿蒙
harmonyos
分布式
华为
APM是怎么监控,原理是什么?Java Agent 又是什么?
调用链追踪(
Distributed
Tracing):记录
蒂法就是我
·
2025-03-07 22:31
java
开发语言
万字总结!常见分布式ID解决方案(数据库、算法、开源组件)
分布式ID分布式ID(
Distributed
ID)是指在分布式系统中生成全局唯一的标识符,用于标识不同实体或数据对象。
Java爱好狂.
·
2025-03-07 15:50
wpf
java
后端
CE4208
Distributed
Systems
CE4208
Distributed
SystemsAssignment#1:DataCentred
Distributed
SystemsAssignmentPage1of3CE4208
Distributed
SystemsDataCentred
Distributed
SystemsAssignment1
·
2025-03-07 03:20
后端
分布式网络
分布式网络(
Distributed
Network)指的是一种计算机网络架构,其中计算资源(计算、存储、数据处理等)分布在多个物理或逻辑上的节点上,而不是集中在单一的服务器或数据中心中。
Hard_pea
·
2025-03-06 12:46
分布式
hdfs HA 机制, 一台 namenode 宕机了, joualnode , namenode , edit.log fsimage 的 变 化?思维导图 代码示例(java 架构)
HDFS(Hadoop
Distributed
FileSystem)的高可用性(HA,HighAvailability)机制旨在解决单点故障问题,确保即使在NameNode出现故障的情况下,文件系统仍然可以继续正常工作
用心去追梦
·
2025-03-06 10:00
hdfs
java
架构
hadoop
Hadoop是一个用于分布式存储和处理大规模数据的开源框架,它的架构主要由以下几个核心组件组成:1.Hadoop生态系统核心组件Hadoop的核心架构主要包括HDFS(Hadoop
Distributed
FileSystem
百里自来卷
·
2025-03-06 06:00
hadoop
大数据
分布式
【自学笔记】Hadoop基础知识点总览-持续更新
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录Hadoop基础知识点总览1.Hadoop简介2.Hadoop生态系统3.HDFS(Hadoop
Distributed
FileSystem
Long_poem
·
2025-03-05 22:24
笔记
hadoop
大数据
分布式session和本地session区别
分布式会话(
Distributed
Session)和本地会话(LocalSession)是两种会话管理方式,它们在存储位置、可扩展性和数据共享方面存在区别。存储位置:本地会话:存储在服务器本地内存中。
搁浅里妥协
·
2025-03-04 04:20
分布式
分布式多卡训练(DDP)踩坑
单卡训练语句(正常运行):pythonmain.py多卡训练语句:需要通过torch.
distributed
.launch来启动,一般是单节点,其中CUDA_VISIBLE_DEVICES设置用的显卡编号
m0_54804970
·
2025-03-03 11:05
面试
学习路线
阿里巴巴
分布式
通俗易懂的一致性哈希原理
一致性哈希(Consistenthashing)算法是由MIT的Karger等人与1997年在一篇学术论文(《Consistenthashingandrandomtrees:
distributed
cachingprotocolsforrelievinghotspotsontheWorldWideWeb
eternity_zzy
·
2025-03-02 06:06
java
java
案例分享:D2 Slam @xuhao3e8
视频来源:$D^2$SLAM:Decentralizedand
Distributed
CollaborativeVisual-inertialSLAM硬件新4P的介绍https://www.oakchina.cn
OAK中国_官方
·
2025-03-01 20:56
无人机
实现设备认证功能鸿蒙示例代码
介绍本示例使用鸿蒙ohos.
distributed
DeviceManager模块,实现设备间相互认证的能力。
·
2025-02-28 06:09
TensorFlow 架构
https://www.tensorflow.org/guide/extend/architecture一WedesignedTensorFlowforlarge-scale
distributed
trainingandinference
weixin_zdpau
·
2025-02-27 19:11
AI
tensorflow
人工智能
神经网络
从阿里云EDM到美团云:典型微服务治理平台的实战经验分享
目录一.阿里云EDM(Enterprise
Distributed
ApplicationService)二.腾讯云TSF(TencentServiceFramework)三.华为云FusionStage四
码农老起
·
2025-02-27 17:27
微服务
架构
云原生
探秘分布式图处理利器——PHOEBUS
探秘分布式图处理利器——PHOEBUSphoebusPhoebusisa
distributed
frameworkforlargescalegraphprocessingwritteninErlang.项目地址
杭臣磊Sibley
·
2025-02-26 14:32
探秘MoonMQ:一款高速分布式消息队列系统
探秘MoonMQ:一款高速分布式消息队列系统moonmqafast
distributed
messagequeueimplementedwithgo项目地址:https://gitcode.com/gh_mirrors
蒙丁啸Sharp
·
2025-02-26 14:32
HDFS是如何存储和管理大数据
HDFS(Hadoop
Distributed
FileSystem,Hadoop分布式文件系统)是专为大数据处理而设计的分布式文件系统,具有高吞吐量、高容错性等特点,适用于大规模数据存储和管理。
python资深爱好者
·
2025-02-26 11:38
大数据
hdfs
hadoop
SQL Server 导入EXCEL数据
数据到本地数据库,流程如下:1、--启动OpenDataSourceexecsp_configure'showadvancedoptions',1reconfigureexecsp_configure'AdHoc
Distributed
Queries
akhdjkrhyiewbhgj
·
2025-02-25 12:26
Seata 分布式事务 XA 与 AT 全面解析
1.1什么是XA用非常官方的话来说XA规范是X/Open组织定义的分布式事务处理(DTP,
Distributed
TransactionProcessing)标准。XA规范描述了全
鸨哥学JAVA
·
2025-02-24 06:53
程序员
编程
Java
分布式
java
开发语言
HDFS分布文件系统(Hadoop
Distributed
File System)
3.上传本地文件到HDFS4.查看文件5.删除HDFS上的文件或者目录6.修改指定文件的权限信息(读、写、执行)一般语法:chmod[可选项]五、HDFS实战应用六、总结一.HDFS的本质Hadoop
Distributed
FileSystem
柿子小头
·
2025-02-21 08:38
hdfs
hadoop
大数据
COMP212 CA Coordination and Leader Election
DepartmentofComputerScienceCOMP212-2025-CAAssignment1CoordinationandLeaderElectionSimulatingandEvaluating
Distributed
ProtocolsinJavaAssessmentInformationAssignmentNumber1
·
2025-02-21 02:15
后端
《Operating System Concepts》阅读笔记:p41-p49
一、技术总结1.peer-to-peer(P2P)(1)定义P2PisAmodeof
distributed
computinginwhichallnodesactasbothclientsofothernodesandserverstoothernodes
·
2025-02-21 02:44
操作系统
【学习笔记】Elasticsearch之环境搭建
1.什么是Elasticsearch官网上是这么介绍的:Elasticsearchisa
distributed
documentstore.Insteadofstoringinformationasrowsofcolumnardata
聪明马的博客
·
2025-02-20 13:03
elasticsearch
学习
笔记
elasticsearch
《Operating System Concepts》阅读笔记:p41-p49
一、技术总结1.peer-to-peer(P2P)(1)定义P2PisAmodeof
distributed
computinginwhichallnodesactasbothclientsofothernodesandserverstoothernodes
codists
·
2025-02-19 12:35
读书笔记
操作系统
OS
python
采用分布式部署deepseek
特别地,对于分布式训练,还需要安装torch.
distributed
或者类似的库支持,例如Horo
慧香一格
·
2025-02-19 02:14
AI
学习
分布式
deepseek
Git 深度解析 —— 从基础到进阶
目录1.Git基础概念1.1版本控制(VersionControl)1.2分布式版本控制(
Distributed
VersionControl)1.3核心概念1.4Git工作流程2.Git常用命令2.1初始化仓库
Exhausted、
·
2025-02-19 01:34
git
elasticsearch
大数据
搜索引擎
git
Java中的分布式(概念说明)
分布式系统(
Distributed
System):由多台服务器(或节点)协同工作,对外提供一个整体服务。
阿乾之铭
·
2025-02-18 21:57
java
分布式
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他