【Distributed】

随时随地SaaS ：设计分布式多租户架构

AmazonWebServicesre:Invent2023,AmazonWebServicesSASFactory,RemoteApplicationResources,Multi-TenantArchitecture,DistributedDataStores
李白的好朋友·2023-12-15 19:50

Pytorch:解决报错 No module named ‘torch.distributed.run‘

分布式训练程序时发生了以下报错：Traceback(mostrecentcalllast):File"",line1,inModuleNotFoundError:Nomodulenamed'torch.distributed.run
道纪书生·2023-12-15 14:09

高性能与并行计算领域一些期刊与会议及资料阅读列表

IEEEtransactionsonparallelanddistributedsystems(TPDS)主页：https://ieeexplore.ieee.org/xpl/RecentIssue.jsp
holyprince·2023-12-15 11:09

如何计算近似纳什均衡_在普适边缘计算环境中的多代理模仿学习：一种分散计算卸载算法...

Multi-AgentImitationLearningforPervasiveEdgeComputing:ADecentralizedComputationOffloadingAlgorithm.IEEETransactionsonParallelandDistributedSystems
weixin_39697096·2023-12-15 11:06

re:Invent 2023 | 简化、优化和增强亚马逊云科技网络管理

关键字:[AmazonWebServicesre:Invent2023,Aviatrix,NetworkVisibility,DistributedFirewall,Multi-CloudSecurity
李白的好朋友·2023-12-15 10:56

torch.distributed.init_process_group()详细说明(RANK/WORLD_SIZE)

文章目录前言一、torch.distributed.init_process_group函数定义二、RANK、WORLD_SIZE和LOCAL_RANK1、RANK说明2、WORLD_SIZE说明3、LOCAL_RANK
tangjunjun-owen·2023-12-15 01:10

NLP-词向量

一个词对应一个编号缺点：维数灾难、词汇鸿沟（不能从编号上看出两个词是够存在某种关系，如同义词、反义词）DistributedRepresent
Rockelbel·2023-12-14 18:29

RPC

几种框架6种微服务RPC框架1、常见的分布式应用架构风格：从架构风格的抽象高度来看，常见的分布式应用架构风格有三种：1、分布式对象（DistributedObjects，简称DO）–架构实例有CORBA
行走的歌·2023-12-14 17:46

微服务学习二

1、DIstributedTransaction分布式事务是指单个事件导致两个或多个不能以原子方式提交的单独数据的突变的任何情况，在微服务的世界中，它变得更加复杂，因为每个服务都是一个工作单元，并且大多数时候多个服务必须协同工作才能使业务成功
CopyLower·2023-12-14 17:35

解决react启动服务时source-map-loader插件报错找不到源文件“index.ts“的源映射文件

webpack5:Failedtoparsesourcemapfrom“**********”如下图所示:Thesourcemapfileslinkstothesrc/-folderthatisnotdistributed
kuilaurence·2023-12-14 17:34

HarmonyOS分布式文件系统开发指导

分布式文件系统概述分布式文件系统（hmdfs，HarmonyOSDistributedFileSystem）提供跨设备的文件访问能力，适用于如下场景：●两台设备组网，用户可以利用一台设备上的编辑软件编辑另外一台设备上的文档
Android小贾·2023-12-14 15:02

spark rdd和dataframe的区别，结合底层逻辑

在ApacheSpark中，RDD（ResilientDistributedDataset）和DataFrame是处理数据的两种不同的抽象。
三水青一人尤·2023-12-14 12:29

nacos不能将服务注册进去

dometadataoperationfailed;caused:com.alibaba.nacos.consistency.exception.ConsistencyException:com.alibaba.nacos.core.distributed.raft.exception.NoLeaderException
乐神来了·2023-12-07 01:34

基于意外流行的自适应模因算法求解分布式柔性作业车间调度问题——付源代码和论文

实在是太忙了，终于闲下来更新一下CSDN来介绍自己的工作《SurprisinglyPopular-BasedAdaptiveMemeticAlgorithmforEnergy-EfficientDistributedFlexibleJobShopScheduling
吾心即宇宙-THU·2023-12-06 23:26

Neural Rate Estimator and Unsupervised Learning for Efficient Distributed Image Analytics in Split-

基于MECE原则，我们给出四个分类标准：1.压缩方法。该标准区分了有损、无损和特征压缩方法。有损压缩：有损压缩技术将压缩效率放在图像质量之上，允许更高的压缩比，但会在解压缩图像中引入明显的artifacts。无损压缩：无损压缩技术保留原始图像质量，不引入任何artifacts，但代价是压缩比较低。特征压缩：特征压缩技术专注于压缩深度学习模型从图像中提取的间接特征࿰
结构化文摘·2023-12-06 12:06

以太坊源码（3）——节点发现协议，KAD协议

ethereum协议3、P2P节点发现（1）分布式哈希表（DHT）DHT全称叫分布式哈希表(DistributedHashTable)，是一种分布式存储方法。
Jarvist·2023-12-06 10:15

HBase 伪分布式集群模式安装md

HBase伪分布式集群模式安装（Pseudo-Distributed）1.解压hadoop到/usr/local/src路径下，改名为hbasetar-zxvf/opt/soft/hbase…tar.gz-C
会java的怪蜀黍·2023-12-06 07:52

【读书笔记】《大数据技术体系详解：原理、架构与实践》03.分布式文件系统

这些文件形式的数据具有价值高、数据大、流式产生等特点，需要一个分布式文件系统存储它们，该文件系统应具有良好的容错性、扩展性和易用的API，而HDFS（HadoopDistributedFileSystem
粥一样温柔·2023-12-06 05:40

go 爬虫 todo

GitHub-andeya/pholcus:Pholcusisadistributedhigh-concurrencycrawlersoftwarewritteninpuregolang
Go的神秘男朋友·2023-12-06 04:58

【数据中台】开源项目（4）-BitSail

开源地址：GitHub-bytedance/bitsail:BitSailisadistributedhigh-performancedataintegratio
码农丁丁·2023-12-05 22:55

【Flink从入门到精通 01】流式处理概念

01Flink是什么在讲流式处理的通用概念之前，我们先引用Flink官网的一段话：ApacheFlinkisaframeworkanddistributedproces
编程理想国·2023-12-05 21:30

Apache Spark

Spark的基本概念包括：ResilientDistributedDatasets（RDDs）：RDD是Spark的核心概念，代表一个可分区的、不可变的数据
m0_64180190·2023-12-05 10:24

Hadoop

HDFS（HadoopDistributedFil
编织幻境的妖·2023-12-05 08:41

Hadoop

Hadoop的基本架构包括以下几个核心组件：HDFS（HadoopDistributedFileSystem）：它是一个高度容错性的分布式文件系统，能提供高吞吐量的数据访问，非常适合大规模数据集
编织幻境的妖·2023-12-05 06:31

『PyTorch学习笔记』分布式深度学习训练中的数据并行(DP/DDP) VS 模型并行

中的数据加载器(Dataloader)三.数据并行3.1.DP(DataParallel)的基本原理3.1.1.从流程上理解3.1.2.从模式角度理解3.1.3.从操作系统角度看3.1.4.低效率3.2.DDP(DistributedDataParallel
AI新视界·2023-12-04 16:15

大数据实训笔记3：hdfs

HDFS（HadoopDistributedFileSystem）是一个文件系统，用于存储文件，通过目录树来定位文件。它是分布式的，由很多服务器联合起来实现其功能，集群中的服务器有各自的角色。
Roslin_v·2023-12-04 15:39

Hadoop 1 ~ Hadoop 3 的发展史

Hadoop1的核心设计就是HDFS(HadoopDistributedFileSystem)和Map
大数据狂人·2023-12-03 14:34

java nio doug_Scalable IO in Java -Doug Lea

【实例简介】ScalableIOinJava-DougLea描述javanio和reactor设计模式之间的关系NetworkservicesWebservicesDistributedobjects.etcMosthavesamebasicstructureReadrequestDecoderequestProcessserviceEncoderepllySendreplyButdifferin
沈仙君·2023-12-03 11:50

YOLOv7+姿态估计Pose+tensort部署加速

训练命令如下：python-mtorch.distributed.launch--nproc_per_node8--master_port952
阿利同学·2023-12-03 00:39

记录读的几篇文章

ProactiveDeploymentofChain-basedVNFBackupattheEdgeusingOnlineBanditLearning.In2021IEEE41stInternationalConferenceonDistributedComputingSystems
Mr.Yi·2023-12-02 14:04

Kafka详解（中）——Kafka客户端操作

3-1shell列举kafka安装目录下的bin目录包含了很多运维可操作的shell脚本，列举如下：脚本名称用途描述connect-distributed.sh连接kafka集群模式connect-standalone.sh
98seven·2023-12-02 13:30

Clickhouse集群的搭建方法及搭建过程中报错的解决方法

getting-started/tutorial#cluster-deploymenthttps://clickhouse.com/docs/en/engines/table-engines/special/distributedhttps
lusklusklusk·2023-12-02 08:06

图计算和图挖掘的概述

文章目录IntroductionSubgraphEnumeration（子图枚举）SingleCPUDistributedTechniqueAPracticalGuideCohesiveSubgraphs
malo12·2023-12-02 07:06

论文阅读：Distributed Initialization for VVIRO with Position-Unknown UWB Network

前言DistributedInitializationforVisual-Inertial-RangingOdometrywithPosition-UnknownUWBNetwork这篇论文是发表在ICRA2023
独孤西·2023-12-01 11:25

test

importargparseimportosimportos.pathasospimportshutilimporttempfileimportmmcvimporttorchimporttorch.distributedasdistfrommmcv.parallelimportMMDataParallel
shishengle1024·2023-12-01 09:24

mmdetection 常用命令

/tool/dist_train.pyconfigs/***.py4多机多卡：机器1:python-mtorch.distributed.launch--nproc_per_node=8--nnodes
NineDays66·2023-12-01 05:54

慢调用链诊断利器 - ARMS 代码热点

可观测技术背景从最早的Google发表的一篇名为《Dapper,aLarge-ScaleDistributedSystemsTracingInfrastructure》的论文开始，到后来以：Metrics
阿里云云栖号·2023-12-01 00:11

Hadoop之HDFS

2）定义：HDFS（HadoopDistributedFileSystem），它是一个文件系统，用于存储文件，通过目录树来定位
小猫旺财·2023-11-30 20:11

【Hadoop】分布式文件系统 HDFS

数据复制复制的实现原理三、HDFS的特点四、图解HDFS存储原理1.写过程2.读过程3.HDFS故障类型和其检测方法故障类型和其检测方法读写故障的处理DataNode故障处理副本布局策略一、介绍HDFS（HadoopDistributedFileSystem
和瑚·2023-11-30 20:06

分布式机器学习、联邦学习、多智能体的区别和联系——一文进行详细解释

1.1分布式机器学习介绍分布式机器学习(distributedmachinelearning)，是指利用多个计算/任务节点（Worker）协同训练一个全局的机器学习/深度学习模型（由主节点(Master
别出BUG求求了·2023-11-30 18:28

Hyper-v虚拟机Hadoop集群搭建

Hadoop实现了一个分布式文件系统（HadoopDistributedFileSystem），简称HDFS。
真.电脑人·2023-11-30 16:16

大数据之 Hadoop

hadoop主要解决：海量数据的存储和海量数据的分析计算hadoop发展历史Google是hadoop的思想之源（Google在大数据方面的三篇论文）2006年3月，Map-reduce和NutchDistributedFileSystem
小裕哥略帅·2023-11-30 13:41

01数仓平台 Hadoop介绍与安装

HDFS架构概述HadoopDistributedFileSystem，简称HDFS，是一个分布式文件系统。包含
kk_io·2023-11-30 13:38

微服务监控 - 分布式追踪（Distributed Tracing）

原文：https://makeoptim.com/distributed-tracing/open-tracing分布式追踪追踪（Trace）跨度（Span）跨度上下文（SpanContext）OpenTracing
CatchZeng·2023-11-30 11:40

Hadoop-HDFS角色工作机制

一、角色职责介绍  HadoopDistributedFileSystem(HDFS,分布式文件系统):HDFS是Hadoop应用程序使用分布式存储，HDFS集群主要由管理文件系统元数据的NameNode
H.S.T不想卷·2023-11-30 10:33

Flink 源码之 Distributed Cache

Flink源码分析系列文档目录请点击：Flink源码分析系列文档目录背景Flink分布式缓存(DistributedCache)可用于向作业的各个TaskManager分发文件。
AlienPaul·2023-11-30 10:14

大数据技术之Hadoop（HDFS）

2.HDFS定义HDFS（HadoopDistributedFileSystem），它是一个文件系统，用于存储文件，
江苏彭与晏·2023-11-30 10:23

大数据-hadoop-hdfs

Hadoop分布式文件系统(HDFS)是指被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统（DistributedFileSystem）。
像影子追着光梦游_·2023-11-30 09:48

Windows安装EMQX（搭建MQTT服务）

Erlang/OTP是出色的软实时(Soft-Realtime)、低延时(Low-Latency)、分布式(Distributed)的语言平台。MQTT是轻量的(Lightweight)、发布订阅模
sternschnapper·2023-11-30 09:36

spark写出分布式的训练算法_Spark分布式计算执行模型

Spark中使用了RDD(ResilientDistributedDatasets,弹性分布式数据集)抽象分布式计算，即使用RDD以及对应的transform/action等操作来执行分布式计
weixin_39965673·2023-11-30 02:01
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他