distribute

PyTorch深度学习实战（26）—— PyTorch与Multi-GPU

当拥有多块GPU时，可以利用分布式计算（DistributedComputation）与并行计算（ParallelComputation）的方式加速网络的训练过程。
shangjg3·2024-08-30 12:10

PyTorch深度学习实战（27）—— PyTorch分布式训练

其中1.1将结合MPI介绍分布式训练的基本流程，1.2与1.3将分别介绍如何使用torch.distributed以及Horovod进行神经网络的分布式训练。
shangjg3·2024-08-30 07:37

数仓之TABLESAMPLE采样

distributeby+sortby，先分组再排序。orderByselect*fromuserinfo
Luckyforever%-·2024-08-29 00:39

当服务器遭受攻击怎么办？

互联网快速发展，各种网络攻击花样繁多，特别是DDoS攻击，DDoS是英文DistributedDenialofService的缩写，意即“分布式拒绝服务”，让人防不胜防，而避免服务器遭受DDoS攻击的最好方式就是接入高防
qq_2383525702·2024-08-28 01:08

【赵渝强老师】Spark中的RDD

  RDD（ResilientDistributedDataset）叫做弹性分布式数据集，它是Spark中最基本、也是最重要的的数据模型。
赵渝强老师·2024-08-26 11:52

011、架构_配置文件_数据节点(dbagent.ini)

*[redistribute]段，配置DBAgent运行时重分布参数*[log]段，配置DBAgent运行时日志级别参数*[alarm]段，配置DBAgent运行时告警参数*[monitor]段，配置DBAgent
数哥·2024-08-26 06:51

HDFS的编程

一、HDFS原理HDFS（HadoopDistributedFileSystem）是hadoop生态系统的一个重要组成部分，是hadoop中的的存储组件，在整个Hadoop中的地位非同一般，是最基础的一部分
卍king卐然·2024-08-25 07:02

深入解析：Objective-C中的NSDistributedNotificationCenter分布式通知机制

标题：深入解析：Objective-C中的NSDistributedNotificationCenter分布式通知机制在Objective-C的世界中，NSDistributedNotificationCenter
2401_85743969·2024-08-24 05:16

探索分布式定时任务的新境界：Dcron - 轻盈而稳健的守护者

探索分布式定时任务的新境界：Dcron-轻盈而稳健的守护者dcron轻量分布式定时任务库alightweightdistributedjobschedulerlibrary项目地址:https://gitcode.com
邬稳研Beneficient·2024-08-23 04:43

链路追踪及其常用工具

简介链路追踪（distributedtracing）是指通过记录分布式系统中各个组件之间的调用和传输信息的过程，来跟踪和分析请求在系统中的运行情况和性能问题的技术。
沉墨的夜·2024-08-23 02:31

-bash: sqlplus: command not found

spm=1001.2101.3001.6661.1&utm_medium=distribute.pc_relevant_t0.none-task-blog-2%7Edefault%7ECTRLIST%7ERate
michaelxwang·2024-08-22 09:16

leetcode -1103. 分糖果 II(python)

classSolution:defdistributeCandies(self,candies:int,num_people:int)->List[int]:ifnotcandies:return[]res
bo.qiu_xbw·2024-08-22 09:18

Spark的数据结构——RDD

RDD的5个特征下面来说一下RDD这东西，它是ResilientDistributedDatasets的简写。咱们来看看RDD在源码的解释。
bluedraam_pp·2024-03-14 08:32

HDFS

（一）HDFS简介及其基本概念  HDFS（HadoopDistributedFileSystem）是hadoop生态系统的一个重要组成部分，是hadoop中的的存储组件，在整个Hadoop中的地位非同一般
weixin_51987187·2024-03-12 14:32

THE WORLD BITCOIN CREATED

SatoshiNakamotopublishedapaperabouttheworld'sfirstblockchain.Hewantedtoprovidadencentralizeddigtalcurrency,whichiscalledBitcoin.Everytransferisinthedistributedledger
辣么大大大大·2024-03-08 23:18

VMware负载均衡特性以及相关配置

虽然DRS(DistributedResourceScheduler)和HA(HighAvailability)的适用场景各不相同，但是它们能够协同工作，以实现虚拟化环境的负载均衡。
ducode·2024-02-29 11:49

分布式匹配服

背景分布式匹配服（Distributedmatchmakingserver）是指将游戏的匹配功能分布到多台服务器上，并采用分布式架构实现的服务。
littleschemer·2024-02-28 08:48

ClickHouse表引擎

表引擎在ClickHouse中决定了：数据存储和读取的位置、支持哪些查询方式、能否并发式访问数据、能不能使用索引、是否可以执行多线程请求、数据复制使用的参数，其中MergeTree和Distributed
王百万_·2024-02-27 11:21

Zookeeper实现分布式锁

原生Zookeeper实现分布式锁案例编写DistributedLock实现分布式锁的简易写法。上面配置zookee
正在绘制中·2024-02-25 23:35

Doris ——SQL原理解析

SQL解析简介2.1词法分析2.2语法分析2.3逻辑计划2.4物理计划三、DorisSQL解析的总体架构四、Parse阶段五、Analyze阶段六、SinglePlan阶段（生成单机逻辑Plan阶段）七、DistributedPlan
爱吃辣条byte·2024-02-20 22:14

java 高并发框架（Akka）

utm_medium=distribute.pc_relevant_t0.none-task-blog-OPENSEARCH-1.nonecase&depth
码农-阿杰·2024-02-20 13:00

文件服务器MinIO的下载与安装

文件服务器虚拟机的创建详见：http://t.csdn.cn/ZF57j1、Win10系统1.下载MinIOMinIO中文官网：http://docs.minio.org.cn/docs/master/distributed-minio-quickstart-guide
我是聂可·2024-02-20 11:17

HarmonyOS开发篇—数据管理（分布式数据服务）

分布式数据服务概述分布式数据服务（DistributedDataService，DDS）为应用程序提供不同设备间数据库数据分布式的能力。通过调用分布式数据接口，应用程序将数据保存到分布式数据库中。
OpenHarmony_小贾·2024-02-20 08:41

【PyTorch][chapter 16][李宏毅深度学习][Neighbor Embedding][t-SNE]

前言：前面LLE讲了两个点在高维空间距离相近，通过降维后也要保持这种关系但是如果两个点在高维空间距离很远（不属于K邻近）,降维后有可能叠加在一起了.t-SNE(t-DistributedStochasticNeighborEmbedding
明朝百晓生·2024-02-20 07:33

论文中的简写字符含义--个人总结

independentandidenticallydistributed(i.i.d.)独立同分布
April_426c·2024-02-19 23:35

一文看懂YOLO v1

ops_request_misc=&request_id=&biz_id=102&utm_term=YOLO&utm_medium=distribute.pc_search_result.none-task-blog
AsherQ·2024-02-19 12:34

【2019-04-28】Hadoop分布式文件系统

Hadoop自带HDFS(hadoopdistributefilesystem)。HDFS默认数据块128M。
BigBigFlower·2024-02-19 11:56

Flink介绍

Flink介绍1.简介ApacheFlinkisaframeworkanddistributedprocessingengineforstatefulcomputationsoverunboundedandboundeddatastreams.Flinkhasbeendesignedtoruninallcommonclusterenvironments
·2024-02-19 10:08

Hive Distribute by 应用之动态分区小文件过多问题优化

目录0问题现象及原因分析1问题解决解决办法2由以上问题引出的问题3思考4小结0问题现象及原因分析现象：[Error20004]:Fatalerroroccurredwhennodetriedtocreatetoomanydynamicpartitions.Themaximumnumberofdynamicpartitionsiscontrolledbyhive.exec.max.dynamic.p
莫叫石榴姐·2024-02-15 10:58

Hive——动态分区导致的小文件问题

目录0问题现象1问题解决解决方案一：调整动态分区数方案一弊端：小文件剧增解决方案二：distributeby方案二弊端：数据倾斜解决方案三：distributeby命令2思考3小结0问题现象现象：报错errorr
爱吃辣条byte·2024-02-15 10:25

排序的区别

distributeby按照指定的字段对数据进行划分输出到不同的reduc
incover·2024-02-15 01:06

HDFS的超级用户

一.解释原因HDFS(HadoopDistributedFileSystem)和linux文件系统管理一样，也是存在权限控制的。
重剑DS·2024-02-14 21:41

区块链互操作协议

1.引言AlexeiZamyatin等人2019年论文SoK:CommunicationAcrossDistributedLedgers。
mutourend·2024-02-14 16:25

学习总结 - swift适配器 为 Hadoop 的存储层增加对 OpenStack Swift 的支持

虽然文档内所涉及的版本有点旧，但内容很精彩，值得推荐背景在Hadoop中有一个抽象文件系统的概念，它有多个不同的子类实现，由DistributedFileSystem类代表的HDFS便是其中之一。
天地不仁以万物为刍狗·2024-02-14 07:37

Hive的排序——order by 、sort by、distribute by 、cluster by

Hive中的排序通常涉及到orderby、sortby、distributeby、clusterby一、语法selectcolumn1,column2,...fromtable[where条件][groupbycolumn
爱吃辣条byte·2024-02-14 06:42

论文阅读-Pegasus：通过网络内一致性目录容忍分布式存储中的偏斜工作负载

论文名称：Pegasus:ToleratingSkewedWorkloadsinDistributedStoragewithIn-NetworkCoherenceDirectories摘要高性能分布式存储系统面临着由于偏斜和动态工作负载引起的负载不平衡的挑战
向来痴_·2024-02-14 06:10

集群内的原理

https://www.elastic.co/guide/cn/elasticsearch/guide/current/distributed-cluster.html
放开那个BUG·2024-02-13 12:13

工业制造：分布式控制系统（DCS），一文掌握。

一、什么是DCS在工业制造领域，DCS是分布式控制系统（DistributedControlSystem）的缩写。
大千UI工场·2024-02-12 22:48

GFS分布式文件系统

、弹性卷管理3.5、基于标准协议四、GlusterFS术语五、GlusterFS构成六、GlusterFS的工作流程理解：七、弹性HASH算法弹性HASH算法优点八、GFS支持七种卷8.1、分布式卷（Distributevolu
IT.cat·2024-02-12 14:56

Glusterfs分布式存储

GlusterFS的工作流程1、工作流程2、弹性HASH算法六、GlusterFS常用分布式简介1、分布式卷2、条带卷（Stripevolume）3、复制卷（Replicavolume）4、分布式条带卷（DistributeStripevolume
忙碌滴比特流·2024-02-12 14:55

【ug572】UltraScale体系结构时钟资源手册节选（一）

TheUltraScalearchitectureclockingresourcesmanagecomplexandsimpleclockingrequirementswithdedicatedglobalclocksdistributedonclockroutingandclockdistributionresources.Theclockmanagementtiles
wjh776a68·2024-02-12 11:58

微服务监控 - Jaeger 简介

原文：https://makeoptim.com/distributed-tracing/jaegerJaeger特性架构SpanTrace组件客户端库（clientlibraries）代理（Agent
CatchZeng·2024-02-12 07:26

zookeeper 无法启动

查看服务状态[root@VM-centosinstall]#systemctlstatuszookeeper.service●zookeeper.service-CoordinationservicefordistributedapplicationsLoaded
丿|一口亅皓桀·2024-02-11 04:46

Amazon SNS和Amazon SQS有什么区别？

#1楼参考：https://stackoom.com/question/vP6j/Amazon-SNS和Amazon-SQS有什么区别#2楼SNSisadistributedpublish-subscribesystem.SNS
asdfgh0077·2024-02-11 04:40

Python爬虫开源项目代码（爬取微信、淘宝、豆瓣、知乎、新浪微博、QQ、去哪网 等等）...

DouBanSpider[2]–豆瓣读书爬虫2.3、zhihu_spider[3]–知乎爬虫2.4、bilibili-user[4]–Bilibili用户爬虫2.5、SinaSpider[5]–新浪微博爬虫2.6、distribute_crawler
lyc2016012170·2024-02-10 00:30

Git Tutorial

OverviewgitconceptshandsondemoworkflowGitConceptGitisafreeandopensourcedistributedversioncontrolsystemdesignedtohandleeverythingfromsmalltoverylargeprojectswithspeedandefficiency.Keywordsdistributedve
玩家翁伟·2024-02-10 00:01

Spring Cloud Sleuth/Zipkin分布式链路追踪

https://spring.io/projects/spring-cloud-sleuthSpringCloudSleuthprovidesSpringBootauto-configurationfordistributedtracing.SleuthMaven
kaka_e7b4·2024-02-09 18:10

diffusers单机多卡推理（全网首发）

DistributedInferencewithAccelerate好运的是在Accelerate说明文档中我找到了下面的文章，使用init_empty_weights在加载模型时不加载权重，loa
半度、·2024-02-09 15:44

【转载】PoS Explanation

the-missing-explanation-of-proof-of-stake-versionIneverycryptocurrencytheremustbesomeconsensusmechanismwhichkeepstheentiredistributednetworkinsync.WhenBitcoi
自如致知·2024-02-09 12:42

常用的文件系统、存储类型小整理

最近接触到了五花八门的文件系统、存储类型，名词听得头大，趁假期整理学习一番~名称OSSFastDFSJuiceFSCIFSCephFSEFSNFS全称ObjectStorageService(对象存储服务)FastDistributedFileSystem
Hehuyi_In·2024-02-09 06:16
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他