并行计算

Flink核心概念

这样一来，一个算子任务就被拆分成了多个并行的“子任务”（subtasks），再将它们分发到不同节点，就真正实现了并行计算。
Stephen6Yang·2023-12-15 03:06

ubuntu22.04 安装cuda

CUDA（ComputeUnifiedDeviceArchitecture）是由NVIDIA开发的一种并行计算平台和编程模型。它允许开发者利用NVIDIA的GPU（图形处理单元）进行高效的计算处理。
MonkeyKing_sunyuhua·2023-12-14 19:52

深度学习——第3章 Python程序设计语言（3.8 深度学习框架PyTorch）

3.8深度学习框架PyTorch目录1.PyTorch简介2.PyTorch的安装3.PyTorch相关资源4.张量5.自动求导6.并行计算简介7.AI硬件加速设备PyTorch简介PyTorch是由MetaAI
曲入冥·2023-12-14 16:51

batch_size太大和太小的优缺点分别是什么？

批处理大小过大：优点：训练速度较快：大批次可以充分利用硬件加速器（如GPU）的并行计算能力，加速训练过程。确保收敛性：大批次可以更好地平均梯度，减少梯度更新的噪声，可能有助于收敛到较好的局部最小值。
BugMaker2002·2023-12-06 23:36

浪潮信息KeyarchOS的飞跃之路

传统操作系统在大规模数据处理、高性能计算和人工智能应用方面面临着一些瓶颈问题，包括存储和访问效率、数据传输和通信效率、并行计算性能等等问题。
YoLo♪·2023-12-06 22:34

CUDA简介, 配置和运行第一个CUDA程序（Windows和Linux）

CUDA简介CUDA（ComputeUnifiedDeviceArchitecture）是由NVIDIA开发的一种通用并行计算架构。
Mineba·2023-12-05 16:26

C++多线程编程（第四章 案例1:base16编码，C++11和C++17 多核并行计算样例）

目录4.1手动实现多核base16编码4.1.1实现base16编码4.1.1.1编码16进制4.1.1.2反解码16进制4.1.2无多线程代码4.1.3C++11多线程代码4.1.4C++17多线程并发4.1.5所有测试代码汇总4.1手动实现多核base16编码4.1.1实现base16编码二进制转换为字符串一个字节8位，拆分为两个4位字节（最大值16）拆分后的字节映射到0123456789ab
鸿儒517·2023-12-05 13:34

超参数设定及训练技巧

一、网络超参数的设定1.输入数据像素大小的设定：为便于GPU并行计算，一般将图像大小设置为到2的次幂。2.卷积层参数的设定：（1）卷积核大小一般使用1*1，3*3或5*5。
星辰同学wwq·2023-12-05 08:16

【MPI、OpenMP】并行快速排序(C语言)

本文记录了使用MPI与OpenMP两种并行计算方法实现快速排序算法，题目是专业实验课上老师给的，主要分享一下自己的做法，希望大家不吝赐教（使用的语言是C语言，有例子+图阐述原理，代码注释很全）。
谛凌·2023-12-05 07:27

电磁建模的分布式并行计算技术

我们的技术将分布式并行计算技术纳入神经网络建模。它使用消息传递接口（MPI）并行生成数据和训练神经网络模型。一个例子表明，我们的技术
不爱吃香菇的干饭少年·2023-12-05 06:46

电磁优化的并行空间映射方法

本文提出的多点代理模型训练方法本质上适合于并行计算，并通过并行计算实现。这包括并行的多个精细模型评估和使用并行算法的多点代理训练。与标准模型相比，该方法
不爱吃香菇的干饭少年·2023-12-05 06:16

pytorch使用GPU炼丹笔记

shell脚本中设定：1.2python代码中设定：2.使用函数set_device使用多GPUDP方法DDP方法需要先初始化数据集的处理模型初始化单节点多GPU分布式训练实验结果原理：通过依靠GPU的并行计算能力
赤坂·龙之介·2023-12-04 16:45

oneApi实现并⾏排序算法

零、OneApi简介oneAPI是由英特尔推出的一个开放、统一的编程模型和工具集合，旨在简化跨不同硬件架构的并行计算。
think-weige·2023-12-04 12:51

Linux系统配置深度学习环境之cudnn安装

这些算法和函数充分利用了NVIDIAGPU的并行计算能力，提供了显著的性能加速。cuDNN不仅可以用于传统的深度学习框架（如Tenso
番茄小能手·2023-12-04 08:51

Ubuntu系统配置深度学习环境之nvidia显卡驱动和cuda安装

CUDA是NVIDIA推出的一种并行计算平台和编程模型。它充分利用NVIDIA显卡的并行处理能力，使开发人员能够通过编写并行计算任务来加速各种计算工作。CUDA提供
番茄小能手·2023-12-04 08:20

深度学习记录--初识向量化

回归损失函数时，在代码实现时，讨论了for循环：过多的for循环会拖慢计算的速度(尤其当数据量很大时)因此，为了加快计算，向量化是一种手段运用python的numpy库，我们可以使用库函数，这些函数一般可以并行计算
蹲家宅宅·2023-12-03 20:09

GPU比CPU更适合并行计算

1.前言并行计算，是相对于串行计算来说的。它是一种一次可执行多个指令的算法，目的是提高计算速度，及通过扩大问题求解规模，解决大型而复杂的计算问题。
小铭好菜·2023-12-03 16:03

自己动手写 chatgpt: Attention 机制的原理与实现

这种机制能让神经网络更有效的从语言中抽取识别其内含的规律，同时它支持多路并行运算，因此相比于原来的自然语言处理算法，它能够通过并发的方式将训练的速度提升几百倍，于是海量的训练数据，加上超大规模的算力，并利用超大规模的并行计算来推进网络的训练成为可能
tyler_download·2023-12-03 00:22

【Java 并发编程】进程线程、lock、设计模式、线程池...

并发编程并发编程多线程的入门类和接口线程组和线程优先级线程的状态及主要转化方法线程间的通信重排序和happens-beforevolatilesynchronized与锁CAS与原子操作AQS计划任务Stream并行计算原理
東方幻想郷·2023-12-01 22:38

Windows10+VisualStudio2019配置MPI 附在VS中直接运行MPI程序的方法

目录前言一、下载并安装MPI二、配置VisualStudio2019三、编写代码并运行（1）代码（2）使用VS直接运行MPI程序前言大三上的时候学校里开了一门并行计算的基础课，学到了挺多东西，当时写了挺多文档
JackFishxxx·2023-12-01 17:55

论文学习-Attention Is All You Need

而Attention机制可以观察到句子中所有的信息，不受距离影响，而且可以并行计算。参考资料：Youtubevideo:李沐老师https://www.youtube.com/watch?
老叭美食家·2023-12-01 12:02

jetson tx2部署yolov5

接下来，您需要安装以下软件：NVIDIACUDA：这是NVIDIA提供的并行计算框架，是运行YOLOv5所需的。cuDNN：这是NVIDIA的深度神经网络库，是CUDA的一个扩展。
Msura·2023-11-30 22:54

【并行计算机体系结构】（西安交通大学研究生课程）1 - 6章 填空题汇总

从体系结构的技术角度看，构建并行计算系统的三个途径是_______、、。基于网络的高性能计算环境
软件柠檬·2023-11-30 19:06

SZU 【并行处理与体系结构】

并行计算在内部互连的处理器中已成为主要形式，而计算机网络的发展则引入了一种新类型的并行性，即联网自治计算机。
Du1in9·2023-11-30 13:02

使用开源PolarDB和imgsmlr进行高效的图片存储和相似度搜索

PolarDB的云原生架构提供高性价比的数据存储、可扩展的灵活性、高效的并行计算能力以及快速的数据搜索和处理能力。PolarDB通过结合计算算法，挖掘业务数据的价值，将其转化为生产力。
九河云·2023-11-30 12:24

使用Ray轻松进行Python分布式计算

1.并行计算与分布式计算的区别并行计算在现代计算中非常有用，几乎是必需的，目的是实现最大性能。
python慕遥·2023-11-30 03:51

Metal语法规范

Clang和LLVM进行编译处理，编译器对于在GPU上的代码执行效率有更好的控制Metal基于C++11.0语言设计的，在C++基础上多了一些扩展和限制，主要用来编写在GPU上执行的图像渲染逻辑代码以及通用并行计算逻
windy_3c22·2023-11-29 17:54

TensorFlow

它支持数据流图的建立，将数据流图上的各个节点分配到CPU、GPU中进行计算，从而实现高效的并行计算。TensorFlow的主要使用场景是进行机器学习和深度学习的开发和部署。
m0_64180190·2023-11-29 15:56

Linux下基于MPI的hello程序设计

Linux下基于MPI的hello程序设计一、MPICH并行计算库安装实验环境部署创建SSH信任连接，实现免密钥互相连接node1安装MPICH3.4配置NFS注意(一定要先看)环境测试二、HELLOWORLD
黯然-·2023-11-29 11:53

从零到一，激活GPU的力量：使用TensorRT量化和CUDA并行编程

学习笔记前情提要：TensorRT模型优化与推理：从零到一，激活GPU的力量：使用TensorRT优化和执行深度学习模型，你的TensorRT入门指南本篇将会介绍TensorRT下的模型量化与CUDA并行计算编程的介绍
Xy丶Promise·2023-11-29 02:13

从零到一，激活GPU的力量：使用TensorRT优化和执行深度学习模型，你的TensorRT入门指南

TensorRT的主要目标是优化并行计算的使用，以充分利用NVIDIAGPU的计算能力。它适用于各种类型的深度学习模型，包括CNN（卷积神经网络）、RNN（循环神经网络）等。
Xy丶Promise·2023-11-29 02:12

深度学习神经网络加大batchsize训练速度降低的原因（GPT）

通常情况下，增大批量大小可以提高训练过程中的计算效率，因为可以利用并行计算的优势。
钰宸y·2023-11-28 15:46

.net面试题6

C#中的多线程通过使用Thread类、Task类、ThreadPool等机制实现，可以执行各种并发操作，如异步I/O、并行计算、异步等待等。
CrazyMax_zh·2023-11-28 14:39

Spark面试题集锦

是基于内存计算的分布式的大数据并行计算框架，可用于构建大型的、低延迟的数据分析应用程序。
猿界零零七·2023-11-28 09:53

Spark的部署与使用

1.1与Hadoop区别Spark与Hadoop中的MapReduce相似，都是用于进行并行计算的框架，二者根本差异是多个作业之间的数据通信问题:Spark的多个作业之间数据通信是基于内存，而Hadoop
Vic·Tory·2023-11-27 12:01

中南大学2021级云计算复习笔记

云计算是并行计算、分布式计算和网格计算的发展，或者说是这些计算机科学概念的商业实现并行计算：同时使用多种计算资源解决计算问题的过程分布式计算：将需要巨大计算能力的问
Molche·2023-11-27 10:00

GPU和CPU的联系和区别是什么，各自有什么特点，

2.并行计算：两者都能执行并行计算，但在不同程度上。GPU通常更适合大规模的并行计算，特别是图形处理和科学计算等领
喝凉白开都长肉的大胖子·2023-11-27 02:41

云计算中的并行计算技术分析

摘要本文阐述了并行计算和云计算的关系，简要回顾并行计算的历史，分析了并行计算的重要技术OpenMP、MPI和Erlang，研究了这些技术在中国电信的应用方法，并介绍了中国电信实施云计算、并行计算的指导思想
不想多说看代码·2023-11-26 15:34

人工智能-注意力机制之Transformer

值得注意的是，自注意力同时具有并行计算和最短的最大路径长度这两个优势。因此，使用自注意力来设计深度架构是很有吸引力的。
白云如幻·2023-11-26 09:42

cuda，cudnn完整卸载以前版本和安装其他版本

一.cudaCUDA®是NVIDIA发明了一种并行计算平台和编程模型®。通过利用图形处理单元（GPU）的功能，可以显着提高计算性能。
易冷cheng·2023-11-26 08:10

JAVA线程池详解（ThreadPoolExecutor）

使用多线程并行计算逐渐成为开发人员提升服务器性能的基本武器。如果你要成为一个好的工程师，还是得比较好地掌握这个知识，很多线上问题都是因为没有用好线程池导致的。
AugustShuai·2023-11-25 17:46

【音视频开发（四）】---RGB转YUV 颜色空间转换

而如果使用循环单纯用CPU转换是比较慢的，这里使用OpenCV来进行转换，OpenCV虽然也是用了CPU，但是他内部做了并行计算的优化是比较快的，例如NEON/SSE等。
jzen·2023-11-25 15:10

Spark是什么？以及它有哪些应用场景呢？

首先说说Spark的起源：Spark是UCBerkeleyAMPlab所开源的类HadoopMapReduce的通用的并行计算框架，Spark基于mapreduce算法实现的分布式计算，拥有HadoopMapReduce
陈影鸿在进步·2023-11-25 01:07

DAOS低时延与高性能RDMA网络

在大规模并行计算机集群中特别有用，比如分布式存储，超算中心。RDMA通过
大隐隐于野·2023-11-24 20:04

spark算子总结

spark算子总结RDD介绍rdd是（resilientdistributedataset）弹性分布式数据集代表一个不可变，可分区，里面的元素可并行计算的集合对rdd的改动，只能通过转换算子，转换成一个新的形态的
Cciccd·2023-11-24 07:28

Spark设计理念与基本架构

Spark是一个通用的并行计算框架。HadoopMapReduce的缺陷：对HDFS的频繁操作导致磁盘IO称为系统性能的瓶颈，因此只适用于离线数据处理。
whynotybb·2023-11-24 02:29

sparkRDD操作，转换算子和行动算子

RDD介绍在Spark中，RDD代表弹性分布式数据集（ResilientDistributedDataset），是一种可以并行计算的、不可变的分布式数据结构。
严同学正在努力·2023-11-23 12:02

为什么要用多线程？

实现并行计算：多线程可以同时执行多个任务，从而实现并行计算，提高程序的运行效率。提高CPU利用率：在多CPU系统中，使用多线程可以充分利用CPU资源，提高系统的运行效率。
人不走空·2023-11-23 07:48

极智开发 | 谈谈 cuda 线程束与内存模型

Cudathread组成block，block组成grid，形成嵌套网格状结构，目的是为了矩阵并行计算时，能对应矩阵位置。
极智视界·2023-11-23 03:51

并行与分布式计算 第8章 并行计算模型

文章目录并行与分布式计算第8章并行计算模型8.1并行算法基础8.1.1并行算法的定义8.1.2并行算法的分类8.1.3算法的复杂度8.2并行计算模型8.2.1PRAM(SIMD-SM)模型8.2.3BSP
一只大小菜·2023-11-22 16:27
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他