并行化

RWKV入门

主要参考资料B站视频《【项目原作解读】RWKVFoundation侯皓文：新型RNN模型RWKV，结合Transformer的并行化训练优势和RNN的高效推理》RWKV官网:https://www.rwkv.com
弱冠少年·2024-01-14 07:15

逻辑回归、深度学习简介、反向传播

LogisticRegression因其简单、可并行化、可解释强深受工业界喜爱。Logistic回归的本质是：假设数据服从这个分布，然后使用极大似然估计做参数的估计。
梦码城·2024-01-12 17:57

bash脚本并发执行

目录背景采用GNU的paralle程序并行化方法:{}&+wait缺点进程数可控的并行化方法:命名管道背景在Linux下运行作业时,经常会遇到以下情形:有大量作业需要运行,完成每个作业所需要的时间也不是很长
legend050709ComeON·2024-01-12 10:13

TCN 时序卷积网络 （temporal convolutional network）【因果卷积、空洞卷积】

TCN的优点：可并行化计算：TCN采用卷积操作，可以进行高效的并行
In 2029·2024-01-11 11:21

Meta的Fairy：快速并行化指令引导的视频到视频合成

每周跟踪AI热点新闻动向和震撼发展想要探索生成式人工智能的前沿进展吗？订阅我们的简报，深入解析最新的技术突破、实际应用案例和未来的趋势。与全球数同行一同，从行业内部的深度分析和实用指南中受益。不要错过这个机会，成为AI领域的领跑者。点击订阅，与未来同行！订阅：https://rengongzhineng.io/。Fairy模型的视频介绍：fairyFairy是一种简约而健壮的图像编辑diffusi
新加坡内哥谈技术·2024-01-10 18:24

java基础之Java8新特性-Stream(流)

与传统的循环迭代方式相比，流的代码更易读、更易于并行化处理，并且能够充分发挥多核处理器的优势。通过使用流，可以提高代码的可读性和可维护性，同时也能够更高效地处理大规模数据集合。S
mi9688·2024-01-10 15:53

开发人员指南从以太坊迁移到 Solana

它提供了一个并行化的基础设施，收费低且可预测。它直接解决了EVM的
0X码上链·2024-01-08 23:40

宏基因组序列无参考基因组装工具idba-ud的介绍及详细使用方法

idba-ud还具有高度并行化的特点，可以充分利用计算资源进行快速的基因组组装。idba
小果运维·2024-01-07 12:14

Netty 权威指南，万字长文带你深入理解 Netty

面向流和面向Buffer2.2.选择器2.3.IO和NIO的区别2.4.JDK原生NIO程序的问题三.Netty详解3.1.Netty的特点3.2.Netty的线程模型3.2.1.串行化处理模型3.2.2.并行化处理模型
流华追梦·2024-01-05 17:19

亿万级海量数据去重软方法

文章目录原理案例一需求：方法案例二需求：方法：参考原理在大数据分布式计算框架生态下，提升计算效率的方法是尽可能的把计算分布式话、并行化，避免单节点计算过载，把计算分摊到各个节点。
南风知我意丿·2024-01-03 16:49

DDP分布式训练的官方demo及相关知识

参考链接'''1.分布式训练：并行化，跨进程和跨集群的计算2.torch.distributed.init_process_group()来初始化进程组,需要指定worker的通信机制,一般为nccl(
Dreaming_of_you·2024-01-02 02:49

Python 全栈体系【四阶】（九）

逻辑回归因其简单、可并行化、可解释强而受到广泛应用。
柠檬小帽·2024-01-01 23:37

分布式训练通信NCCL之Ring-Allreduce详解

前言随着ChatGPT、文生图、多模态等模型的发展，海量的训练数据、超大规模的模型给深度学习带来了日益严峻的挑战，因此，经常需要使用多加速卡和多节点来并行化训练深度神经网络。
张小殊.·2023-12-26 14:42

Transformer 模型设计的灵感

以下是一些关于Transformer模型设计灵感的要点：对序列处理的重新思考：传统的序列到序列模型，如循环神经网络（RNN）和长短时记忆网络（LSTM），存在着难以并行化和难以捕捉长距离依赖的问题。
科学禅道·2023-12-24 17:50

使用Open3D实现3D激光雷达可视化：以自动驾驶的2DKITTI深度框架为例（下篇）

它具有优化的后端架构，可实现高效的并行化，非常适合处理复杂的3D几何形状和算法；逼真的3D场景建模和分析：该库提供了用于场景重建和曲面对齐的专用工具，这些工具是创
BFT白芙堂·2023-12-23 09:44

基于DeepSpeed对 llama2-7b的LORA精调

该框架包含四个技术亮点：用3D并行化实现万亿参数模型训练：DeepSpeed实现了三种并行方法的灵活组合，它们分别为ZeRO支持的数据并行，流水线并行和张量切片模型并行。
Charles_yy·2023-12-21 21:32

[实践总结] 典型的串行任务局部并行化处理案例:多任务并发获取航班信息

该例子是典型的串行任务局部并行化处理，用户在APP客户
张紫娃·2023-12-19 16:45

c++ 原子操作 赋值_C++11 多线程中原子类型与原子操作

原文链接：https://blog.csdn.net/K346K346/article/details/853454771.认识原子操作原子操作是在多线程程序中“最小的且不可并行化的”操作，意味着多个线程访问同一个资源时
weixin_39941262·2023-12-18 00:08

AV1编码器的优化策略和实践技巧

目录学习目标：学习内容：学习时间：学习产出：理解AV1编码器的原理和算法，掌握其核心优化思路和方法：掌握AV1编码器的性能评估方法，了解如何测试和优化AV1编码器的性能：学习AV1编码器的并行化技术和多线程优化
阿猫的故乡·2023-12-17 12:58

大作业：二分类并发解决方案

1.报告要求并行化提高运行速度突显cache友好对比实验对关键步骤描述算法2.初步草案选择实现语言。我选择了较为熟悉的python作为编程语言。
不存在的里皮·2023-12-17 02:42

Linux多线程--pthread

但是如果有了多个线程后，可以为每个线程分配一个任务，多个线程并发执行，将这些任务并行化。下面介绍的线程库函数是由POSIX标准定义的，称为"pthread"或"POSIX线程"。
A-sL1·2023-12-16 01:39

Chart 5 性能优化概述

文章目录前言5.1可移植性5.2优化梗概5.3OpenCL移植的初始评估5.4将CPU代码移植到OpenCLGPU5.5并行化GPU和CPU工作负载5.6瓶颈分析5.6.1识别瓶颈5.6.2解决瓶颈5.7API
半块方便面·2023-12-15 04:10

Java内存模型

Amdahl定律：通过系统中并行化与串行化的比重来描述多处理器系统能获得的运算加速能力。
未子涵·2023-12-05 17:46

CUDA简介——For循环并行化

1.引言前序博客：CUDA简介——基本概念CUDA简介——编程模式kernel相关语法定义为：kernel函数定义，与常规C函数定义类似。不同之处在于，有__global__关键字。为说明符，告诉编译器该函数应编译运行在device上，由device调用。kernel函数范围类型必须为void：kernel中计算的任何结果都存储在device内存中。传递给kernel操作的变量，必须为refere
mutourend·2023-12-04 23:11

CUDA简介——Grid和Block内Thread索引

1.引言前序博客：CUDA简介——基本概念CUDA简介——编程模式CUDA简介——For循环并行化ThreadIndex：每个Thread都有其threadindex。
mutourend·2023-12-04 23:11

CUDA简介——CUDA内存模式

1.引言前序博客：CUDA简介——基本概念CUDA简介——编程模式CUDA简介——For循环并行化CUDA简介——Grid和Block内Thread索引CUDA内存模式，采用分层设计，是CUDA程序与正常
mutourend·2023-12-04 23:11

CUDA简介——同步

1.引言前序博客：CUDA简介——基本概念CUDA简介——编程模式CUDA简介——For循环并行化CUDA简介——Grid和Block内Thread索引CUDA简介——CUDA内存模式本文重点关注Thread
mutourend·2023-12-04 23:39

【微软技术栈】数据并行和任务并行中的潜在缺陷

本文内容不要假定并行的速度始终更快避免写入共享内存位置避免过度并行化避免调用非线程安全方法限制调用线程安全方法注意线程关联问题在由Parallel.Invoke调用的委托中等待时请谨慎使用不要假定ForEach
吉特思米(gitusme)·2023-12-01 14:40

All About Interview - Day 2

根据个体学习器的生成方式，目前的集成学习方法大致分为两大类：即个体学习器之间存在强依赖关系、必须串行生成的序列化方法，以及个体学习器间不存在强依赖关系、可同时生成的并行化方法；前者的代表就是Boosting
认真学习的兔子·2023-11-29 21:37

JAVA-Stream流

Stream可以并行化操作，Stream的并行操作是依赖Java7中引入的Fork/Joi
子夜夏歌·2023-11-28 12:19

激光线提取

在做单线激光三维重建，和多线激光三维重建的时候都会设计到激光线提取算法的实现，如何保持高速和高精度是关键，最近优化了steger中心线提取算法，通过并行化实现在cpu版本可以做到2m,GPU版本可以做到
Clipp_Huang·2023-11-28 08:08

模拟疫情感染情况的并行化优化的元胞自动机及其代码

来源：http://worthpen.top/#/home/blog?blog=pot-blog3.md目录引言基于元胞自动机的病毒感染模型状态分类状态变化关系项目输入结果展示总人数为60000，初始感染数为100总人数为6000000，初始感染数为100引言元胞自动机(cellularautomata，CA)是一种时间、空间、状态都离散，空间相互作用和时间因果关系为局部的网格动力学模型，具有模拟
BoilingHotPot·2023-11-27 11:11

spark RDD 概述用法官方权威资料（建议收藏）

sparkRDD概述用法权威资料（建议收藏）文章目录sparkRDD概述用法权威资料（建议收藏）概述与Spark的链接初始化Spark使用Shell弹性分布式数据集（RDD）并行化集合外部数据集RDD操作基础知识将函数传递给
wang2leee·2023-11-23 21:17

Spark RDD、DataFrame和Dataset的区别和联系

RDD可以通过并行化的方式在集群中进行分布式计算，支持多种操作，如转换操作（如map、filter、join等）和行动操作（如count、collect、reduce等）。
阿君聊风控·2023-11-23 08:24

Elasticsearch：FMA 风格的向量相似度计算

作者：ChrisHegarty在Lucene9.7.0中，我们添加了利用SIMD指令执行向量相似性计算的数据并行化的支持。
Elastic 中国社区官方博客·2023-11-22 17:09

Biome-BGC生态系统模型与Python融合技术教程

第一模式Biome-BGC第二Linux应用实现批量创建文件、删除文件及文件夹并行化执行程序CDO工具应用使用cdo工具对netCDF文件进行合并筛选时间和变量，裁剪为小区域P
慢腾腾的小蜗牛·2023-11-17 10:43

增加并行测试的好处

并行化不是同时运行单个测试，而是
软件测试test·2023-11-17 08:43

Halcon set_system算子解析

Halcon版本：18.11目录Graphic:ImageProcessing:Parallelization:File:Directories:Other:参考文章：并行化信息：请注意，这些参数中的一些是以独占方式设置的
进击的路飞桑·2023-11-16 10:48

Pytorch多GPU并行训练: DistributedDataParallel

1模型并行化训练1.1为什么要并行训练在训练大型数据集或者很大的模型时一块GPU很难放下，例如最初的AlexNet就是在两块GPU上计算的。并行计算一般采取两个策略：一个是模型并行，一个是数据并行。
智慧医疗探索者·2023-11-15 20:12

#pragma omp parallel for

pragmaompparallelfor是OpenMP中的一个指令，用于并行化for循环。OpenMP是一种并行编程模型，可以在支持OpenMP的编译器上使用，用于在共享内存系统中进行并行计算。
ht6806·2023-11-15 09:26

GPU编程

这种编程称为异构编程代码从CPU上开始执行，遇到需要大量并行化的部分，再到GPU上并行，然后将结果返还给CPU再进行其他可能的计算。
Zain Lau·2023-11-14 06:00

基于CUDA的Transformer Encoder并行化

写在前面：视觉Transformer模型的研究使得深度学习在分类、目标检测和语义分割等视觉任务上取得了非常好的应用，然而，因为其模型参数量大的特点，训练和推理的速度都受到了严峻的挑战，因此，并行化视觉Transformer
张小殊.·2023-11-13 17:41

JVM虚拟机：垃圾回收器之Parallel Old(老年代)

本文重点本文将学习老年代的另外一种垃圾回收器ParallelOld(PO)，这是一种用于老年代的并行化垃圾回收器，它使用标记整理算法进行垃圾回收。
幻风_huanfeng·2023-11-11 22:01

Open3d学习计划—高级篇 8（网格变形）

后端是高度优化的，并且是为并行化而设置的。本系列学习计划有Blue同学作为发起人，主要以Open3D官方网站的教程为主进行翻译与实践的学习计划。
点云PCL公众号博客·2023-11-11 19:01

故障诊断模型 | Maltab实现RF随机森林的故障诊断

效果一览文章概述故障诊断模型|Maltab实现RF随机森林的故障诊断模型描述RF善于处理高维数据，特征遗失数据，和不平衡数据（1）训练可以并行化，速度快（2）对高维数据集的处理能力强，它可以处理成千上万的输入变量
算法如诗·2023-11-11 07:24

JVM虚拟机：垃圾回收器之Parallel Scavenge

本文重点在前面的课程中，我们学习了新生代的串行化垃圾回收器Serial，本文我们将学习新生代的另外一个垃圾回收器ParallelScavenge(PS)，PS是一个并行化的垃圾回收器，它使用复制算法来清理新生代的垃圾
幻风_huanfeng·2023-11-08 12:26

基于FPGA异构计算快速构建高性能图像处理解决方案

FPGA与CPU相比进一步强化了算力，尤其适合各类并行化计算；而与GPU相比，其更细粒度及灵活的并行化及流水线控制天然的对复杂算法有更强的适应性，能够充分发挥出算力优势，从而带来计算效率的提升。
LiveVideoStack_·2023-11-07 22:46

【新人赛】阿里云恶意程序检测 -- 实践记录11.10 - XGBoost学习 / 代码阅读、调参经验总结...

根据个体学习器的生成方法，集成学习方法可以分为两大类，序列化方法，并行化方法。序列化方法的代表就是Boosting方法，其中XGBoost和lightGBN都属于此类。
Yanqiang_CS·2023-11-05 06:11

测序仪的序列：DNA测序的历史

•第二代通过并行化许多反应大幅提高了吞
wangchuang2017·2023-11-04 09:02

phy调试

PHY在数据接受时，进行如上所述的逆操作，将模拟信号转化为数字信号，解码，并行化后，传给MAC。PHY有一个重要的功能就是自协商。什么是自协商？就是PHY
o^free·2023-11-04 00:49
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他