并行课程笔记

Python多线程实现大规模数据集高效转移

因此，通过多线程并行处理可以大幅提升数据传输效率。本文将分享一个基于Python多线程实现的高效数据传输工具，通过遍历源文件夹中的所有文件，将它们移动到目标文件夹。
sand&wich·2024-09-16 06:23

三者兼顾的一天

上午和宝贝做了一个寒假作息表，差点完美主义爆发，忍住没说，期待明天起6:45起床下午和冬青，达妈，陶苏一块讨论合作到7点，赶到荷花园大厦参加美乐家茶话会很接地气的分享，要好好珍惜每一天，正面管教传播和美乐家的推广并行
荣灿100·2024-09-16 03:16

2021.10.25-2021.10.31一周计划

三、成长1、趁早学习：3个主题并行。
从21年9月11日起·2024-09-16 00:51

【前端】vue 报错:The template root requires exactly one element

这个错误通常出现在以下几种情况：模板中有多个并行
程序员-张师傅·2024-09-15 22:33

Go编程语言前景怎么样？参加培训好就业吗

Go语言专门针对多处理器系统应用程序的编程进行了优化，使用Go编译的程序可以媲美C或C++代码的速度，而且更加安全、支持并行进程。不仅可以开发web,可以开发底层，目前知乎就是用golang开发。
QFdongdong·2024-09-15 22:47

Fork/Join框架与ForkJoinPool

太大的子问题不利于通过并行方式来提高性能，而太小的子问题则会带来较大的额外开销。每个子问题计算完成后，可以得到关于整个问题的部分解。join操作的作用是把这些分解手机组织起来，得到完整解。
浪白条·2024-09-15 19:39

SQLite的入门级项目学习记录（二）

再补充一些基础知识：并行操作的问题1、可以多游标同时运行SQLite，对于同一个连接sqlite3.connect(db_file)，可以同时创建多个游标，每个游标都是独立的，可以执行各自的SQL命令序列
深蓝海拓·2024-09-15 16:38

Spark 组件 GraphX、Streaming

SparkStreaming2.1SparkStreaming的主要概念2.2示例代码2.3SparkStreaming的集成2.4SparkStreaming的应用场景SparkGraphX用于处理图和图并行计算
叶域·2024-09-15 14:54

PIPE接口

的数据位宽2’b00：8bits（10bits）2’b01：16bits(20bits)2’b11:32bits(40bits)2’b11:保留(80bits)8/10b编码（128/130b编码）data并行数据
奥特曼升级打怪兽·2024-09-15 06:52

多线程相关面试题（2024大厂高频面试题系列）

1、聊一下并行和并发有什么区别？并发是同一时间应对多件事情的能力，多个线程轮流使用一个或多个CPU并行是同一时间动手做多件事情的能力，4核CPU同时执行4个线程2、说一下线程和进程的区别？
小橘子831·2024-09-15 06:51

Java多线程相关面试题整理

2.并行和并发的区别？3.创建线程的几种方式？Runnable接口和Callable接口的区别？run()方法和start()有什么区别？4.Java线程状态和方法？描述线程的生命周期？
长河落日袁同学·2024-09-15 06:21

windows C++-并行编程-PPL任务并行(二)

延续任务在异步编程中，一个异步操作在完成时调用另一个操作并将数据传递到其中的情况非常常见。传统上，这使用回调方法来完成。在并发运行时中，延续任务提供了同样的功能。延续任务(也简称为“延续”)是一个异步任务，由另一个任务(称为先行)在完成时调用。使用延续可以：将数据从前面的任务传递到延续；指定调用或不调用延续所依据的精确条件；在延续启动之前取消延续，或在延续正在运行时以协作方式取消延续；提供有关应如
sului·2024-09-14 23:33

windows C++-并行编程-并行算法(五) -选择排序算法

并行模式库(PPL)提供了对数据集合并行地执行工作的算法。这些算法类似于C++标准库提供的算法。并行算法由并发运行时中的现有功能组成。
sului·2024-09-14 21:17

windows C++ 并行编程-编写parallel_for 循环

示例：计算两个矩阵的乘积以下示例显示了matrix_multiply函数，可计算两个方阵的乘积。//Computestheproductoftwosquarematrices.voidmatrix_multiply(double**m1,double**m2,double**result,size_tsize){for(size_ti=0;i#include#include#includeusin
sului·2024-09-14 21:17

windows C++-并行编程-PPL任务并行(一)

在并发运行时中，任务是执行特定作业并通常与其他任务并行运行的工作单元。任务可以分解为组织成任务组的其他更细化的任务。编写异步代码，并希望在异步操作完成之后进行某种操作时，可使用任务。
sului·2024-09-14 21:17

从零开始学PostgreSQL (十三)：并行查询

目录概述1.并行查询的工作原理2.什么时候可以使用并行查询？
DBA实战·2024-09-14 20:36

Java并发复习

面对复杂业务模型，并行程序串行会比程序更适应业务需求，而并发编程更能吻合这种业务拆分。->充分利用多核C
vd_vd·2024-09-14 11:12

go 语言常见问题（4）

在语言层级支持并行操作。有垃圾处理器。内置字符串和maps。函数是go语言的最基本编程单位。
jzpfbpx·2024-09-14 07:47

分布式离线计算—Spark—基础介绍

各种概念之间的关系Executor的优点Spark运行基本流程Spark运行架构的特点Spark的部署模式Spark三种部署方式Hadoop和Spark的统一部署摘要：Spark是基于内存计算的大数据并行计算框架
测试开发abbey·2024-09-13 11:11

15-HDMI TVS管SPICE仿真及性能分析

串行连接分电压，并行连接分电流。3)TVS的最大筘位电压咋应小于被保护电路的损坏电压。4)在规定的脉冲持续时间内，TvS的最大峰值脉冲功耗R必须大于被保护电路内可能出现
芯片SIPI设计·2024-09-13 09:59

HarmonyOS NEXT应用开发性能优化篇(一)

文章将性能优化分为四篇按照顺序(1.并行化、预加载和缓存2.布局嵌套层数3.管理状态变量4.系统接口)来介绍介绍应用开发过程中常见的一些性能问题，配合相关参考示例。
周星0927·2024-09-13 08:56

Kafka 实战 - Kafka分区和副本机制理解

目的：分区的主要目的是为了水平扩展和并行处
用心去追梦·2024-09-13 07:15

PCI/CPCI/PXI/PCIE/PXIE的区别

PCIPeripheralComponentInterconnect(外设部件互联标准)，是由外围部件互联专业组PCISIG推出的一种局部并行总线标准。
小腓腓·2024-09-13 04:50

python并发与并行（十一） ———— 让asyncio的事件循环保持畅通，以便进一步提升程序的响应能力

前一篇blog说明了怎样把采用线程所实现的项目逐步迁移到asyncio方案上面。迁移后的run_tasks协程，可以将多份输入文件通过tail_async协程正确地合并成一份输出文件。importasyncio#OnWindows,aProactorEventLoopcan'tbecreatedwithin#threadsbecauseittriestoregistersignalhandlers
bug404_·2024-09-13 03:17

多道程序设计和分时

2.概念：在内存中同时存在多道作业，在管理程序的控制下“相互穿插运行”（交替运行）3.目的：提高cpu的利用率，充分发挥并行性。
yanlingyun0210·2024-09-12 20:03

学习node.js十三，文件的上传于下载

同时，分片上传还可以利用多个网络连接并行上传多个分片，提高上传速度断点续传：在上传过程中，如果网络中断或上传被中止，断点续传技术可以记录已成功上传的分片信息，以便在恢复上传时继续上传未完成的部分
涛涛酱10086·2024-09-12 20:31

LLM大模型学习：LLM大模型推理加速

目录一、模型优化技术二、模型压缩技术三、硬件加速四、GPU加速五、模型并行化和分布式计算技术一、模型优化学习常见的模型优化技术，如模型剪枝、量化、分片、蒸馏等，掌握相应的实现方法。1.1剪枝
七七Seven～·2024-09-12 17:45

ColumnParallelLinear 和 RowParallelLinear

ColumnParallelLinear和RowParallelLinear是两种并行线性层，它们的主要区别在于权重矩阵的分割方式和计算过程。
道真人·2024-09-12 15:28

SIMD（单指令多数据）指令集 简介

SIMD（SingleInstruction,MultipleData，单指令多数据）是一种并行处理技术，广泛应用于现代计算机处理器的架构中。
goTsHgo·2024-09-12 13:46

python ray分布式_取代 Python 多进程！伯克利开源分布式框架 Ray

Ray由伯克利开源，是一个用于并行计算和分布式Python开发的开源项目。本文将介绍如何使用Ray轻松构建可从笔记本电脑扩展到大型集群的应用程序。并行和分布式计算是现代应用程序的主要内容。
weixin_39946313·2024-09-12 04:52

python分布式集群ray_Ray：为人工智能而生的分布式执行框架

现有代码的简单并行化Ray允许通过最少的修改来远程执行P
不死鹰阿江·2024-09-12 04:51

OPENCL之SIMT与SIMD在架构上的主要区别是什么？

SIMT：采用的是多线程架构，即同一条指令由多个线程并行执行。每个线程可以有不同的分支行为和执行路径，从而实现线程级的并行计算。软件暴露的信息：SIMD：向软件公开SIMD宽度（
糯米宝宝·2024-09-12 01:57

《古人谈读书》教材解读

小学语文课本中，文言文增多，依据《课标》明确目标:单元主题与语文要素双线并行。结合课后作业，确立了教学内容。图片发自A
暖暖的微笑倾城·2024-09-11 23:10

记一下 Stream 流操作

JavaStream流Function.identity（）获取原流中的值创建流Collection.stream()/Collection.parallelStream()：从集合生成流，后者为并行流
清风ꦿ·2024-09-11 22:09

Python | 使用Joblib模块加快任务处理速度

在本文中，我们将了解如何通过使用Joblib模块在Python中并行执行代码来大幅减少大型代码的执行时间。
python收藏家·2024-09-11 21:28

在Xilinx FPGA上快速实现 JESD204B

此外，FPGA和ASIC中灵活的串行器/解串器(SERDES)设计正逐步取代连接转换器的传统并行LVDS/C
长弓的坚持·2024-09-11 18:05

中原焦点团队付淑平网初十五期中十六期坚持分享第331天2020.04.10周六 坚持约练141次

接纳欣赏鼓励与规则并行。2.家庭是一个系统。妈妈稳住了，不轻易发脾气。想发脾气的时候觉察自己害怕什么？这样做有用吗？妈妈照顾好了自己，身心愉悦。这样会带动家庭的其他成员。3.针对孩子管他了，他烦。
79d182f5e0a9·2024-09-11 14:45

快速理解 并发量、吞吐量、日活、QPS、TPS、RPS、RT、PV、UV、DAU、GMV

并发与并行并发：由于CPU数量或核心数量不够，多个任务并不一定是同时进行的，这些任务交替执行（分配不同的CPU时间片，进程或者线程的上下文切换），所以是伪并行。
小松聊PHP进阶·2024-09-11 13:00

Puppeteer Cluster：自动化网页操作的新利器

PuppeteerCluster：自动化网页操作的新利器puppeteer-clusterthomasdondorf/puppeteer-cluster:PuppeteerCluster是一个基于Puppeteer的库，用于并行处理多个网页操作任务
宋溪普Gale·2024-09-10 15:22

ray.tune文档总结

ray.tune文档总结tune.runconfig指定超参数的搜索方法ConcurrencyLimiter搜索算法scheduler试验调度程序分析资源（并行、GPU、分布式）原文档请看这里https
AI大司马·2024-09-10 14:48

IAAS: IT公司去IOE-Alibaba系统构架解读

从Hadoop到自主研发，技术解读阿里去IOE后的系统架构原地址：......................云计算阿里飞天摘要：从IOE时代，到Hadoop与飞天并行，再到飞天单集群5000节点的实现
wishchin·2024-09-10 04:18

Visual Studio（VS）中使用OpenMP

一、OpenMP简介OpenMP是由OpenMPArchitectureReviewBoard牵头提出的，并已被广泛接受，用于共享内存并行系统的多处理器程序设计的一套指导性编译处理方案。
我叫柳云烟·2024-09-10 04:12

Go语言 Go程基础

目录并发与并行Go程介绍简单go程示例匿名函数写法启动多个子go进程总结并发与并行并发：电脑同时听歌，看小说，看电影。cpu根据时间片进行划分，交替执行这个三个程序。我们人可以感觉是同时产生的。
JSON_L·2024-09-10 00:05

【并行计算】Strong scaling和weak Scaling

Strong的目的是为了知道当前的机器所能够提供的最大并行能力。Weak的目的是为了保证当前的负载均衡性一致的情况下比较不同数量机器的并行效果。
栏杆拍遍看吴钩·2024-09-09 20:43

Linux xargs命令

コマンド目录一.作用二.基本语法2.1-d指定分隔符2.2-p与-t选项2.3-L指定多少行作为一个命令行参数2.4-n指定将多少项作为参数2.5-I指定命令行参数占位符2.6--max-procs指定并行进程的数量三
fengyehongWorld·2024-09-09 19:36

【三】分布式训练---单机多卡与多机多卡组网（飞桨paddle2.0+）更加推荐spawn方式！

1.单机多卡启动并行训练飞桨2.0增加paddle.distributed.spawn函数来启动单机多卡训练，同时原有的paddle.distributed.launch的方式依然保留。
汀、人工智能·2024-09-09 16:14

HBase 源码阅读（四）HBase 关于LSM Tree的实现- MemStore

4.MemStore接口Memstore的函数不能并行的被调用。
Such Devotion·2024-09-09 13:19

pytorch实现单机多卡训练

pytorch实现单机多卡训练fromtorch.nn.parallelimportDataParallel#单机多卡的分布式训练（数据并行）模型训练加速'''三构建模型'''model=build_model
*Major*·2024-09-08 23:47

【DeepSpeed 教程翻译】三，在 DeepSpeed 中使用 PyTorch Profiler做性能调试和Flops Profiler教程翻译

PyTorchProfiler做性能调试Profile模型训练的循环标记任意代码范围ProfileCPU/GPU的活动Profile内存消耗0x2.FlopsProfiler总览Flops测量多GPU，多节点，数据并行和模型并行例子和
just_sort·2024-09-08 17:39

python内置的四大高阶函数

如果传入了多个iterable参数，function必须接受相同个数的实参并被应用于从所有可迭代对象中并行获取的项。
挑灯望美人。·2024-09-08 17:04
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他