并行化

Flink中任务的并发：slot和parallelism

client将用户提交的任务解析成执行流程图，然后提交给JobManager，JobManager收到任务执行流程图后，进行并行化，JobManager再申请TaskManager资源，将具体的任务交给
luofengmacheng·2023-09-23 08:28

Transformer最直观的解析（译）

然而，最大的好处来自于Transformer如何使自己适合并行化。事实上，GoogleCloud推荐使用TheTransformer作为参考模型来使用他们的CloudTPU产品。
羊驼养殖户·2023-09-23 02:14

Flink CDC MongoDB Connector 的实现原理和使用实践

主要内容包括：MongoDBChangeStream技术简介MongoDBCDCConnector业务实践MongoDBCDCConnector生产调优MongoDBCDCConnector并行化Snapshot
Apache Flink·2023-09-21 21:44

Android Camera简单整理(四)-Android Camera性能Debug经验

冷启动本质上做成热启动,一般都让相机在后台被杀后过几分钟自动重启,由于是系统平台应用,做到这点不是很难切换类模式切换要经过开关Camera过程cpuperflockboost,减少无用初始化,耗时久的可考虑并行化初始化前后置切换要经过开关
马小藤·2023-09-21 18:35

2023_Spark_实验十：RDD基础算子操作

Ø练习1：//通过并行化生成rddvalrdd1=sc.parallelize(List(5,6,4,7,3,8,2,9,1,10))//对rdd1里的每一个元素乘2然后排序valrdd2=rdd1.map
pblh123·2023-09-20 20:37

生信技巧 | GNU 并行操作

如果数据可以分成块并单独处理，那么问题就被认为是可并行化的。
·2023-09-20 00:56

并发编程系列-CompletableFuture

//以下两个方法都是耗时操作doBizA();doBizB();确实，实现并行化的方法很简单，就像下面的代码一样，我们创建两个子线程来执行这些操作。你会发现在下面
吾日三省吾码·2023-09-19 19:09

RWKV解读：在Transformer的时代的新RNN

作者：徐传飞在Transformer时代，介绍一个非Transformer架构的新网络——RWKV，RWKV是一种创新的深度学习网络架构，它将Transformer与RNN各自的优点相结合，同时实现高度并行化训练与高效推理
·2023-09-18 16:17

echart 数据视图_浅谈Flink分布式运行时和数据流图的并行化

本文将以WordCount的案例为主线，主要介绍Flink的设计和运行原理。关于FlinkWordCount程序可以参考我之前的文章：Flink入门：读取Kafka实时数据流，实现WordCount。阅读完本文后，读者可以对Flink的分布式运行时有一个全面的认识。1Flink数据流图简介1.1Flink作业的逻辑视图在大数据领域，词频统计(WordCount)程序就像是一个编程语言的HelloW
weixin_39709674·2023-09-14 13:09

Spring Boot 集成全局唯一ID生成器

在实现上，UidGenerator通过借用未来时间来解决sequence天然存在的并发限制；采用RingBuffer来缓存已生成的UID，并行化
人人都在发奋·2023-09-13 07:02

提升代码效率：掌握Python中并行for循环从入门到精通

Python中的并行处理库使用multiprocessing使用concurrent.futures使用multiprocessing使用concurrent.futures并行处理的注意事项综合案例：图像处理并行化总结介绍欢迎来到本篇文章
　子午·2023-09-12 19:20

Stream流 - 获取Stream和转换操作

Stream可以并行化操作，Stream的并行操作是依赖Java7中引入的Fork/Join框架拆分任务和加速处理过程，并且允许数
不会叫的狼·2023-09-11 13:59

R语言机器学习与临床预测模型49--R语言如何系统学习机器学习？

同时并行化
科研私家菜·2023-09-11 12:52

深度学习 | 关于transformer你必须知道的20个知识点

Transformer不像LSTM那样依赖循环和过程的计算,它使用Attention机制来建模序列之间的依赖关系,这使得Transformer的并行化程度更高,训练速度更快。3.Transformer
往日无痕·2023-09-10 07:22

介绍 Apache Spark 的基本概念和在大数据分析中的应用。

ApacheSpark是一种快速、可扩展的大数据处理框架，利用了内存计算技术，以及良好的并行化和分布式计算模型，Spark能够有效地处理大规模的数据。
kkkliaoo·2023-09-09 05:36

Golang语言快速上手到综合实战高并发聊天室

需要的联系我：QQ：1844912514Go是Google开发的一种编译型，可并行化，并具有垃圾回收功能的编程语言。2015，Go迎来了全迸发的一年。时隔一年，回头再看，Go已跻身主流编程语言行列。
axfcjwkbi259888707·2023-09-08 03:39

Glusterfs3.3.1DHT(hash分布)源代码分析

换句话说，GlusterFS不需要将元数据与数据进行分离，因为文件定位可独立并行化进行。Gluster
苍山雪麓·2023-09-07 04:21

一文讲解Transformer

Transformer:首次提出在：Attentionisallyouneed(arxiv.org)简单来说，Transfomer就是一种Seq2seq结构，它基于多头自注意力机制，解决了传统RNN在计算过程中不能够并行化的问题
jxwd·2023-09-05 05:57

c++11总结22——原子操作与memory_order

1.原子操作1.1概念原子操作时多线程程序中"最小且不可并行化"的操作。通常对一个共享资源的操作是原子操作的话，意味着多个线程访问该资源时，有且仅有唯一一个线程在对这个资源进行操作。
却道天凉_好个秋·2023-09-03 09:44

Spark Java实战

运行结果展示三、平均成绩3.1实例描述3.2解题思路3.3代码展示3.4运行结果展示四、单表关联4.1实例描述4.2解题思路4.3代码展示4.4运行结果展示一、数据去重"数据去重"主要是为了掌握和利用并行化思想来对数据进行有意义的筛选
hnu哈哈·2023-09-02 11:47

大数据学习：Hive企业级调优

数据的压缩说明压缩模式评价可使用以下三种标准对压缩方式进行评价1、压缩比：压缩比越高，压缩后文件越小，所以压缩比越高越好2、压缩时间：越快越好3、已经压缩的格式文件是否可以再分割：可以分割的格式允许单一文件由多个Mapper程序处理，可以更好的并行化常见压缩格式压缩方式压缩比压缩速度解压缩速度是否可分割
zui初的梦想·2023-09-01 04:05

Attention is all you need

Transformer在训练中可以更好的并行化，并且需要更少的训练时间。Transformer可以很好的泛化到其他的任务中。
黄昏贩卖机·2023-08-25 08:10

视觉SLAM⑫----建图（未完）

本章内容12.1概述12.2双目稠密重建12.2.1立体视觉12.2.2极线搜索与块匹配12.2.3高斯分布的深度滤波器12.2.4像素梯度的问题12.2.5逆深度12.2.6图像间的变换12.2.7并行化
APS2023·2023-08-22 19:18

【李宏毅】自注意力机制self-attention

目录自注意力机制base适用的输入可能的输出结构并行化操作Multi-headSelf-attention位置信息大
SofiaT·2023-08-22 17:01

Starrocks--数据插入方式

优点：高效：批量加载利用并行化和高吞
璐先生·2023-08-21 11:45

英语诗歌语言学指南：发声模式

6章发声模式(PatternsofSound)音韵方案，类似于规范方案，由自由反复或并行化组成。
书中的电脑·2023-08-21 03:23

用 PyTorch 编写分布式应用程序

设定PyTorch中包含的分布式软件包(即torch.distributed）使研究人员和从业人员可以轻松地并行化他们在跨进程和机器集群的计算。
yanglamei1962·2023-08-20 23:13

RDD-Resilient Distributed Datasets 弹性分布式数据集

RDD创建这里有三种构建RDD的方式：1.并行化一个内存中的集合。第一种方法适用于在少量数据集上，并行执行CPU增强型的计算。并行化的程度由单个机器，或者机器集群所有CPU核的总数所决定。
Jesse Pan·2023-08-19 23:46

1.flink快速入门

无论是spark、hive、还是flink都会把用户的计算逻辑转换为这样的DAG，数据的计算按照DAG触发，理论上只要构建出这样一个DAG图，就可以描述清楚用户的计算逻辑，在DAG的基础上，将Node并行化就可以将整个
Object~·2023-08-19 23:01

PySpark-RDD编程入门

文章目录2.PySpark——RDD编程入门2.1程序执行入口SparkContext对象2.2RDD的创建2.2.1并行化创建2.2.2获取RDD分区数2.2.3读取文件创建2.3RDD算子2.4常用
白莲居仙·2023-08-19 17:17

PySpark-核心编程

2.PySpark——RDD编程入门文章目录2.PySpark——RDD编程入门2.1程序执行入口SparkContext对象2.2RDD的创建2.2.1并行化创建2.2.2获取RDD分区数2.2.3读取文件创建
白莲居仙·2023-08-19 17:44

Druid 概述

Druid的三个设计原则快速查询：部分数据的聚合（PartialAggregate）+内存化（In-Memory）+索引（Index）水平扩展能力：分布式数据（DistributedData）+并行化查询
Sol__C·2023-08-19 15:24

第5章 线程结构 摘录

5.2.1问题分解CPU领域的并行化是向着一个CPU上执行不止(单一线程)程序的方向发展。但这只是我们之前所提的任务并行。
高性能计算工程师·2023-08-18 14:39

并发编程系列-CompletableFuture

//以下两个方法都是耗时操作doBizA();doBizB();确实，实现并行化的方法很简单，就像下面的代码一样，我们创建两个子线程来执行这些操作。你会发现在下面
满载星辉·2023-08-17 20:15

SOFABoot——基本使用（笔记）

前言二、快速开始2.1基本搭建2.2测试是否成功2.3其他部分日志测试异步启动三、SOFABoot的模块化开发3.1基于Spring上下文的隔离3.2RootApplicationContext3.3模块并行化启动
yjx23332·2023-08-16 19:38

Transformer关于Self-Attention及Multi-Head Attention

Transformer关于Self-Attention及Multi-HeadAttention对于RNN模型记忆长度有限且无法并行化，只有计算完t(i)时刻后的数据才能计算t(i+1)时刻的数据。
张嘉烘·2023-08-13 09:12

transformer--变形金刚

单向的RNN:在输出b4的时候，已经看了a1~a4在输出b3的时候，已经看了a1~a3双向的RNN:在输出每一个bi的时候，已经看了a1~a4RNN的优点：可以考虑到长距离的依赖RNN的缺点：不能实现并行化也可以用
Tingsie·2023-08-12 15:39

CMake: 检测并使用OpenMP的并行环境

为了从OpenMP并行化中获得性能收益，通常不需要修改或重写现有程序。一旦确定了代码中的性能关键部分，例如：使用分析工具，我们就可以
jjjstephen·2023-08-11 22:28

最强chatgpt写论文，开源人人可用

受到AutoGPT和最近的Plan-and-Solve论文的启发，GPTResearcher解决了速度和确定性的问题，通过并行化代理工作而不是同
AI 研习所·2023-08-11 18:15

纵览 PoseiSwap 经济体系，如何从宏大的叙事中持续捕获价值？

NautilusChain是行业内首个模块化Layer3架构的公链，该系统可以通过Celestia+Eclipse的支持，允许开发者基于模块化的方式定制化构建主权、兼容EVM的应用链，不同的应用链间能够以并行化的方式运行
QiJublockchain·2023-08-09 05:49

潜藏在货币流转特性中的秘密，DCEP如何优雅地解决“双花问题”

那么，我们如何才能让这些账户可以实现数据的并行化处理呢？换一个思路来思考账户结构。我们之前的账户体系当中，不同的用户账户所记录的是一个数字，我们利用一个数字来表示
乾数云社区·2023-08-09 03:14

从价值的角度看，为何 POSE 通证值得长期看好

该DEX本身能够以Dapp层（Rollup）的形态，与其他应用层并行化运行。
BTColdman·2023-08-08 23:40

从价值的角度看，为何 POSE 通证值得长期看好

该DEX本身能够以Dapp层（Rollup）的形态，与其他应用层并行化运行。
区块链小八歌·2023-08-08 09:11

提速Rust编译器！

他解释了不同数量和大小的CGU之间的权衡以及Rustc是如何使用LLVM并行化代码生成和优化的。此外，Nethercote还探索了一些形成和排序CGU的替代方法，并报告了他的实验结果。Neth
胖头鱼不吃鱼-·2023-08-07 23:32

逻辑回归

LogisticRegression因其简单、可并行化、可解释强深受工业界喜爱。Logistic回归的本质是：假设数据服从这个分布，然后使用极大似然估计做参数的估计。
留下的脚印·2023-08-07 17:36

基于Open3D的点云处理1-Open3D简介与安装

后端是高度优化的，并且是为并行化而设置的。
JoannaJuanCV·2023-08-07 14:59

1.Open3D教程——Open3D介绍

后端经过高度优化，并设置为并行化。
lzfshub·2023-08-07 14:27

从价值的角度看，为何 POSE 通证值得长期看好

该DEX本身能够以Dapp层（Rollup）的形态，与其他应用层并行化运行。
西柚财经·2023-08-07 03:46

FISCO BCOS v3.3.0发布，新增块内分片技术，单链性能突破10万TPS

在社区通力协作下，FISCOBCOSv3.3.0已经发布，块内分片作为本次更新的核心亮点，实现了应用间交易执行的并行化。同时，该版本对全链路性能进行了深度优化，单链端到端性能突破10万
微众区块链·2023-08-06 05:09

【异步编程笔记分享】同步编程方式已经不在成为主流？阿里技术官首发Java异步编程的顶级教程笔记成功刷新了我的认知！

在使用同步编程方式时，由于每个线程同时只能发起一个请求并同步等待返回，所以为了提高系统性能，此时我们就需要引入更多的线程来实现并行化处理。
阿杰子啊·2023-08-06 03:59
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他