并行处理

impala系列：impala架构

Impala是一款能够在许多系统上运行的MPP（MassivelyParallelProcessing，即大规模并行处理）查询执行引擎。
张建闯·2023-04-04 22:37

【大数据入门核心技术-Impala】（二）Impala核心组件和架构

目录一、最快的SQL引擎二、Impala架构三、核心组件一、最快的SQL引擎Impala是一个MPP（大规模并行处理）SQL查询引擎：是一个用C++和Java编写的开源软件；用于处理存储在Hadoop集群中大量的数据
forest_long·2023-04-04 22:47

并行计算实验-串、并行排序算法

具体要求：1.用Java多线程或者C#多线程模拟并行处理（推荐用Java）。2.说明程序执行方式，记录在ReadMe.txt中。3.读取乱序数据文件
YottaLee·2023-04-04 21:28

Linux驱动-互斥锁用法，建议先保存

互斥体概述信号量是在并行处理环境中对多个处理器访问某个公共资源进行保护的机制，mutex用于互斥操作。信号量的count初始化为1，down()/up()也可以实现类似mutex的作用。
一口Linux·2023-04-04 16:29

读书笔记 多线程 -- GCD

GCD传统的多线程编程技术，为了提高并行处理能力采用的手段是创建更多的线程去并行处理。但是这样也会带来一个问题就是创建多少线程是合适的最优的呢？线程的创建也是要耗费一定的内存资源的。GCD完美的解决
_桃夭大人_·2023-04-04 12:44

ORACLE并行度

Oracle在并行处理时，会启动多少个并行进程来同时执行任务，并行度越高，并行进程越多，执行速度会越快,默认是noparallel，如果我们设置并行度为defau
iteye_14580·2023-04-04 08:37

oracle 索引并行_并行处理DB2 for i索引

当人们想到数据库引擎中的并行处理时，他们会立即想到通过让多个处理器处理单个查询来缩短查询响应时间。人们往往会忽略的是，并行处理也可以加快索引处理的速度，从而提高数据库服务器的整体性能。
cusi77914·2023-04-04 08:33

作业帮实时数仓架构中的Doris是如何发挥神威的，一文玩儿透（建议收藏）

日内容分享：利敏摘要整理：皮卡丘主要内容：1、作业帮业务与背景2、基于Doris的实时查询系统3、未来规划ApacheDoris支持对海量大数据进行快速分析的MPP数据库ApacheDoris一款基于大规模并行处理技术的交互式
学而知之@·2023-04-04 06:47

高并发的解决思路

高并发：通过设计保证系统能够同时并行处理很多请求。
@Java小白学习中·2023-04-04 03:53

python中的并行处理（多线程）几种方式（Pool, Parallel, threading）

1,PoolfrommultiprocessingimportPoolimportosdefworker(arg):print("begin:%s"%(str(arg)))if__name__=="__main__":po=Pool(10)#定义进程池，最大进程为10foriinrange(100):po.apply_async(worker,(i,))po.close()po.join()当然上
飞呀飞呀飞呀·2023-04-04 02:08

高并发架构设计

01概述高并发（HighConcurrency）是互联网分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计保证系统能够同时并行处理很多请求。
程序员姜戈·2023-04-04 00:15

OpenMP使用详解

编译器根据程序中添加的pragma指令，自动将程序并行处理，使用OpenMP降低了并行编程的难度和复杂度。当编译器不支持OpenMP时，程序会退化成普通（串行）程序。程序中已有的Ope
鲸落寰宇·2023-04-03 18:35

Java学习笔记-多线程基础知识

一、基础概念CPU核心数和线程数的关系多核心:也指单芯片多处理器(ChipMultiprocessors,简称CMP),CMP是由美国斯坦福大学提出的,其思想是将大规模并行处理器中的SMP(对称多处理器
ChitandaEru.·2023-04-03 09:16

OpenGL ES之深入解析RGB图像与YUV格式之间的相互转换

图像的旋转、缩放、裁剪以及YUV的渲染原理和实现，我们知道YUV图不能直接用于显示，需要转换为RGB格式，而YUV转RGB是一个逐像素处理的耗时操作，在CPU端进行转换效率过低，正好可以利用GPU强大的并行处理能力来实现
╰つ栺尖篴夢ゞ·2023-04-03 03:39

【OLAP】Doris学习笔记

Doris是一个现代化的MPP（MassivelyParallelProcessing，即大规模并行处理）分析型数据库产
棉花糖灬·2023-04-03 02:08

ClickHouse概述

支持的特性真正的列式数据库管理系统数据压缩数据的磁盘存储多核心并行处理多服务器分布式处理：数据可以保存在不同的shard上，每一个shard都由一组用于容错的replica组成，查询可以并行的在所有shard
盗梦者_56f2·2023-04-03 00:57

Java8流式处理优点

更加高效：流式处理的一些操作，如过滤、映射等可以在处理过程中进行并行处理
云台095·2023-04-03 00:08

信息与计算机科学二级学科,《信息计算与智能系统》二级学科 硕士研究生培养方案...

已形成了无线网络与智能计算、人机交互与智能识别、并行处理与系统集群三个稳定的研究方向。本学科教师先后参加了多项国家自然科学基金项目，主持省部级以上科研项目多项，科研经费充足。
高效办公的小叮当·2023-04-03 00:46

2021-07-05（笔记）分布式架构的三高

分布式架构的三高什么是高并发：高并发常用术语：如何提升系统的并发能力：什么是高可用：什么是高并发：高并发是互联网分布式系统架构设计中必须考虑的因素之一，通常是指通过设计保证系统能够同时并行处理很多请求。
BlackJoyful·2023-04-03 00:38

深入理解服务器CPU三大体系结构--SMP、NUMA、MPP

目前的商用服务器大体可以分为三类，即对称多处理器结构(SMP：SymmetricMulti-Processor)，非一致存储访问结构(NUMA：Non-UniformMemoryAccess)，以及海量并行处理结构
机械猿--·2023-04-02 17:26

究竟啥才是互联网架构“高并发”

一、什么是高并发高并发（HighConcurrency）是互联网分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计保证系统能够同时并行处理很多请求。
高级java架构师·2023-04-02 10:14

presto 理论概念和安装部署总结

presto理论概念和安装部署总结presto理论概念presto定义与概念MPP（大规模并行处理）引擎MPP就是将任务并行地分散到多个服务器与节点上，在每个节点上计算完成后，将各自部分的结果汇总在一起得到最终的结果
stackldy·2023-04-02 09:22

Idea+maven+spring-cloud项目搭建系列--11-3 dubbo限流和熔断

服务提供端的限流措施：1.1使用：dubbo.protocol.accepts参数限制服务端同时链接消费端的连接数0表示不限制连接数；1.2使用：dubbo.provider.executes限制每个方法并行处理的最大可并行执行请求
拽着尾巴的鱼儿·2023-04-02 00:42

编写高效 PyTorch CUDA 训练代码的一些技巧

通过并行处理多个数据点，可以减少CPU和GPU之间的数据传输次数，并利用GPU的并行处理能力。优化数据加载：如前所述，数据加载可能成为PyTorchCUDA训练的瓶颈。
彩云的笔记·2023-04-01 17:38

TiDB学习笔记（一）-PCTA

B树需要两次写，LSMTree用顺序写入替换随机写入rocksdb存储引擎支持批量写入，无锁快照读Raft协议逻辑清晰，安全性高RPO=0RTOrowid近似MPP模型，实现SQLjoin的下推和并行处理
404Rapper..·2023-04-01 11:54

Java并发知识点（1）

1.1线程与进程并发执行的进程数目并不是由CPU数目限制操作系统将cpu的时间片分配给每一个进程，给人并行处理的感觉一个程序执行多个任务，与此同时每一个任务成为一个线程可以同时运行一个线程以上的程序成为多线程程序创建撤销一个线程比启动新线程的开销小很多
奔跑的蛙牛·2023-04-01 07:07

YupDB 2.0 底层架构全面升级

SharedEverything–针对单个主机，完全透明共享硬件资源，并行处理能里姣差，典型的代表SQLServer
shaonanxu·2023-03-31 22:19

异构计算架构的基本知识

了解异构计算架构一、并行计算通俗地讲就是将一个大的问题分解成多个小问题，然后在不同的计算资源上并行处理这些小问题。并行计算通常涉及到两个不同的计算技术领域：计算机架构和并行程序设计。
weixin_42478379·2023-03-31 20:10

关于Greenplum的架构

Greenplum数据库是一种大规模并行处理（MPP）数据库服务器，其架构特别针对管理大规模分析型数据仓库以及商业智能工作负载而设计。
贾斯汀玛尔斯·2023-03-31 20:33

Greenplum 架构

Greenplum可进行海量并行处理(MassivelyParallelProcessing)一、Greenplum体系架构Greenplum由三部分组成：MasterHost、Segment、Interconnect
Murkey学习之旅·2023-03-31 20:54

基于CUDA的异构并行计算介绍

、软件工具、编程平台及并行编程范例的一组元素列表并行计算并行计算目标：提高运算速度并行计算：同时使用许多计算资源（核心或计算机）来执行并发计算，一个大的问题可以被分解成多个小问题，然后在不同计算资源上并行处理这些小问题
Mikowoo007·2023-03-31 20:26

CUDA C编程（一）基于CUDA的异构并行计算

并行计算  并行计算可以被定义为同时使用许多计算资源（核心或计算机）来执行并发计算，一个大的问题被分解成多个小问题，然后再不同的计算资源上并行处理这些小问题。
伴君·2023-03-31 20:50

day02-硬件组成概念介绍

x86_64架构PC服务器==>小型机（虚拟化）==>大型机（复杂运算--气象局）服务器的组成1.CPU作用：运算/控制（效率最高）几路服务器：服务器上有多少颗CPUCPU核数：处理工作任务核数越多，并行处理能力越强
小虎子_c64e·2023-03-31 15:10

【云计算】知识汇总

2.2并行计算的分类2.3并行计算的主要技术问题2.4MPI的主要功能2.4MPI的特点和不足2.5为什么需要海量数据并行处理技术？3.云计算原理及应用
司六米希·2023-03-31 14:17

Clickhouse架构与设计

1.ClickHouse架构设计1.1ClickHouse的核心特性MPP(MassivelyParallelProcessing)，即大规模并行处理，将任务并行的分散到多个服务器和节点上，在每个节点上计算完成后
大数据研习社·2023-03-31 14:59

8-20 JDK8的新特性；

此外，流还可以透明地并行处理，你无需写任何多线程代码了！2.2使用流类别方法名方法签
没齿无怨言·2023-03-31 14:20

Clickhouse(3)---Clickhouse系统架构之Clickhouse特征

Clickhouse系统架构之Clickhouse特征Clickhouse特征1.完备的DBMS系统2.真正的列式数据库管理系统3.数据压缩4.数据的磁盘存储5.多核心并行处理6.多服务器分布式处理7.
Abner G·2023-03-31 13:44

presto架构和概念介绍

presto介绍  Presto是大数据场景中常用的查询引擎，其采用master-slave架构，支持跨数据源类型查询，支持动态横向扩展，采用了内存并行处理、跨集群节点管线执行、多线程执行模型、高效的扁平内存数据结构
cy^2·2023-03-31 12:24

达梦数据库-MPP集群和共享存储集群DSC

单点服务共享磁盘:多个实例同时访问数据,节点数增大则对系统I/O锁资源等产生竞争,节点数增大性能反而可能下降完全不共享:系统中存在一个主控节点,如果主控节点异常则无法提供服务完全对等共享:不存在主控节点DM大规模并行处理集群
fangyu_7362·2023-03-31 09:12

海外服务器的3种体系架构：SMP、NUMA、MPP

从系统的体系架构来看，目前的商用服务器大体上可以分为3类：SMP（对称多处理器）结构、NUMA（非一致存储访问）结构和MPP（海量并行处理）结构。
华纳云IDC服务商·2023-03-31 03:29

高并发架构设计

01概述高并发（HighConcurrency）是互联网分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计保证系统能够同时并行处理很多请求。
程序员姜戈·2023-03-31 02:36

Kafka的结构、特点和原理（细节）

观察者模式—菜鸟教程解耦可以并行的任务可以作为不同的消息放进消息队列，由多个系统并行处理。如上图当支付完成后，向消息队列中放入多个不同的任务（消息），后台系统通过订阅拉取对应的任务进行
ctx-study·2023-03-31 00:19

大数据技术原理与应用（第一章，大数据概述）

目录1.1大数据时代1.2大数据的概念和影响1.3大数据的应用1.4大数据的关键技术分布式存储分布式并行处理技术1.5大数据与云计算、物联网的关系1.5.1云计算云计算数据中心1.5.2物联网（TheInternetofThings
m0_37607242·2023-03-30 23:18

Flynn's Taxonomy及MIMU详细分类

并行本身是一个广泛的概念，其实早在多核之前并行处理就已经存在N久了，大家想想看：IBM、SUN、HP的小型机，哪个不是多CPU的？
Colin356·2023-03-30 16:57

多核时代：并行程序设计探讨（1）——并行系统

并行本身是一个广泛的概念，其实早在多核之前并行处理就已经存在N久了，大家想想看：IBM、SUN、HP的小型机，哪个不是多CPU的？
华仔爱技术·2023-03-30 16:24

浅谈在线并行计算框架

但是随着业务的越来越复杂，以单条请求维度的并行处理已经
敦兮其若朴，旷兮其若谷·2023-03-30 13:45

MapReduce

每个阶段都是用键值对(key/value)形式作为输入(input)和输出(output)MapReduce采用的是“分而治之”的策略，一个大规模数据集会被切分成许多独立的分片，这些分片可以被多个Map任务并行处理
GakkiLove·2023-03-30 10:22

详解人工智能、机器学习和深度学习的区别

到2015年，GPU的广泛使用使并行处理更快、更强大、更便宜。而愈加廉价的存储可以大规模地存储大数据（从纯文本到图像、映射等）。这产生了对数据分析的需求，它
Finovy Cloud·2023-03-30 09:46

Python编程：使用asyncio包处理并发

因此，实际上大多数过程都是并发处理的，而不是并行处理。计算机始终UN行者100多个进程，确保每个进程都有机会取得进展，但是CPU同时做
似水流年376·2023-03-30 09:12

如果没有GPU做深度学习，怎么办？Google Colab解决方案

GPU可以并行处理这些计算，同时处理许多数据点，从而显着加快训练过程。相比之下，CPU（中央处理器）针对顺序处理进行了优化，在并行计算任务方面不如GPU高效。在深度学习中使用G
大表哥汽车人·2023-03-30 09:39
上一页 12 13 14 15 16 17 18 19 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他