mmap

零拷贝中的DMA/MMAP/sendfile/splice

1.什么是零拷贝？该技术是指计算机执行操作时，CPU不需要先将数据从某处内存复制到另一个特定区域这种技术通常用于通过网络传输文件时节省CPU周期和内存带宽1.零拷贝技术可以减少数据拷贝和共享总线操作的次数，消除传输数据在存储器之前不必要的中间拷贝次数，从而有效地提高数据传输效率2.零拷贝技术减少了用户进程地址空间和内核地址空间之间因为上下文切换而带来的开销可以看出没有说不需要拷贝，指示说减少冗余[
coffee_babe·2024-01-12 04:57

go 语言常见问题（1）

funcmain(){//slice正确示例vars[]ints=append(s,1)//map错误示例varmmap[string]intm["one"]=1//error:panic:assignmenttoentryinnilmap
ldxxxxll·2024-01-12 02:01

TinyLog iOS v3.0接入文档

日志格式化目前输出的日志格式如下：日志级别/[YYYY-MM-DDHH:MM:SSMS]TinyLog-Tag:|线程|代码文件名:行数|函数名|日志输出内容触发flush到文件的时机：每15分钟定时触发；mmapbuffer
酷爽·2024-01-11 14:41

MongoDB存储原理

WiredTiger介绍MongoDB从3.0开始引入可插拔存储引擎的概念，主要有MMAPV1、WiredTiger存储引擎可供选择。
Firechou·2024-01-11 08:54

自定参数解析器 HandlerMethodArgumentResolver

ServletRequestMethodArgumentResolver和ServletResponseMethodArgumentResolver处理了自动绑定HttpServletRequest和HttpServletResponseRequestParamMapMethodArgumentResolver
欢乐时光欢乐你我·2024-01-11 07:40

qemu-linux-user ELF vs XCOFF 2

最后更新2021/12/16qemu(4.x)/linux-user/mmap.c里target_mmap如果offset不是aligned有问题，前面检测后直接退出了，后面做了pread，但走不到这个地方
Ensighine·2024-01-11 00:55

「操作系统」彻底理解零拷贝Zero-Copy技术

深入理解零拷贝技术Go开发大全文章目录「操作系统」彻底理解零拷贝（Zero-Copy）技术@[toc]一、引言二、数据拷贝基本过程仅用CPU方式CPU&DMA方式三、普通模式数据交互四、零拷贝技术出现原因解决思路mmap
FrozenPenguin·2024-01-10 06:41

并发程序设计--D11D12进程间通信

常用通信方式无名管道（pipe）有名管道（fifo）信号（signal）共享内存映射(mmap)套接字（socket）过时的IPC通信方式SystemVIPC共享内存（sharememory）消息队列（
zhaojiazb·2024-01-10 03:56

超过6G的大文件是如何读取的,附源代码。含有网上很少有论述的信息

读取大文件有如下两种方法，一是用fopen打开文件，fgetline循环读取，fclose关闭文件；二是用open打开函数，用lseek获取文件大小,用mmap大文件内存映射，用munmap关闭内存映射
醉心编码·2024-01-08 16:27

Android AAudio

在SHARED模式下，MMAP缓冲区由AudioServer中运行的混音器使用。在EXCLUSIVE模式下，由于数据会绕过混音
jamsShadow·2024-01-07 07:35

金蝶接口调用步骤

/***获取应用令牌**@parammap*@return*@throwsIOException*/privateInvoicingTokenResultVogetAppToken(Mapmap)throwsIOException
暖男大海哥·2024-01-07 00:26

【meta-mms-tts+uroma encoding】Scaling Speech Technology to 1,000+ Languages

nvidia-NeMo包含TTS的模型，开源数据uroma转写工具介绍uroman转写工具N-to-Mmapping转写的规范，包含一些中文-拼音，拉丁文-读法的规则转换。
林林宋·2024-01-06 10:44

进程分配内存的两种方式--brk() 和mmap()（不设计共享内存）

如何查看进程发生缺页中断的次数？用ps-omajflt,minflt-Cprogram命令查看。majflt代表majorfault，中文名叫大错误，minflt代表minorfault，中文名叫小错误。这两个数值表示一个进程自启动以来所发生的缺页中断的次数。发成缺页中断后，执行了那些操作？当一个进程发生缺页中断的时候，进程会陷入内核态，执行以下操作：1、检查要访问的虚拟地址是否合法2、查找/分配
鱼思故渊·2024-01-05 21:41

将List/Map中的key转换为驼峰规则

/***将Map中的key由下划线转换为驼峰**@parammap*@return*/publicstaticMapformatHumpName(Mapmap){MapnewMap=newHashMap
masterbu·2024-01-05 14:47

把map的key转换成驼峰命名

importjava.util.Iterator;importjava.util.Map;importjava.util.Map.Entry;publicclassCommTool{/***把map的key转换成驼峰命名*@parammap
axdgtd1616·2024-01-05 14:16

Linux内存管理：(四)缺页异常处理

参考资料及图片来源：《奔跑吧Linux内核》Linux5.0内核源码注释仓库地址：zhangzihengya/LinuxSourceCode_v5.0_study(github.com)malloc()和mmap
显微镜下的内核·2024-01-05 09:31

java8 stream map 求最大值、最小值、平均数、求和

java8streammap求最大值、最小值、平均数、求和最近有个需求是求一个List>中不同key值的最大值、最小值、平均数；记得java8stream是可以做的，但是忘记怎么写的了；在一番百度后，自己整理了一下
白龙菜牛·2024-01-04 17:55

选校-基础篇 奇葩校

-YALE-NUS在申请COMMAPP申请YALE的同时可以勾选，也可以在他的网站上申请。有YALE背书，还是蛮鲜亮的。地理位置有点偏，但是全奖哦，全奖哦，全奖哦。
旺妈聊留学·2024-01-04 15:33

Hotspot源码解析-第九章

Linux::fast_thread_clock_init();//Allocateasinglepageandmarkitasreadableforsafepointpolling/**通过系统调用mmap
zhang527294844·2024-01-02 21:54

AI 工具探索（一）

ChatPPT可以直接上传文件，生成PPT，但似乎解析失败了接下来尝试一下GammaPPT，先用Kimichat解析pdf文档Prom
晨打水水水·2024-01-02 12:30

JAVA面试题分享二百四十四：彻底理解零拷贝技术( DMA、PageCache)

目录DMAmmap+writesendfilekafka和Nginx都使用了零拷贝技术大文件传输：异步IO+直接IO总结DMA直接内存访问（DirectMemoryAccess）什么是DMA？
之乎者也··2024-01-01 18:00

计算机操作系统学习笔记(11)——零拷贝

mmap+writesendfile四、PageCache一、DMADMA(直接内存存取)为什么要有DMA技术?
码农BookSea·2024-01-01 18:59

聊聊Java中的mmap

mmap是什么当我们读取或修改大文件时，传统的文件I/O操作可能会变得很慢，这时候mmap就可以派上用场了。
会踢球的程序源·2024-01-01 18:59

重新认识 Java 中的内存映射（mmap）

mmap基础概念mmap是一种内存映射文件的方法，即将一个文件映射到进程的地址空间，实现文件磁盘地址和一段进程虚拟地址的映射。
zhexiao27·2024-01-01 18:29

java零拷贝zero copy MappedByteBuffer

目录调用操作系统的mmap未使用mmap的文件通过网络传输的过程使用mmap的文件通过网络传输的过程使用例子调用操作系统的sendfile()在java中的具体实现mmap的优劣mmap的不足mmap的优点
zlpzlpzyd·2024-01-01 18:28

Item 37: Use EnumMap instead of ordinal indexing（使用 EnumMap 替换序数索引）

Occasionallyyoumayseecodethatusestheordinalmethod(Item35)toindexintoanarrayorlist.Forexample,considerthissimplisticclassmeanttorepresentaplant:偶尔你可能会看到使用ordinal()的返回值（Item-35）作为数组或list索引的代码。例如，考虑这个简单的
MrDcheng·2024-01-01 15:54

操作系统：Page Cache

通过mmap以及buffered(缓冲)I/O将文件读取到内存空
向北~·2023-12-31 21:11

linux的页缓存page cache

通过mmap（memorymap）以及bufferedio将文件读取到内存空间实际上都是读取到PageCache中。mmap是通过指针操作的方式绕过了内核态直接操作PageCache。
zlpzlpzyd·2023-12-31 21:40

【neo4j】简单使用

【neo4j】简单使用创建节点需要建立一个symmap中医数据集的节点，从csv中读取数据下面是herb的数据将该文件放在import中将xlsx文件转换为csvLOADCSVWITHHEADERSFROM"file
qq_42725437·2023-12-31 16:03

总结

优势：1、数据结构灵活2、高性能3、集群成熟4、mmap共享内存缺点：1、不支持事务2、不支持复杂sql3、内存占用高与redis的区别内存管理机制Redis数据全部存在内存，定期写入磁盘，当内存不够时
weylau·2023-12-31 15:27

Flutter开发之Json转Model

并且继承关系也会一目了然缺点：麻烦，并且容易出错；下面是我之前针对上面的数据，写的JSON转Model的模型类：classPerson{Stringname;StringavatarURL;Person.fromMap
得_道·2023-12-31 03:29

Java最优文件压缩方案

喜大普奔-掘金(juejin.cn)疑问：mmap按理不存在数据拷贝工作，会更快，文章描述却不是如此，下面进行测试先说结论：这里主要耗时是在write，故在多文件压缩时，mmap比较吃亏压缩方式：mmap
北i·2023-12-30 09:33

golang 并发锁在struct里的陷阱

错误代码typeTeststruct{sync.MutexMmap[int]int}funcmain(){buf:=make([]Test,2)buf[0]=Test{M:make(map[int]int
啊_sam·2023-12-29 14:46

HDFS 短路读的实现(全网最全面深入讲解)

(DomainSocket)什么是DomainSocketDomainSocket通信在ShortCircuitRead中做了什么DomainSocket在Hadoop上的基本实现1.2关于内存映射(MMAP
小昌昌的博客·2023-12-28 13:38

MMKV 数据存储(零拷贝技术)

MMKV是基于mmap内存映射的key-value组件，底层序列化/反序列化使用protobuf实现，性能高，稳定性强。从2015年中至今在微信上使用，其性能和稳定性经过了时间的验证。
Mr_Leixiansheng·2023-12-28 12:31

Go源码解读-sync.Map的实现

前言我有一个朋友,最近困扰于map的线程安全问题,每次都要单独定义个结构体加锁处理,例如以下结构体typeSafeMapstruct{mmap[string]interface{}musync.RWMutex
小僵尸打字员·2023-12-28 11:09

Golang源码阅读笔记 - Sync.Map

typeMapstruct{muMutexreadatomic.Valuedirtymap[interface{}]*entrymissesint}//read数据结构typereadOnlystruct{mmap
勇敢的菜鸡·2023-12-28 11:06

Kafka的高性能原理

的高性能设计文章目录什么是高性能设计Kafka高性能设计的全景图生产消息的性能优化手段批量发送消息消息压缩高效序列化内存池复用存储消息的性能优化手段IO多路复用.磁盘顺序写PageCache分区分段结构消费消息的性能优化手段稀疏索引.mmap
wh柒八九·2023-12-28 10:11

Linux系统编程之使用存储映射与共享内存实现进程间通信详解以及例程分享

目录linux进程间通信的主要方式存储映射存储映射相关API函数mmap（）mummap()匿名映射存储映射注意事项存储映射相关例程例程分析例程分享共享内存共享内存相关API函数shmget()shmat
努力的某某姚·2023-12-27 19:16

MATLAB笔记：打开数据文件的三种方法+读取数据文件的两种方法+保存数据文件的两种方法

FILENAME='\data_1.dat';str0=strcat(PATHNAME,FILENAME);%或者str0=fullfile(PATHNAME,FILENAME);然后用fread或者memmapfile
sangba2019·2023-12-27 16:43

linux 内存映射

首先，驱动程序先分配好一段内存，接着用户进程通过库函数mmap()来告诉内核要将多大的内存映射到内核空间，内核经过一系列函数调用后调用对应的驱
一叶知秋yyds·2023-12-27 04:54

2.10字符设备驱动之内存映射（mmap实现）

内存映射时的应用层操作在应用层可以通过函数void*mmap(void*addr,s
lf282481431·2023-12-26 01:09

Linux内存管理：(三)kmalloc、vmalloc、malloc、mmap

文章说明：Linux内核版本：5.0架构：ARM64参考资料：《奔跑吧Linux内核》Linux5.0内核源码注释及学习笔记仓库地址：zhangzihengya/LinuxSourceCode_v5.0_study(github.com)1.kmalloc内核中常用的kmalloc()函数的核心实现是slab机制。类似于伙伴系统机制，在内存块中按照2的order次方字节来创建多个slab描述符，如
显微镜下的内核·2023-12-25 17:53

2023尚硅谷大数据项目之数据治理考评平台

66047725/88655186【资源目录】:├──1.笔记|├──课堂随笔.pptx288.70kb|├──尚硅谷大数据技术之数据治理考评平台完整V1.2.0.docx1.87M|├──数据治理总结.mmap133.77kb
软希源码·2023-12-25 07:15

实习课知识整理3：首页商品列表的展示

所以需要写两个方法itemMapper.java//查询所有商品列表ListgetItemList();//根据热度heart
是小蟹呀^·2023-12-25 06:37

【面试常考的网络编程之Socket、短连接与长连接、客户端与服务端网络通讯流程、Java网络编程之BIO、JDK网络编程BIO案例实战演练】

【1.性能基石之IO~~~Linux操作系统相关知识体系补充&虚拟文件系统&文件描述符&PageCache内核缓存页】【2.性能基石之IO~~~PageCache缓存页&直接IO、缓存IO、内存映射mmap
硕风和炜·2023-12-25 04:27

mit6.s081【目录】

一、Lab:目录[mit6.s081]笔记Lab10:Networking|网络[mit6.s081]笔记Lab9:Mmap|文件内存映射[mit6.s081]笔记Lab8:Fi
瑜陀·2023-12-24 23:01

MIT 6.S081学习笔记（第九章）

〇、前言本文主要完成MIT6.S081实验mmap。
瑜陀·2023-12-24 15:44

实习课知识整理4：点击某个商品如何跳转到并展示出商品详情页

1.后端编写根据id查询的方法ItemMapper.java//通过itemId查询ItemgetItemById(IntegeritemId);It
是小蟹呀^·2023-12-24 14:38

浅析 fuse kernel mmap write 过程及性能问题

前言最近在项目里面用到了fuse文件系统，在使用过程中遇到了一个内核在做mmapwrite的一个bug，目前并没有从根本上解决这个bug，而是通过修改fusekernelmodule的一些参数，绕开了这个
linux大本营·2023-12-24 07:07
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他