PageCache

linux page cache 和buffer cache深入理解

linuxpagebuffercache深入理解Pagecache和buffercache一直以来是两个比较容易混淆的概念，在网上也有很多人在争辩和猜想这两个cache到底有什么区别，讨论到最后也一直没有一个统一和正确的结论
yangshuangtao·2020-06-30 06:30

Buffer cache和page cache的区别

  Pagecache和buffercache到底有什么区别呢1？很多时候我们不知道系统在做IO操作的时候到底是走了pagecache还是buffercache？
Summer_ZJU·2020-06-30 01:45

Linux内核之page cache和buffer cache

pagecache也被称为页高速缓存，在VFS文件系统中，每个文件都会有一棵radix树管理文件的缓存页，这些被管理的缓存页被称之为pagecache。所以，pagecache是针对文件系统而言的。
tenacity-go·2020-06-29 20:35

内存管家

它由三层缓存结构组成，三层缓存分别为ThreadCache、CentralCache、PageCache。
Cardiac.TJ·2020-06-29 02:05

kafka系列-kafka调优篇-高并发高吞吐架构设计

kafka的PageCache读写不同于Redis和MemcacheQ等内存消息队列，Kafka的设计是把所有的Message都要写入速度低容量大的硬盘，以此来换取更强的存储能力。
boat824109722·2020-06-29 01:58

Kafka实现高并发的原理（消息中间件如何实现每秒几十万的高并发写入）

Produce页缓存技术＋磁盘顺序写Kafka接收到数据的时候，都会往磁盘上去写PageCache内存里面的缓存，是操作系统自己管理的缓存。在写入磁盘文件的时候，可以直接写入到OScache里。
小凯Alex·2020-06-28 21:20

使用blktrace统计磁盘块I/O访问频率

结合通过将磁盘块I/O频度统计和pagecache命中率统计相结合，就可以比较有效的判断服务器节点的cache使用效率。通过这套工具，CDN
比不了就不比·2020-06-27 03:05

最全Linux学习笔记

最顶级的云计算运维大数据运维Linux系统运维学习路径：系统管理服务管理脚本开发系统扩展常见站点系统架构演变单机：HttpPHPmodulephpappmysqlhttptomcatjspappMysql多机：缓存：->pagecache
csm_81·2020-06-25 18:24

虚拟化技术初识

进程使用的内存分为RSS常驻内存集,pagecache以及anonpage;对于TLB来说是用来加速MMU进行内存单元查找的过程的;CPU通过可编程中断控制器向IO设备提供终端控制向量;虚拟化技术虚拟化是用来虚拟物理硬件的技术
bug--maker·2020-06-25 10:00

kafka2.12集群搭建

在理论上，使用了pageCache和sendFile两种技术，使得其顺序IO的速度为100kb/s,而随机IO的速度是600mb/s。接下来，我们来搭建kafka集群。
拂袖清风·2020-06-25 02:51

nginx+php-fmp 内存不释放

由于服务器只有600M的内存,上面跑了一个并发并不是很大的php应用,当运行一段时间后,发现内存不断增长,其中一部分是PageCache的增长，这个可以通过echo3>/proc/sys/vm/drop_caches
netingcn·2020-06-24 17:44

page cache和buffer cache的关系

本篇作为kernel对内存的管理、pagecache和buffercache总结，会尽力描述出文件cache的一幅清晰画面。片尾还会有所讨论mmap与buffercache。
我就没事闲溜溜·2020-06-24 13:20

buffer cache和page cache的区别？Buffer，Cache区别

Pagecache实际上是针对文件系统的，是文件的缓存，在文件层面上的数据会缓存到pagecache。文件的逻辑层需要映射到实际的物理磁盘，这种映射关系由文件系统来完成。
jhjbjbn·2020-06-23 21:35

Linux 内存中Page cache和buffer cache 的区别

linuxpagebuffercache深入理解Pagecache和buffercache一直以来是两个比较容易混淆的概念，在网上也有很多人在争辩和猜想这两个cache到底有什么区别，讨论到最后也一直没有一个统一和正确的结论
haiross·2020-06-23 12:56

在linux下应用程序，触发oom-killer时常见的分析方法

uname-aLinux(none)4.9.37#1SMPWedApr1504:49:13PDT2020aarch64GNU/Linux2.用ps查看各进程的内存，大约就占用了4G,绝大部分内存都是被PageCache
暴躁的蜗牛·2020-06-22 20:38

Linux缓存回写——基于linux-4.15

相对于内存来说，后端存储的I/O比较慢，因此写盘操作需要通过pagecache进行缓存延迟写入。
SweeNeil·2020-06-22 06:19

linux文件系统及写延迟

但是这种概念只是宏观上的，一般情况下，对硬盘（或者其他持久存储设备）文件的write操作，更新的只是内存中的页缓存（pagecache），而脏页不会立即更新到硬盘中，而是
Peach2Orange·2020-06-22 03:22

救命，Linux正在吃掉我的内存！

Linux：这叫做PageCache，其
码农翻身·2020-06-21 00:09

Kafka：高吞吐量、消息精确一次语义以及保证消息顺序

文章目录前言高吞吐量顺序读写PageCache零拷贝分区分段+索引批量读写批量压缩消息精确一次语义消息系统语义概述必须被处理的故障Kafka中的精确一次语义幂等性：每个分区中精确一次且有序事务：跨分区原子写入保证消息顺序前言
CG国斌·2020-06-14 16:32

Linux内核学习笔记（八）Page Cache与Page回写

Pagecache是通过将磁盘中的数据缓存到内存中，从而减少磁盘I/O操作，从而提高性能。
东瓜·2020-05-31 09:41

Kafka 常见问题汇总

这里提下Kafka写数据的大致方式：先写操作系统的页缓存（PageCache）,然后由操作系统自行决定何时刷到磁盘。
PassZhang·2020-04-25 12:00

消息中间件—Kafka数据存储（一）

Kafka这款分布式消息队列使用文件系统和操作系统的页缓存（pagecache）分别存储和缓存消息，摒弃了Java的堆缓存机制，同时将随机写操作改为顺序写，再结合Zero-Copy的特性极大地改善了IO
癫狂侠·2020-04-10 20:00

聊聊page cache与Kafka之间的事儿

有很多文章已经对这个问题给出了回答，但本文只重点研究其中的一个方向，即对pagecache的使用。先简单地认识一下Linux系统中的pagecache（顺便也认识一下buffercache）。
LittleMagic·2020-04-07 17:38

Kafka设计之美

一数据传输1传统数据从文件到网络的传输路径1.操作系统将数据从磁盘读入内核空间的pagecache中2.应用程序将内核空间中的数据读入用户空间缓冲区3.应用程序将数据写回内核空间的套接字缓冲区4.操作系统将数据从套接字缓冲区复制到
福杯满溢·2020-04-05 04:37

主流消息中间件介绍

Kafka高性能的读写主要是借力于操作系统底层的PageCache。kaf
横渡·2020-03-27 17:22

rocket mq 底层存储源码分析(3)-业务消息高可用

②slave根据与master长连接的心跳时间，向master发送当前pagecache中最大的物理位移（reportoffset），即以reportoffs
萝卜头4lbt·2020-03-18 17:46

消息中间件—RocketMQ消息存储（二）

文章摘要：上篇中主要介绍了RocketMQ存储部分的整体架构设计，本篇将深入分析RocketMQ存储部分的细节内容在本篇文章中，小编将继续深入分析与介绍RocketMQ消息存储部分中的关键技术—Mmap与PageCache
癫狂侠·2020-03-17 18:03

The Page Cache and Page Writeback

pagecache是kernel实现的diskcache,这是为了减少磁盘I/O。pagewriteback是把pagecache写回磁盘的处理过程。
july2993·2020-03-15 11:55

Linux的五种IO模型及同步和异步的区别

在Linux的缓存I/O机制中，操作系统会将I/O的数据缓存在文件系统的页缓存（pagecache）中，也就是说，数据会先被拷贝到操作系统内核的缓冲区中，然后才会从操作系统内核的缓冲区拷贝到应用程序的地址空间
肥宅快乐码·2020-03-04 17:00

kafka消息快的原因

1.上述消息存储结构的设计kafka消息存储设计2.pagecache3.生产消费分布式读写4.批量存储结构，就是持久化存储用的磁盘，大数据分小文件（segment单元）存储，方便根据offset二分快速查找定位小文件
联想桥南·2020-03-04 00:47

Kafka线上环境部署

RAID2.使用机械盘完全可以满足Kafka集群的使用，SSD更好.3.磁盘容量规划1.新增消息数2.消息留存时间3.平均消息大小4.副本数5.是否启用压缩4.内存规划1.尽量分配跟多的内存给操作系统的pagecache
·2020-02-18 22:00

第五章 WebKit之缓存机制

5.1WebKit缓存概述WebKit缓存包含MemoryCache、DiskCache和PageCache三种。MemoryCache是WebKit最早实现且相对成熟的缓存机制。
嘻哈小猴·2020-02-18 18:36

Neo4j 频繁导入数据导致DeadLock的问题

补充说明如下的解决方案还是会偶尔蹦出几个DeadLock的问题，在运维查看了neo4j的内存占用时发现一个问题，neo4j十分吃swap，导致执行效率十分低下，再次仔细查阅官网发现缺少了一个很重要的内存配置参数，dbms.memory.pagecache.size
一条湫刀鱼·2020-02-08 07:01

Linux操作系统I/O调度记录

整体来说，Linux文件缓冲区分为pagecache和buffercache，每一个pagecache包含若干buffercache。
CPinging·2020-02-06 11:56

关于Kafka broker IO的讨论 - huxihx - 博客园

ApacheKafka是大量使用磁盘和页缓存(pagecache)的，特别是对pagecache的应用被视为是Kafka实现高吞吐量的重要因素之一。
·2020-02-03 19:00

Kafka 设计详解之网络通信

Kafka的流行源于他优秀的设计，如依靠磁盘（以及操作系统的PageCache）而不是内存来存储队列数据、充分使用零拷贝（zero-copy）以减少数据在不同内存空间间的拷贝、数据尽可能的使用顺序读写等
两棵橘树·2020-01-06 00:12

address_space & file & inode & page descriptor

pagedescriptor:http://blog.csdn.net/lcw_202/article/details/5955783pagecache:http://duartes.org/gustavo
酒桶九筒·2019-12-31 10:33

page cache和buffer cache

如果pagecache的数据被修改过后，也即脏数据，等到写入磁盘时机到来时，会转移到bufferc
保罗大哥·2019-12-18 18:31

ES - 集群点滴

Elasticsearch足够的内存,而且是物理内存.一般来说,运行Elasticsearch的JVM进程不应该超过可用内存的50%或60%,这样做是因为要留一些可用内存给操作系统以及操作系统的I/O缓存(PageCache
君剑·2019-12-17 09:02

Kafka高吞吐低延迟原理

目录顺序读写PageCache零拷贝分区分段+索引批量读写批量压缩顺序读写  Kafka将消息记录持久化到本地磁盘中，实际上不管是内存还是磁盘，快或慢关键在于寻址的方式，磁盘分为顺序读写与随机读写，内存也一样分为顺序读写与随机读写
K. Bob·2019-12-15 15:23

消息中间件如何保证消息可靠性

Kafkaproducer端ack机制ack=0发送端不感应broker是否接收成功ack=1消息发送到leaderbroker上，就认为消息发送成功了；但是消息还在pagecache的时候，其他follow
缄默的石头·2019-12-13 22:37

[file system]miscellaneous

RedisAOF文件的系统调用writebackwritethroughCache写机制：Write-through与Write-backpagecache在Linux内核中，文件的每个数据块最多只能对应一个pagecache
酒桶九筒·2019-12-12 21:00

几种常见的性能优化的方法

1.使用数据压缩算法，减少落盘数据大小，要针对不同的数据选择不同的压缩算法，考虑压缩率；2.使用内存映射技术，减少数据拷贝，充分利用pageCache；3.充分利用顺序读和顺序写，减少磁盘寻道和寻址时间
静了静心123·2019-11-27 20:30

kafka是如何做到高效的

总体架构：利用Partition实现并行处理ISR实现可用性与数据一致性的动态平衡具体设计：顺序写磁盘充分利用PageCache零拷贝批处理高效的序列化方式数据压缩降低网络负载Kafka客户端和服务端通信采取的是
txxs·2019-10-23 21:38

【RocketMQ消息存储】索引文件+PageCache+模型图示+为何RocketMQ默认设置单个CommitLog日志数据文件为1G？

2【PageCache】pagecache的概念。系统的所有文件I/O请求，操作系统都是通过pagecache机制实现的。
平静不绝望·2019-10-13 11:10

简介PHP的Yii框架中缓存的一些高级用法

页面缓存由yii\filters\PageCache类提供支持，该类是一个过滤器。
·2019-09-24 01:07

PHP 实现页面静态化的几种方法

/filterpost.html");//在这里可以判断文件是否存在和过期，然后做缓存或者生成静态文件操作$pageCache=str_replace('submit2','login'
·2019-09-22 22:25

Rocketmq 常见错误和性能优化，system busy

Rocketmq相传都是亿级消息吞吐能力，但是配置不对，使用不当会导致Rocketmq的性能大大折扣刷盘策略首先在看问题之前我们看看Rocketmq的刷盘策略，RocketMQ的所有消息都是持久化的，先写入系统PAGECACHE
cliuyang·2019-08-25 15:12

pagecache与mmap

pagecachelinux对文件的读写必须先走pagecache，pagecache是内存中的一块区域，这样做的好处是，在写入的时候不直接写入硬盘，而是写入内存，可以加速读写。
ZMRWEGo·2019-08-03 09:49

ElasticSearch中的JVM性能调优

但谈到JVM配置参数，少不了操作系统层面上的一些配置参数，比如pagecache和文件描述符的个数：(/etc/security/limits.conf)。另外ESjvm.
hapjin·2019-07-12 23:00
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他