缓存设计

开发平台之缓存设计

上一篇《开发平台之组织架构设计》背景平台里面有一些数据会经常被访问，比如：菜单的链接、数据字典、常用配置等，而且不会发生频繁的改动，这些数据都应该考虑加入缓存来优化查询速度，避免频繁地从数据库直接查询获取。那在我们常见的应用中有哪些常见的缓存呢？常见缓存EhCacheEhcache是一种广泛使用的开源Java分布式缓存。主要面向通用缓存,JavaEE和轻量级容器。它具有内存和磁盘存储，缓存加载器,
架构老A·2019-11-07 07:56

浅谈Web系统设计之缓存

然而一个合适的，高效的缓存设计方案却并非易事。本文将简单介绍一下缓存设计所要注意的方面，以便让有需求的系统设计者能够很快地了解缓存设计的相关知识。
点融黑帮·2019-11-05 03:50

Fresco用法介绍

为了最大限度节省空间和cpu时间，它含有3级缓存设计（2级内存，1级文件）。(3).Fresco中设计有一个叫做Drawees模块，方便地显示loading图。
写代码的向日葵·2019-11-05 02:14

LinkedHashMap 与 LRU

答：LRU是一种流行的替换算法，它的全称是LeastRecentlyUsed，最近最少使用，常常在缓存设计的场景中充当一种策略，它的核心思路是最近刚被使用的很快再次被用的可能性最高，而最久没被访问的很快再次被用的可能性最低
Little丶Jerry·2019-11-03 16:15

iOS架构设计-URL缓存（下）

iOS架构设计-URL缓存（下）2017-07-15崔江涛Cocoa开发者社区本文转载自崔江涛（KenshinCui）缓存设计从前面对于URLLoadingSystem的分析可以看出利用NSURLProtocol
C9090·2019-11-02 00:42

Fresco源码浅析-ImagePipeline模块（三）

官方流程图如下：imagepipeline.png这和主要的图片加载逻辑基本类似，既然如此，那我们就从图片加载组件最主要的两个方面入手分析源码：1）如何自定义缓存线程和加载线程的配置；2）缓存设计算法。
panda_Vicky·2019-11-01 01:47

iOS缓存设计（阅读笔记）

市面上常见的缓存库分类基于文件系统：TMDiskCache,PINDiskCache,SDWebImage优点：实现都比较简单缺点：不方便扩展、没有元数据、难以实现较好的淘汰算法、数据统计缓慢。基于mmap：MMKV，FastImageCache,优点：直接在内存中操作文件，对比文件I/O更快缺点：热数据的文件不要超过物理内存大小，不然mmap会导致内存交换严重降低性能，如果数据还未同步时程序挂掉
10m每秒滑行·2019-10-31 21:35

Mybatis缓存机制

MyBatis将数据缓存设计成两级结构，分为一级缓存、二级缓存，如下图所示：一级缓存1.一级缓存简介  一级缓存基于PrepetualCache的HashMap本地缓存，其存储作用域为Session，位于表示一次数据库会话的
不知名的蛋挞·2019-10-31 01:59

这道缓存设计题你有必要看看！

哦！金九银十招聘季，社畜跳槽，学生出笼，也是非常热闹。不过今年继续互联网寒冬，能苟着还是苟着吧，猥琐发育别浪。苟着除了写Bug，还要干啥呢？必然是学习啊，吴小胖也没啥能帮你们的，就送你们一道面试题看看吧。下面我们开始吧！很多系统设计的面试题，都是工作中的最佳实践。在工作中每天CRUD，接触不到“高大上”的技术，可替代性就很强，分分钟被面试官碾压。欢迎工作一到五年的Java工程师朋友们加入JavaQ
kukelook·2019-10-28 22:33

这道缓存设计题你有必要看看！

本文转载自公众号程序员吴小胖金九银十招聘季，社畜跳槽，学生出笼，也是非常热闹。不过今年继续互联网寒冬，能苟着还是苟着吧，猥琐发育别浪。苟着除了写Bug，还要干啥呢？必然是学习啊，吴小胖也没啥能帮你们的，就送你们一道面试题看看吧。下面我们开始吧，很多系统设计的面试题，都是工作中的最佳实践。在工作中每天CRUD，接触不到“高大上”的技术，可替代性就很强，分分钟被面试官碾压。怎么来破这个局呢？多看看小灰
程序员小灰·2019-10-06 10:00

《深入理解Mybatis原理》 05-Mybatis二级缓存详解

本文目录结构如下：Mybatis缓存机制整体设计二级缓存的工作模式使用二级缓存必须要具备的条件Mybatis二级缓存设计分析1.Mybatis缓存机制整体设计如上图所示，当开启一个会话时，SqlSession
jackcheng1117·2019-09-21 15:58

LRU缓存设计

设计一个LRU算法（最近最少移除）来实现缓存思路：使用双向链表+HashMap实现采取尾插法，未达到存储上限就每次在加入到链表尾部访问链表节点，就将对应链表节点移到尾部，保持尾节点数据最新链表长度达到上限就删除头节点代码：publicclassLRUCache{privateNodehead;privateNodeend;//存储上限privateintlimit;privateHashMapha
水墨之白·2019-09-18 19:05

缓存设计中的热点问题讨论

阅读目录缓存穿透缓存雪崩缓存击穿缓存热点缓存穿透缓存穿透是指缓存没有起到作用，应用程序的请求大量到达了后端数据库的情况。因为查询时如果所需数据在缓存中不存在，便会到数据库中进行再次查询，当这样的数据量太大时，说明我们的缓存系统根本没有其他应有的作用。造成这样情况的有两个原因：数据本身就不存在，我们通常用命中率用来衡量缓存系统设计的好坏，一般来说命中率能够达到80%以上说明就不错了。当对一些系统中不
-零·2019-09-03 22:00

第十一章 缓存设计

缓存能够有效地加速应用的读写速度，同时也可以降低后端负载，对日常应用的开发至关重要。但是将缓存加入应用架构后也会带来一些问题，本章将针对这些问题介绍缓存使用技巧和设计方案，包含如下内容：缓存更新策略的选择和使用场景。缓存粒度控制方法。穿透问题优化。无底洞问题优化。雪崩问题优化。热点key重建优化。11.1缓存的收益和成本图11-1左侧为客户端直接调用存储层的架构，右侧为比较典型的缓存层+存储层架构
super_pcm·2019-08-21 17:27

缓存设计的核心要素

1、容量规划缓存内容的大小（缓存的数据不易过大，尤其是redis，单线程模式，数据过大容易阻塞其他处理请求）缓存内容的数量淘汰策略缓存的数据结构每秒的读峰值每秒的写峰值2、性能优化线程模型预热方法缓存分片冷热数据的比例3、高可用复制模型失效转移持久策略缓存重建4、缓存监控缓存服务监控缓存容量监控缓存请求监控缓存响应时间监控5、注意事项是否可能发生缓存穿透（缓存穿透：使用不存在的key进行大量的高并
*饼饼*·2019-08-19 21:27

redis-缓存设计和优化

缓存的收益与成本收益加速读写降低后端负载成本数据不一致代码维护成本更高：多了一层缓存逻辑运维成本：Rediscluster使用场景降低后端负载：对高消耗的运算结果进行缓存加速请求响应I/0大量写合并为批量写：先累计在DB持久化缓存更新策略LRU/LFU/FIFO算法剔除：maxmemory-policy超时剔除：expire主动更新：开发控制生命周期一致性：3>2>1低一致性要求时：最大内存和淘汰
leejiliang·2019-08-10 09:27

redis通用缓存设计（4）

前面三篇博客基本上实现了通用缓存的设计。但是在实际开发中，一般将数据不经常改动的业务（比如查询业务）做成缓存，把增删改业务执行完后从缓存中删除掉，通过再次查询把结果纳入缓存，就实现了缓存的实时更新。解决方案：设计一个后置通知，在完成增删改操作业务后，把缓存中的数据删除掉，redis缓存中有很多的数据，怎么保证只删除某一模块的数据呢？例如只删除User模块的数据，其他的数据不动此时就要考虑到存入re
乘着风破万浪·2019-08-08 16:00

基于“大中台+小前台”思想的电商系统总体架构设计

5.天然的分库分表，消息解耦和分布式缓存设计，支持弹性扩容，以支持大数据高并发场景。二、系统逻辑架构图2.1、电商中台中台部分在逻辑
liuhuiteng·2019-08-06 09:04

分布式架构心得

1.为什么要分布式2.分布式架构带来的挑战3.提高可靠性的设计3.1监控设计3.2一致性设计3.3重试设计3.4熔断设计3.5限流设计3.6降级设计4.提高性能的设计4.1缓存设计4.2异步设计4.3数据库设计
wang_yb·2019-07-22 10:00

如何更新缓存吗？如何保证缓存和数据库双写一致性？

再更新缓存先更新缓存，再更新数据库先删除缓存，再更新数据库先更新数据库，再删除缓存删除缓存失败，导致不一致读写分离，导致不一致前言在项目中缓存是经常用到的，为了减少和数据库的交互，小伙伴们利用缓存的思路如下：缓存设计思路我们小伙伴们有没有考虑到缓存更新的问题
若小寒·2019-06-21 14:17

2019-06-10 面试记录

新浪微博发微博场景，读扩散缓存设计短域名系统concurrent包下面的类MySQL事务隔离级别，如何实现mvcc分布式事务分布式锁单机系统到分布式系统带来的问题HashMapConcurrentHashMap
umgsai·2019-06-19 16:11

Linux 3.10内核锁瓶颈描述以及解决-IPv6路由cache的性能缺陷

IPv6路由缓存设计不合理导致争锁。Overlayfs的mount设计不合理导致争锁。凌晨将近两点半，本文再解一例。即描述IPv6路由cache的设计缺陷问题以及相应
dog250·2019-06-07 02:37

Redis从入门到高可用分布式实践11缓存

第11章缓存设计与优化讲解将缓存加入应用架构后带来的一些问题，这些问题常常会成为应用的致命点。
A记录学习路线·2019-06-05 19:52

Redis的，思维导图「超详细」

通过思维导图整理的Redis的重要知识点一、持久化 二、复制 三、阻塞 四、Redis内存 五、Redis内存优化 六、哨兵 七、缓存设计
itmrchen·2019-05-29 00:00

redis(11)-缓存设计

缓存穿透缓存穿透是指查询一个根本不存在的数据，缓存层和存储层都不会命中，通常出于容错的考虑，如果从存储层查不到数据则不写入缓存层，整个过程分为如下3步：1）缓存层不命中。2）存储层不命中，不将空结果写回缓存。3）返回空结果。缓存穿透将导致不存在的数据每次请求都要到存储层去查询，失去了缓存保护后端存储的意义。缓存穿透问题可能会使后端存储负载加大，由于很多后端存储不具备高并发性，甚至可能造成后端存储宕
灵性的韭菜选手·2019-04-29 13:35

NSURLCache 缓存机制浅谈

HTTP协议对于缓存设计了很多机制，感兴趣的同学可以看看《RFC2616-section13-CachinginHTTP》。
莫云溪·2019-04-17 08:43

RecyclerView从认识到实践(1)

前言作为一个Android开发，RecyclerView一定是不陌生的，其优秀的代码设计和丰富的功能实现，可以帮助我们迅速的实现我们日常的一些业务需求，同时其内部的缓存设计也很好的提升了我们的App流畅度
Jensen·2019-03-22 00:00

Fresco缓存设计分析

(第一篇)Fresco架构设计赏析本文是Fresco源码分析系列第二篇文章,主要来看一下Fresco中有关图片缓存的内容。引言先来回顾一下上一篇文章中的一幅图:NetworkFetchSequence.png这张图描述了Fresco在第一次网络图片时所经历的过程，从图中可以看出涉及到缓存的Producer共有4个:BitmapMemroyCacheGetProducer、BitmapMemoryC
susion哒哒·2019-03-04 21:19

flowable源码解读之LRU缓存设计

流程数据的定义在flowable中是比较复杂的,涉及到多张数据库表关联关系，这些在一个流程引擎中也是最为核心的数据，并且需要进行频繁的读取，所以为了实现读取的高效性，flowable将流程定义的数据放在内存中，需要时直接从内存中获取。本文就简单看一看flowable是怎么实现缓存的。1.用户定义的入口先回顾一下，如果我们要在Spring环境中使用flowable必须采用类似方式定义一个beanSp
Acamy丶·2019-02-23 18:05

聊聊android列表视图的缓存设计

我们都知道在手机应用中显示列表数据是最常见的一种使用场景，比如新闻、微博、朋友圈等，但是由于移动设备的性能有限（尤其是内存），当我们在绘制列表视图时不可能将成百上千条数据一下子全部绘制到界面上，否则在低配手机上必然会引起应用卡顿甚至OOM，从而导致应用体验很差。在这种情况下我们该如何对应用进行优化呢？android中提供了listview和recyclerview两个列表视图控件来支持大量数据在界
codeKeeper·2019-02-17 14:44

VMware Virtual SAN存储设计规划

点击此处查看原文目录一、容量规划11)原始容量12)允许的故障数13)计算所需容量24)容量大小设置准则35)虚拟机对象的注意事项4二、SSD缓存设计计划51)在PCIe或SSD闪存设备之间进行选择52
Bella小旭·2019-01-09 14:22

Fresco用法详解

官方地址官方github地址：https://github.com/facebook/fresco官方地址：https://www.fresco-cn.org/fresco优缺点优点:内存管理，三级缓存设计图片预览
Mr.release·2019-01-09 10:35

程序员焦虑语言和框架，是因为没掌握核心？

物理设计包含：磁盘存储设计，内存缓存设计，核心数据结构设计，一致性问题处理，容灾设计等；软件设计方面包含：模块划分，接口定义，设计模式应用，核心数据传输结构设计等。拥有上面的核心能
leelight·2019-01-03 19:47

Java 本地缓存设计与实现：Cache（Google-Guava）& Map（JDK）

一、概要1、设计目标：*缓存*存储形式：键值对；*主要功能：存、取、清除单个、清除全部...二、实现1、实现思路定义一个接口（ICache），来规范缓存类该有的行为（存、取、清除单个、清除全部...）实现类来实现ICache2、Demo2.1基于基于Google-Guava的Cache实现的本地缓存技术点：com.google.common.cache.Cachepackagespzc.platf
Sunxn1991·2018-12-29 10:44

程序员为什么焦虑于编程语言和框架？

物理设计包含：磁盘存储设计，内存缓存设计，核心数据结构设计，一致性问题处理，容灾设计等；软件设计方面包含：模块划分，接口定义，设计模式应用，核心数据传输结构设计等。
首席数据师·2018-12-18 16:49

高并发场景设计（一）缓存设计

什么是缓存缓存的定义：用于存储数据的硬件或软件的组成部分，以使得后续更快访问相应的数据。典型的应用场景：有cpucache,磁盘cache等。缓存的使用随着客户端请求量的增加，以及服务对响应时间要求的提升，单纯的依赖数据库DB已不能满足需求，尤其是对于多读写少的场景，可以将一部分数据存入缓存，利用内存读写的速度远远高于磁盘或者DB的读写速度，提升系统整体的吞吐量。缓存的设计常遇到的问题缓存穿透：大
wei906·2018-12-04 23:09

Fresco简单的使用

为了最大限度节省空间和CPU时间，它含有3级缓存设计（2级内存，1级磁盘）。Dr
CarlosLynn·2018-11-24 18:31

缓存设计需要注意的坑

今天讲的这个话题，我相信是众多工程师和团队的痛。从我刚开始工作，那时候构建本地缓存，到后续memcache,Redis的出现，到现在各种分布式集群的缓存，例如redisCluster等产品的出现，缓存越来越发达和复杂了，缓存对我们的系统也越发重要，现在很难相信一个后端服务里没有缓存的存在。在这篇文章里，我会和大家分享一下过去踩到的缓存坑，然后试图给出一些解决方案，大家可以一起讨论，最终拿出更好的方
挑灯夜读·2018-10-29 11:53

酷狗java秋招笔试题

酷狗java秋招笔试题单选题1、在命中率极高的缓存设计中，时间复杂度最差的数据结构是（B）。A.数组B.链表C.树D.哈希表2、某二叉树共有11个结点，其叶子结点只有2个。
多纤果冻·2018-10-28 09:28

缓存设计之缓存穿透、缓存雪崩！

激活的商人3d仁德的飞行地球网络接口使用缓存的优缺点：优点：提高系统响应速度，加速读写，Redis将数全都存放在内存中，响应速度更快。降低了后台的负载，减少了对后端的直接访问缺点：数据一致性问题，缓存层的数据与存储层的数据可能存在不一致的问题维护复杂度高了，加入缓存后要同时处理缓存曾和持久层的代码逻辑缓存穿透问题缓存穿透就是指查询一个根本不存在的数据，导致很多请求直接穿过了缓存层直接到了持久层，，
weixin_33842328·2018-10-20 15:32

基于大中台架构的电商业务中台最佳实践之一：业务中台总体架构介绍

天然的分库分表，消息解耦和分布式缓存设计，支持弹性扩容，以支持大数据高并发场景。系统逻辑架构图：接下来将分别介绍每个部分。电商中台:中台部分在逻辑上分
yinghe_one·2018-10-18 13:04

LRU缓存算法缓存设计和

什么是缓存？举个例子，去图书馆查资料，一般情况下我们会集中把我们有可能查阅的几本书从书架取下来，放在我们的桌面上，以便交叉查阅，从而避免频繁的从座位上跑到书架旁去取书。在这个例子里，书桌所扮演的就是缓存的角色。缓存有两个特点：能在某种程度上降低访问数据的成本；其容量远小于外部存储的容量，如本例子中，书桌上能容纳的书本数就远小于书架的。什么是LRU缓存?LRU（LeastRecentlyUsed）缓
寇浩哲·2018-09-30 16:38

缓存知识

权限系统是管理类系统中必不可少的一个模块，一个好的缓存设计更是权限系统的重中之重，今天来聊下如何更好设计权限系统的缓存。
小七奇奇·2018-09-09 20:25

权限系统缓存设计知多少

权限系统是管理类系统中必不可少的一个模块，一个好的缓存设计更是权限系统的重中之重，今天来聊下如何更好设计权限系统的缓存。
赵孤鸿·2018-09-09 18:00

【Redis】缓存设计

缓存的收益和成本收益加速读写：缓存是全内存的，可以加速读写，优化用户体验降低后端负载：减少后端访问量和复杂计算，降低了负载成本数据不一致：缓存层和存储层的数据存在着一定时间窗口的不一致性，时间窗口和更新策略有关代码维护成本：需要同时处理缓存层和存储层的逻辑运维成本：例如RedisCluster，增大了运维成本缓存更新策略LRU/LFU/FIFO算法剔除使用场景：缓存使用量超过了预设的最大值，根据相
Francis-Leo·2018-09-09 09:56

微服务化之缓存设计

微服务化之缓存设计一、为什么需要缓存缓存作为微服务化设计的一把利剑，解决了高并发、大数据场景下的数据预读能力，大大提高了服务的性能。可以说缓存无处不在，但是真正使用好缓存并不是一件容易的事情。
架构进阶之路·2018-09-03 00:00

Kotlin开源项目

项目通过一个天气的例子很好的展示了kotlin带来的强大功能，比如网络数据的请求，数据的缓存设计，数据库的操作，各种扩展函数的妙用等等。地
程序亦非猿580230·2018-08-21 16:47

阿里云王牌架构师杨曦：也谈系统缓存设计误区及高阶使用技巧

阿里云高级解决方案架构师杨旭世界最大混合云的总架构师，4年前，开始作为双11阿里云技术负责人，负责搭建全球最大的混合云结构，把“双11”的电商业务和技术场景在阿里云上实现，并保障这个混合云在双11当天能够满足全球客户的购物需求。正文相信很多研发同学都有过引入缓存进入到应用架构设计中的经历，本文从几个角度阐述一些选型误区和使用误区以及高阶使用技巧等，供开发者参考。1.什么情况下开始考虑缓存？缓存的主
代码派·2018-08-17 16:37

，关于缓存穿透、缓存并发、缓存雪崩那些事

本节给出通用的解决方案，以供在缓存设计的过程中参考和使用。1缓存穿透缓存穿透指的是使用不存在的key进行大量的高并发查询，这导致缓存无法命中，每次请求都要
董利强·2018-07-21 22:17

面对海量请求，缓存设计还应该考虑哪些问题？

从第一个缓存框架Memcached诞生以来，缓存就广泛地存在于互联网应用中。如果你的应用流量很小，那么使用缓存可能并不需要做多余的考虑。但如果你的应用流量达到了成百上千万，那么你就不得不考虑深层次的缓存问题：缓存穿透、缓存击穿与缓存雪崩。缓存穿透缓存穿透是指查询一个一定不存在的数据，因为这个数据不存在，所以永远不会被缓存，所以每次请求都会去请求数据库。例如我们请求一个UserID为-1的用户数据，
陈树义·2018-07-06 10:41
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他