Memcached源码分析

Memcached源码分析 - 基于Libevent的网络模型实现（1）

目录一、Memcached简介二、Memcached分析1.网络模型流程分析2.网络模型数据结构3.main启动入口4.工作线程workerthread5.主线程mainthread一、Memcached简介memcached是一款非常普及的服务器端缓存软件，memcached主要是基于Libevent库进行开发的。如果你还不了解libevent相关知识，请先看我的libevent这篇文章《Lin
Jerry$·2023-03-29 06:14

Memcached源码分析-主架构分析

概述本文通过阅读memcached的源代码，剖析了memcached的主流程处理的架构设计。包括主流程的线程模型和网络事件处理机制。该架构通过一个主线程来分发客户端的连接任务，worker接管连接后负责处理客户端的各种请求。注：本文是我在2013年写的一篇博客整理而写成的。memcached简介memcached是一个基于内存的缓存系统，具有很高的性能，广泛的使用于网站的各种内容的缓存。一般用它来
一 铭·2023-03-29 05:39

memcached源码分析-指令解析模块

导航memcached源码分析memcached源码分析-网络模块memcached源码分析-指令解析模块memcached源码分析-哈希表(hashtable)模块memcached源码分析-slab
saltcc·2023-03-20 04:11

memcached源码分析-slab存储机制

导航memcached源码分析memcached源码分析-网络模块memcached源码分析-指令解析模块memcached源码分析-哈希表(hashtable)模块memcached源码分析-slab
saltcc·2023-03-17 09:17

状态机设计模式理解

3.状态机模式实例篇：Memcached源码分析之请求处理（状态机）http://www.oschina.net/question/1441503_194178
findaway123·2020-09-15 00:59

.NetCore Enyim.Caching Memcached源码分析

由于asp.netcore中的session用着感觉并不顺手，所以从最开始就重新写了套缓存框架，底层可以用本地缓存、redis、memcached，当然作为缓存，我还是优先选择了memcached。本身用.netcore的人就很少，坑的地方实在太多，像这种比较出名的框架都可能有bug，还得把源码弄下来看，文献就更少了。我用的是EnyimMemcachedCore，这是从.net上移植过来的，感觉也
lld951027·2020-08-16 13:40

memcached源码分析之线程池机制（一）

已经个把月没有写长篇博文了，最近抽了点时间，将memcached源码分析系列文章的线程机制篇给整出来，在分析源码的过程中参考了网上的一些资源。
weixin_30414155·2020-08-13 20:00

Memcached源码分析 - 网络模型（1）

Memcached源码分析-网络模型（1）Memcached源码分析-命令解析（2）Memcached源码分析-数据存储（3）Memcached源码分析-增删改查操作（4）Memcached源码分析-内存存储机制
weixin_34278190·2020-08-09 00:46

Memcached源码分析 - 数据存储（3）

Memcached源码分析-网络模型（1）Memcached源码分析-命令解析（2）Memcached源码分析-数据存储（3）Memcached源码分析-增删改查操作（4）Memcached源码分析-内存存储机制
weixin_34082789·2020-08-09 00:43

Memcached源码分析 - LRU淘汰算法（6）

Memcached源码分析-网络模型（1）Memcached源码分析-命令解析（2）Memcached源码分析-数据存储（3）Memcached源码分析-增删改查操作（4）Memcached源码分析-内存存储机制
weixin_34000916·2020-08-09 00:23

memcached源码分析-----网络模型

转载请注明出处：http://blog.csdn.net/luotuo44/article/details/42705475accept/dispatch：memcached使用"主线程统一accept/dispatch子线程"网络模型处理客户端的连接和通信，也就是《UNIX网络编程卷1第三版》第30章里面的第8个模型。"主线程统一accept/dispatch子线程"的基础设施：主线程创建多个子
luotuo44·2020-08-08 17:59

Memcached源码分析 - 消息回应实现（3）

add_iovmsghdr扩容add_msghdrIOV扩容ensure_iov_space向客户端写数据conn_mwrite发送数据transmit检查发送buf大小conn_shrink前言上一章《Memcached
阿里十年老码农zhuli·2020-08-08 16:49

Memcached源码分析 - LRU算法（6）

Memcached的LRU算法分析Memcached的LRU几种策略LRU的基本操作和存储的数据结构策略1-惰性删除策略2-flush命令策略3-分配Item的时候去检查策略4-LRU爬虫前言上一章《Memcached
阿里十年老码农zhuli·2020-08-08 16:49

Memcached源码分析 - TCP命令解析实现（2）

目录前言Memcached的命令解析源码分析连接句柄数据结构conn状态机流程分析命令的数据结构变化rbuf状态机启动drive_machine读取TCP网络数据try_read_network读取rbuf中的命令try_read_command处理命令函数process_command分解命令tokenize_commandget命令处理process_get_command向客户端写数据con
阿里十年老码农zhuli·2020-08-08 16:49

Memcached源码分析 - HashTable的实现（4）

Item操作assoc_find新增一个Item操作assoc_insert删除item操作assoc_delete扩容操作assoc_expand前言上一章我们讲解了Memcached的消息回应机制《Memcached
阿里十年老码农zhuli·2020-08-08 16:49

Memcached源码分析 - 基于Libevent的网络模型实现（1）

目录关于Memcached：Memcached分析网络模型流程分析网络模型数据结构main启动入口工作线程workerthread主线程mainthread关于Memcached：memcached是一款非常普及的服务器端缓存软件，memcached主要是基于Libevent库进行开发的。如果你还不了解libevent相关知识，请先看我的libevent这篇文章《Linuxc开发-libevent
阿里十年老码农zhuli·2020-08-08 16:18

Memcached源码分析-命令解析（3）

#1流程图2流程说明1当进入到conn_read状态后，会调用try_read_network（），将socket数据读取到conn的rbuf中。例如：char*rbuf=‘setkey004\r\ngetname\r\n’。2然后进入到conn_parse_cmd状态，调用try_read_command()方法3当前指针char*rcurr=rbuf。地址指到了字符开始的地址。4el=memc
CleverCode·2020-08-08 12:17

Memcached源码分析 - 命令解析（2）

Memcached源码分析-网络模型（1）Memcached源码分析-命令解析（2）Memcached源码分析-数据存储（3）Memcached源码分析-增删改查操作（4）Memcached源码分析-内存存储机制
Rank92·2020-08-08 11:30

Memcached源码分析 - 增删改查操作（4）

Memcached源码分析-网络模型（1）Memcached源码分析-命令解析（2）Memcached源码分析-数据存储（3）Memcached源码分析-增删改查操作（4）Memcached源码分析-内存存储机制
weixin_34190136·2020-08-08 11:57

Memcached源码分析 - 消息回应（7）

Memcached源码分析-网络模型（1）Memcached源码分析-命令解析（2）Memcached源码分析-数据存储（3）Memcached源码分析-增删改查操作（4）Memcached源码分析-内存存储机制
weixin_33863087·2020-08-08 11:21

memcached源码分析-----set命令处理流程

转载请注明出处：http://blog.csdn.net/luotuo44/article/details/44236591前一篇博文以get命令为例子把整个处理流程简单讲述了一遍，本篇博文将以set命令详细讲述memcached的处理流程。具体的命令为“settt3010”，并假设当然memcached服务器没有名为tt的item。读取命令：在前一篇博文的最后，conn的状态被设置为conn_n
luotuo44·2020-08-08 11:59

Memcached源码分析 - 增删改查操作的实现（5）

目录前言Memcached的增删改查操作源码分析增/改setaddreplace操作查询get操作删除delete操作前言在第二章《Memcached源码分析-Memcached源码分析之命令解析（2）
阿里十年老码农zhuli·2020-08-08 11:01

Memcached源码分析 - 增删改查操作（4）

Memcached源码分析-网络模型（1）Memcached源码分析-命令解析（2）Memcached源码分析-数据存储（3）Memcached源码分析-增删改查操作（4）Memcached源码分析-内存存储机制
晴天哥_374·2020-07-13 17:14

memcached源码分析-----get命令处理流程

转载请注明出处：http://blog.csdn.net/luotuo44/article/details/44217383本文以get命令为例子，探讨memcached是如何处理命令的。本文只是探讨memcached处理命令的工作流程，具体的代码细节在不影响阅读的前提下能省略的就省略、能取默认值就取默认值、内存是足够的(不需要动态申请空间就够用了)。涉及到数组、缓存区的就假设已经分配好了。现在假
luotuo44·2020-07-07 15:37

memcached源码分析-----memcached启动参数详解以及关键配置的默认值

转载请注明出处:http://blog.csdn.net/luotuo44/article/details/42672913本文开始本系列博文的代码分析。本系列博文研究的memcached版本是1.4.21。本文将给出memcached启动时各个参数的详细解释以及一些关键配置的默认值。以便在分析memcached源码时可以随时查看。当然也方便使用memcached时可以随时查看各个参数的含义。《如
luotuo44·2020-07-07 15:06

memcached源码分析-----slab automove和slab rebalance

转载请注明出处：http://blog.csdn.net/luotuo44/article/details/43015129需求：考虑这样的一个情景：在一开始，由于业务原因向memcached存储大量长度为1KB的数据，也就是说memcached服务器进程里面有很多大小为1KB的item。现在由于业务调整需要存储大量10KB的数据，并且很少使用1KB的那些数据了。由于数据越来越多，内存开始吃紧。大
luotuo44·2020-07-07 15:06

memcached源码分析-----slab内存分配器

温馨提示：本文用到了一些可以在启动memcached设置的全局变量。关于这些全局变量的含义可以参考《memcached启动参数详解》。对于这些全局变量，处理方式就像《如何阅读memcached源代码》所说的那样直接取其默认值。slab内存池分配器：slab简介：memcached使用了一个叫slab的内存分配方法，有关slab的介绍可以参考链接1和链接2。可以简单地把它看作内存池。memcache
dduvk21111·2020-07-06 16:19

Memcached源码分析 - LRU淘汰算法（6）

Memcached源码分析-网络模型（1）Memcached源码分析-命令解析（2）Memcached源码分析-数据存储（3）Memcached源码分析-增删改查操作（4）Memcached源码分析-内存存储机制
晴天哥_374·2020-07-01 23:37

Memcached源码分析之thread.c

/**文件开头先啰嗦几句：**thread.c文件代表的是线程模块。但是你会看到这个模块里面有很多其它方法，例如关于item的各种操作函数，item_alloc，item_remove，item_link等等。我们有个items模块，这些不都是items模块要做的事情吗？为什么thread模块也有？你仔细看会发现，thread里面的这种函数，例如item_remove，items模块里面都会有一个
zzm_·2020-06-28 18:46

Memcached源码分析之memcached.h

//memcached.h//返回在item中data字段key的地址，即把指针指向key#defineITEM_key(item)(((char*)&((item)->data))\+(((item)->it_flags&ITEM_CAS)?sizeof(uint64_t):0))//返回在item中data字段suffix的地址，即把指针指向suffix#defineITEM_suffix(i
weixin_34246551·2020-06-28 14:10

Memcached源码分析 - 内存存储机制Slabs（5）

Memcached源码分析-网络模型（1）Memcached源码分析-命令解析（2）Memcached源码分析-数据存储（3）Memcached源码分析-增删改查操作（4）Memcached源码分析-内存存储机制
weixin_33920401·2020-06-28 08:29

memcached源码分析一-slab

转载请注明出处https://www.cnblogs.com/yang-zd/p/11340990.html，谢谢合作！Slab作为一种内存管理方案，其作用主要有以下2点：a)避免频繁的内存分配释放造成的内存碎片b)减少内存分配操作产生的性能开销Linux内核数据结构中也有slab的设计，Linux提供了一套接口，使用这套接口可以动态创建与释放一个slab结构，该slab的chunk大小通过接口指
weixin_30906701·2020-06-28 02:29

Memcached源码阅读之服务器资源调整

本篇博客作为Memcached源码分析的开篇，这次阅读的源码版本为:1.4.15，开源软件各个版本之间差异比较大，同学们学习时，记得核对版本。
lcli·2020-06-27 07:26

Memcached源码分析之资源分享

Facebook对memcached的提升Memcached源码分析之内存管
lcli·2020-06-27 07:26

memcached源码分析-----slab内存分配器

转载请注明出处：http://blog.csdn.net/luotuo44/article/details/42737181温馨提示：本文用到了一些可以在启动memcached设置的全局变量。关于这些全局变量的含义可以参考《memcached启动参数详解》。对于这些全局变量，处理方式就像《如何阅读memcached源代码》所说的那样直接取其默认值。slab内存池分配器：slab简介：memcach
luotuo44·2020-06-24 09:40

Memcached源码分析 - 消息回应（7）

Memcached源码分析-网络模型（1）Memcached源码分析-命令解析（2）Memcached源码分析-数据存储（3）Memcached源码分析-增删改查操作（4）Memcached源码分析-内存存储机制
晴天哥_374·2020-06-24 08:10

Memcached源码分析 - 源码分析之总结篇（8）

目录Memcache的网络模型Memcached的命令解析和消息回应Memcached的缓存存储Memcached使用的注意事项Memcached源码分析共8篇文章，前7篇文章主要分析每个模块的c源代码
阿里十年老码农zhuli·2020-06-23 18:11

Memcached源码分析 - 存储机制Slabs（7）

目录前言slabclass划分数据空间slab内存分配单位slabs源码分析查询slabclassID操作slabs_clsidslabclass的初始化slabs_init分配一个item的操作do_slabs_alloc释放一个item的操作slabs_free前言前几章节我们介绍了Memcached的网络模型，命令行的解析，消息回应，HashTable，Memcached的增删改查操作以及L
阿里十年老码农zhuli·2020-06-23 18:11

Memcached源码分析之slabs.c

#include"memcached.h"#include#include#include#include#include#include#include#include#include#include#include#includetypedefstruct{unsignedintsize;/*sizesofitems*///item或者说chunk的大小unsignedintperslab;/
weixin_34221112·2020-06-21 11:04

Memcached源码分析之内存管理篇

使用命令set(key,value)向memcached插入一条数据,memcached内部是如何组织数据呢一把数据组装成itemmemcached接受到客户端的数据后,把数据组装成item,item的格式如下:图1structitem的结构源码中这样定义structitem:/***Structureforstoringitemswithinmemcached.*/typedefstruct_s
iteye_3185·2020-06-21 02:17

Memcached源码分析 - 命令解析（2）

Memcached源码分析-网络模型（1）Memcached源码分析-命令解析（2）Memcached源码分析-数据存储（3）Memcached源码分析-增删改查操作（4）Memcached源码分析-内存存储机制
晴天哥_374·2020-04-13 04:54

Memcached源码分析 - 数据存储（3）

Memcached源码分析-网络模型（1）Memcached源码分析-命令解析（2）Memcached源码分析-数据存储（3）Memcached源码分析-增删改查操作（4）Memcached源码分析-内存存储机制
晴天哥_374·2020-04-09 15:28

Memcached源码分析 - 内存存储机制Slabs（5）

Memcached源码分析-网络模型（1）Memcached源码分析-命令解析（2）Memcached源码分析-数据存储（3）Memcached源码分析-增删改查操作（4）Memcached源码分析-内存存储机制
晴天哥_374·2020-03-16 22:17

Memcached源码分析 - 网络模型（1）

Memcached源码分析-网络模型（1）Memcached源码分析-命令解析（2）Memcached源码分析-数据存储（3）Memcached源码分析-增删改查操作（4）Memcached源码分析-内存存储机制
晴天哥_374·2020-01-06 02:07

memcached源码分析三-libevent与命令解析

转载请注明出处https://www.cnblogs.com/yang-zd/p/11352833.html，谢谢合作！前面已经分析了memcached中的slabs内存管理及缓存对象如何利用item表达并存储在slabs管理的空间中，并分析了如何实现LRU策略实现缓存对象的释放。但memcached是一个client-server结构的缓存系统，服务端需要接收客户端的指令，然后在服务端做相应的操
yangzd~·2019-08-14 16:00

memcached源码分析二-lru

在前一篇文章中介绍了memcached中的内存管理策略slab，那么需要缓存的数据是如何使用slab的呢？1.缓存对象item内存分布在memcached，每一个缓存的对象都使用一个item结构体进行描述，然后再将item描述符及相应数据存储到slabs管理的内存中。缓存对象根据其大小在slabclass_t数组中选择合适的slabclass_t分配chunk进行存储。ps:slabclass_t
yangzd~·2019-08-13 11:00

memcached源码分析

memcached1.简介Memcached是一个自由开源的，高性能，分布式内存对象缓存系统。通过在内存里维护一个大的hash表，它能够用来存储各种格式的数据，包括图像、视频、文件以及数据库检索的结果。一般的使用目的是，通过缓存数据库查询结果，减少数据库访问次数，以提高动态Web应用的速度、提高可扩展性。2.特征协议简单（key-value存储系统）基于libevent的事件处理内置内存存储方式m
saltcc·2019-05-21 00:06

memcached源码分析-网络模块

导航memcached源码分析memcached源码分析-网络模块memcached源码分析-指令解析模块memcached源码分析-哈希表(hashtable)模块memcached源码分析-slab
saltcc·2019-05-21 00:51

memcached源码分析-哈希表(hashtable)模块

导航memcached源码分析memcached源码分析-网络模块memcached源码分析-指令解析模块memcached源码分析-哈希表(hashtable)模块memcached源码分析-slab
saltcc·2019-05-21 00:38

Memcached源码分析- LRU原理以及get/set命令(6)

1原理图2LRU原理每一个slabclass都会对应一个heads指针指向item链表的头部，tails指向items链表的尾部。组成一个LRU链表，链表是按照访问时间顺序排列的。1get请求命令1通过hv=hash(key,nkey)，通过hash函数计算出key的32位整数值。2通过索引数组，it=primary_hashtable[hv&hashmask(hashpower)]，找到索引数组
CleverCode·2018-09-29 16:03
上一页 1 2 3 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他