为什么要使用memcache?

大家好,我是IT修真院深圳分院第03期学员,一枚正直纯洁善良的程序员。今天给大家分享一下,修真院官网JAVA(职业)任务6的深度思考:

为什么要使用memcache?

背景介绍

1.为什么要使用缓存?

在大多数Web应用都将数据保存到关系型数据库中,WWW服务器从中读取数据并在浏览器中显示。但随着数据量的增大、访问的集中,就会出现关系型数据的负担加重、数据库响应缓慢、网站打开延迟等问题。

通过在内存中缓存数据库的查询结果,减少数据访问次数,以提高动态Web应用的速度,提高网站架构的并发能力和可扩展性。

2.memcache是什么?为什么需要memcache(它的作用)?

使用memcache之前,每个服务器的缓存是分开的,总的容量等于单个服务器的缓存容量,还要分出精力去维护所有服务器上缓存的数据,让它们保存一致,如下图。


使用memcache前

使用memcache之后:把每一个使用了缓存的服务器称作节点,memcache则是把这些节点组成一个节点池。 1.容量增大,总的容量是所有服务器缓存容量的总和。2.一个指定的数据的将在同一个节点上进行读写,不需要保持节点间的数据一致,如下图。


使用memcache后

知识剖析

1.memcache到底是什么?

MemCache是一个自由、源码开放、高性能、分布式的分布式内存对象缓存系统,用于动态Web应用以减轻数据库的负载。它通过在内存中缓存数据和对象来减少读取数据库的次数,从而提高了网站访问的速度。MemCaChe是一个存储键值对的HashMap,在内存中对任意的数据(比如字符串、对象等)所使用的key-value存储。

2.memcache的访问模型


memcache访问模型

看图说话

1.可以在同一个服务器上分出多个端口作为一个memcached节点

2.图中分为应用程序服务器和memcache服务器,也就是说,我们可以专门准备一个服务器,不装应用程序,只作为memcache服务器使用。

3.理一下MemCache一次写缓存的过程

service方法里传入需要写缓存的数据并规定key==》

客户端将key传到内部的路由算法模块==》

得到key对应HashCode==》

路由算法根据Key和Memcache几圈服务器列表得到一台服务器编号==》

由服务器编号得到MemCache的IP地址和端口号==》

客户端调用通信模块和指定编号的服务器通信,将数据写入该服务器。

4.MemCache的一次读缓存的过程

读缓存跟写缓存的步骤差不多。


路由算法

1、余数Hash算法

原理:假设key对应的HashCode是50,memcache服务器数目为3,取余数2,那么这个key对应节点node2。

优点:算法简单,能满足绝大多数的缓存路由需求。

缺点:扩容会导致get命中率大幅度下降。

下图中,红色字体表示get命中

扩容前后对比

2.一致性Hash算法

原理:先构造一个长度为232的证书换(这个环被称为一致性Hash环),根据节点名称的Hash值(值的分布范围为[0,232-1])把MemCache服务器节点放在这个Hsah环上,接着根据需要缓存的数据的Key对应的Hash值(值的分布范围也是[0,232-1]),然后在Hash环上顺时针查找距离这Key的Hash值最近的服务器节点,完成一次写操作。

优点:扩容方便,get命中率下降的不是很厉害。而且,节点数越多,每次扩容后get命中率下降越小。也就是说,你不用熬夜加班扩容、预热缓存。也就是说,你没有加班费了。

扩容前


扩容后


Memcache实现原理

首先要理解下面的一些概念:

1)MemCache的数据是存放在内存中的;

2)这里面涉及4个概念:slab_class,slab,page,chunk

3)MemCache将内存分为一组slab,每个slab下又有若干个page,每个page大小都是固定的1M;

4)每个page里面包含一组chunk,chunk是真正存放数据的地方,同一个slab里面的chunk大小是固定的;

5)有相同大小chunk的slb被组织在一起,被称为slab_class。


MemCache中的value过来存放的地方是由value的大小决定的,value总是会被存放到与chunk大小最接近的一个slab中,比如slab[1]的chunk大小为80字节、slab[2]的chunk大小为100字节、slab[3]的chunk大小为128字节(相邻slab内的chunk基本以1.25为比例进行增长,MemCache启动时可以用-f指定这个比例),那么过来一个88字节的value,这个value将被放到2号slab中。放slab的时候,首先slab要申请内存,申请内存是以page为单位的,所以在放入第一个数据的时候,无论大小为多少,都会有1M大小的page被分配给该slab。申请到page后,slab会将这个page的内存按chunk的大小进行切分,这样就变成了一个chunk数组,最后从这个chunk数组中选择一个用于存储数据。

Memcache常用命令

1.安装命令

memcache依赖于libevent,要先安装libevent才能安装memcache

2.启动命令

3.查看命令

stats               返回MemCache通用统计信息

stats items      返回哥哥slab中item的数目和最老的item的年龄(最后一次访问举例现在的秒数)

statsslabs       返回MemCache运行期间创建的每个slab的信息


常见问题

1.memcache和memcached的区别?

memcache是项目的名称,memcached是memcache服务器端可执行文件的名称。


2.memcache无可用连接?

解决思路:

确认服务器上的memcached服务有没有打开==》服务器用telnet看能不能连上memcached

本地用telnet连接服务器的memcached

重启服务器


为什么使用memcache?_腾讯视频


PPT戳这里

今天的分享就到这里啦,欢迎大家点赞、转发、留言、拍砖~

技能树.IT修真院

“我们相信人人都可以成为一个工程师,现在开始,找个师兄,带你入门,掌控自己学习的节奏,学习的路上不再迷茫”。

这里是技能树.IT修真院,成千上万的师兄在这里找到了自己的学习路线,学习透明化,成长可见化,师兄1对1免费指导。快来与我一起学习吧。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 206,126评论 6 481
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 88,254评论 2 382
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 152,445评论 0 341
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 55,185评论 1 278
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 64,178评论 5 371
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,970评论 1 284
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,276评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,927评论 0 259
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 43,400评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,883评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,997评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,646评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,213评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,204评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,423评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,423评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,722评论 2 345

推荐阅读更多精彩内容