一个开发者眼中的压测

压测其实并非上线之前才进行,而是在开发之初就开始准备了。一般情况下在开发之前设计之时就应该明白哪些接口会面临高并发压力,所以在开发时就要按照能够承受高并发的标准进行开发,比如尽量减少数据库操作、采用连接池、逻辑尽量简单等等。如果逻辑确实复杂,就要采用异步处理来解决。

压测的目的

搞懂为什么要压测,这样在压测的时候才不会事倍功半,毕竟压测一次的成本还是蛮高的。压测其实有两个目的,一是测试应用在高并发情况下是否会报错,进程是否会挂掉;二是测试应用的抗压能力,预估应用的承载能力,为运维同学提供扩容的依据。

第一点很好理解,做好这一点就可以保证上线之后不出问题了。解释下第二点,我们都知道就是架构设计的再优秀,代码写的再好,应对高并发单实例始终是有限的。所以通常是在满足第一点的前提下,再根据可能到来的高并发压力来计算需要多少实例来承载,而这就需要我们压出极限。

第一次压测

接口开发完成之后就可以进行第一次压测。这一次压测可以简单压一下,在本机进行就可以。压测的目的是检查代码在高并发下是否会报错。另外,编译型语言要观察是否存在内存泄漏,比如golang。

因为本机性能有限,一般来说按照100、200、300、500进程数进行压测,压到500如果没有报错就可以进行疲劳测试,观察内存占用。

第二次压测

一般来说是不可能在线上进行压测的,所以一般都是在仿真环境。所以这就对仿真环境提出了更高的要求,有条件的要保证仿真和线上配置一致。次之也要和线上成比例,这样可以方便后续评估计算。

这一次压测重点是压极限。需要特别要注意,这里的极限不是数据库极限,不是Redis极限,而是是指应用服务器的极限承受能力。上面已经说了,压极限是为了给运维同学提供扩容的参考,所以我们要做的是压到服务器的承受极限,看下到底能够承受多大的并发。假设现在线上是双实例8C8G,仿真双实例4C4G。

比如说我们我们压出仿真的极限承受能力是1000,那么我们就可以预估线上能够承受2000并发。比如我们预估接下来我们会迎来一次5000并发的冲击,那么运维同学就可以根据这些数据来评估出相应的扩容方案。

压测的常见步骤

比如第一次压500的时候就出现了一些报错,这时候就是遇到了第一个瓶颈。当解决第一个之后再继续压500,确认解决了第一个瓶颈就可以继续往上加,如此循环直到压到服务器极限。

在这个过程中我们会遇到很多瓶颈,冲破这一路瓶颈就像过关斩将一样。

常见的瓶颈

php-fpm进程数。一般php-fpm的进程数是dynamic模式,也就是说动态调整。这种模式下无法应对瞬时的高并发情况,因为他的进程数有个逐渐增加的过程。所以需要调整成static模式然后再根据服务器性能配置合理的进程数。

负载均衡限额。比如阿里云的SLB最近就增加了配额限制,免费版的实例只有5000的最大连接数,3000的CPS和1000的QPS。

压测机性能限制。这是一个比较容易忽略限制,所以我们在压测的过程中也要注意观察压测机的负载。如果达到这个瓶颈,就要考虑采用多机压测。

应用服务器、Redis、MySQL的最大连接数、CPU和内存等等。这些都是比较严重的限制,所以一定要在压测之前就搞清楚。

如何来判断遇到了什么瓶颈。

503 -- 服务不可用,一般是负载均衡、nginx达到限制。
502 -- Bad Gateway,通常是应用进程挂掉了,或者进程不够用处理不过来。
500 -- 应用故障,一般是应用抛出了异常没有正常响应,比如达到Redis和MySQL的瓶颈。

一个不算常见的瓶颈

Redis带宽。阿里云的Redis带宽限制大概是200M+,如果数据量比较大,在高并发情况下很容易把带宽打满。目前的解决方案有两个,一是在存入Redis之前进行数据压缩,在读取Redis之后再进行解压。二是采用pb进行存储,当然这两种方案我都还没有真正使用过,等我解决了这个瓶颈再来更新。

一些压测压不出来的坑

现在大多数正式的项目都是前后端分离的,所以上述说的其实都是压后端接口,而有一种情况是压根压不出来的,那就是接口调用数。作为后端开发,一定要搞清楚承受冲击的前端页面在加载的过程中会调用几个接口,调用几次。如果不搞清楚这些,在真实环境中后端服务器就可能承受比前端服务器还高的压力,从而影响之前针对压测数据做出的评估。针对这种情况,其实最好的方案就是在开发之时就跟前端约定好接口调用规则,在接口设计和交互上进行避免。

后序

前面就已经提到过了,压测一次的成本还是挺高的。在这个过程中还要需要各方配合,所以,最好是在压测之前就做好详细的计划,这样才能事半功倍。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,761评论 5 460
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,953评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,998评论 0 320
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,248评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,130评论 4 356
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,145评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,550评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,236评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,510评论 1 291
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,601评论 2 310
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,376评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,247评论 3 313
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,613评论 3 299
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,911评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,191评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,532评论 2 342
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,739评论 2 335

推荐阅读更多精彩内容

  • Android 自定义View的各种姿势1 Activity的显示之ViewRootImpl详解 Activity...
    passiontim阅读 171,081评论 25 707
  • 目前腾讯WeTest服务器性能测试已经正式对外开放,点击链接:http://wetest.qq.com/gaps/...
    饭盒阅读 1,012评论 0 9
  • 什么是爱情?爱情就是欲望罩上了一层温情脉脉的面纱。 什么是婚姻?婚姻就是欲望戴上了一副名叫忠诚的镣铐,立起了一座名...
    虚怀若谷8阅读 226评论 0 0
  • 运算符的简写: 自增自减 运算符: 逻辑运算符: 作用是用来连接两个判断条件。 && (与) 可以理解为:并且...
    显然2017阅读 241评论 0 0
  • 有时候我们在假装勤奋和忙碌,却不知道自己真的在做什么、想要什么。说来简单,真正想清楚却很难。多反思:为什么做、怎么...
    哇哇来啦阅读 136评论 0 0