架构师训练营第7周作业 性能测试

性能压测的时候,随着并发压力的增加,系统响应时间和吞吐量如何变化,为什么?


性能测试通常分为三个阶段,分别是预期目标测试、负载测试和压力测试。如上图所示,黄色区间代表预期目标测试,绿色区间代表负载测试,红色区间代表压力测试,这三个测试阶段的并发压力是依次递增的。

可以看到,在预期目标测试期间,系统完全可以承担负载压力,因此随着负载的增高,系统所能处理的并发请求数(绿色线)也呈线性增长趋势,直至达到系统预期的性能目标。在这一阶段,系统的负载压力较小,可以快速响应所有并发请求,因此响应时间(蓝色线)很短,并且在整个阶段几乎没有什么变化。

考虑到吞吐量 = (1000 / 响应时间ms) x 并发数这一公式,可以得知在这一阶段吞吐量也是近似于线性增长的。

当系统达到预期性能指标后,并发压力继续增大,这时进入到负载测试阶段,系统资源的负载进一步升高,对请求的响应时间也开始逐渐增加,相应的,系统能够承受的并发数的增长速度便出现明显减缓的趋势。越接近系统资源负载的安全临界点,则请求响应时间越长,并发数增长越慢。这一阶段系统吞吐量将出现先增后降的情况,即一开始并发数增长率比响应时间增长率高的时候吞吐量是呈增长趋势的,而当响应时间增长率超过并发数增长率,这时候吞吐量便开始下降。

继续增加并发压力,此时系统已经满载甚至出现崩溃,越来越多的请求无法被及时处理,因此请求响应时间呈指数级快速增长,而系统的并发数则呈现出明显的下降趋势,直至最后整个系统崩溃,无法响应任何请求。这一阶段吞吐量也将呈现显著的下降趋势。

用你熟悉的编程语言写一个 web 性能压测工具,输入参数:URL,请求总次数,并发数。输出参数:平均响应时间,95% 响应时间。用这个测试工具以 10 并发、100 次请求压测 www.baidu.com

# coding: utf-8

import socket
from threading import Thread
import time
from urllib import urlopen


TIMEOUT = 2


def average(_list):
    sum = 0
    for i in _list:
        sum += i
    return sum/len(_list)


def percent_result(_list, percent):
    index = int(len(_list)*percent/100.0)
    return _list[index-1]


class RequestThread(Thread):

    def __init__(self, url):
        self.url = url
        self.response_time = -1
        self.response_status = False
        super(RequestThread, self).__init__()

    def run(self):
        try:
            start_time = time.clock()
            response = urlopen(self.url)
            self.response_time = time.clock() - start_time
        except:
            pass
        self.response_status = True


class WebPerformanceTester(object):

    def __init__(self, timeout):
        self._threads = []
        self.results = []
        self._timeout = timeout
        socket.setdefaulttimeout(timeout)

    @property
    def timeout(self):
        return self._timeout

    @timeout.setter 
    def timeout(self, timeout):
        self._timeout = timeout
        socket.setdefaulttimeout(timeout)

    def test(self, url, requests_count, concurrency_count):
        assert isinstance(requests_count, int)
        assert isinstance(concurrency_count, int)
        assert concurrency_count != 0

        print '性能测试请求地址:{}'.format(url)
        print '总请求数:{} 并发数:{} 请求超时时间:{}秒'.format(
            requests_count, concurrency_count, self.timeout)
        print '正在测试......'
        self.results = []
        
        turn = requests_count / concurrency_count
        remainder = requests_count % concurrency_count

        for _ in range(turn):
            self._prepare_threads(url, concurrency_count)
            self._do_testing()

        self._show_result(requests_count)

    def _clear_threads_pool(self):
        self._threads = []

    def _prepare_threads(self, url, concurrency_count):
        self._clear_threads_pool()
        for _ in range(concurrency_count):
            self._threads.append(RequestThread(url))

    def _do_testing(self):
        for _thread in self._threads:
            _thread.start()

        while True:
            if all([_thread.response_status for _thread in self._threads]):
                break
            time.sleep(0.5)

        for _thread in self._threads:
            self.results.append(_thread.response_time)

    def _show_result(self, requests_count):
        print '测试结束'
        self.results.sort()
        self.results = filter(lambda x: x>0, self.results)
        print '有效响应数:{} 超时响应数:{}'.format(
            len(self.results), requests_count - len(self.results))
        print '最小响应时间:{}ms 最大响应时间:{}ms'.format(
            self.results[0]*1000, self.results[-1]*1000)
        print '平均响应时间:{}ms 95%响应时间:{}ms'.format(
            average(self.results)*1000, percent_result(self.results, 95)*1000)


def main():
    tester = WebPerformanceTester(TIMEOUT)
    tester.test('http://www.baidu.com', 100, 10)


main()

运行结果:

性能测试请求地址:http://www.baidu.com
总请求数:100 并发数:10 请求超时时间:2秒
正在测试......
测试结束
有效响应数:100 超时响应数:0
最小响应时间:14.9305ms 最大响应时间:188.9546ms
平均响应时间:81.886768ms 95%响应时间:136.3102ms
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,743评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,296评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,285评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,485评论 1 283
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,581评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,821评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,960评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,719评论 0 266
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,186评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,516评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,650评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,329评论 4 330
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,936评论 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,757评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,991评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,370评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,527评论 2 349