如何正确地进行pgbench

1. assert带来的性能影响

非正式版本的pgbench打开了assert。通过以下命令来确定:

 postgres=# show debug_assertions;
  debug_assertions 
 ------------------
  off
 (1 row)

如果该设置是关闭的(编译时决定是否打开),则这里看不到什么内容。

2. 默认配置不是最佳性能

默认的配置postgresql.conf会使得pgbench的性能很差。可以重点修改这两个配置,能够带来明显的性能提升:

  • shared_buffers
    这个对读和写都有很明显的性能影响。使用最少256MB的大小可以得到很大部分的性能提升。
  • checkpoint_segments
    如果你使用了默认的配置或者其他写操作比例很大的测试配置,你需要把这个调大一点来得到更好的性能结果。至少16。这是一个经验值。
    还有很多其他参数可以影响基本的性能,包括effective_cache_sizework_mem,但他们对简单的测试配置是没有影响的。
    可以参考这样一个配置,它创建了一个数据库集群。假设你已经设置了PGDATAPGLOG来保存集群相关日志和启动相关日志。
 initdb
 SHARED_BUFFERS="256MB"
 WAL_BUFFERS="16MB"
 CHECKPOINT_SEGMENTS="16"
 echo \# Changes for pgbench testing >> $PGDATA/postgresql.conf
 echo shared_buffers=$SHARED_BUFFERS >> $PGDATA/postgresql.conf
 echo wal_buffers=$WAL_BUFFERS >> $PGDATA/postgresql.conf
 echo checkpoint_segments=$CHECKPOINT_SEGMENTS >> $PGDATA/postgresql.conf
 pg_ctl start -l $PGLOG

3. 正确创建pgbench sample数据库

最简单的方法是使用一个小数据库(刚好适合shared_buffers),然后scale大于核心数,然后负载只有select:

  • 设置shared_buffers='256MB'
  • 创建一个scale为10的数据库(大概160MB大小)
 createdb pgbench
 pgbench -i -s 10 pgbench
  1. 基线
    这里是一个2job4client跑30秒的示例,适合一个2核的系统:
 pgbench -T 30 -j 2 -S -c 4 pgbench

注意clients必须是核心数的整数倍,所以对于-j 2,我们不能只使用一个client进行测试。
这是一个在多个client上的负载示例:

CORES="2"
 CLIENTS="2 4 8 16 32"
 for c in $CLIENTS; do
   pgbench -T 30 -j $CORES -S -c $c pgbench
 done

4. 缓存问题

注意如果你在初始化步骤之后立刻用只有select的负载来跑pgbench,你很大可能用到了warm cache。这会使得你所有需要的数据都是在内存中的。如果你做些事情来清理pg库和OS的缓存,比如重启,pgbench就会变的慢了。因为它会从表(特别是accounts表)读每一个block到内存中来,这样会导致seeks而不是顺序读。
有缓存性能
无缓存性能 --> 更难系统的比较

--

相关资源:

参考:
Regression_Testing_with_pgbench
Pgbenchtesting

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,732评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,496评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,264评论 0 338
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,807评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,806评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,675评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,029评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,683评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 41,704评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,666评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,773评论 1 332
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,413评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,016评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,978评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,204评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,083评论 2 350
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,503评论 2 343

推荐阅读更多精彩内容

  • 关于Mongodb的全面总结 MongoDB的内部构造《MongoDB The Definitive Guide》...
    中v中阅读 31,894评论 2 89
  • About:PostgreSQL About 《PostgreSQL 源码分析系列》 PostgreSQL 源码分...
    ty4z2008阅读 8,161评论 1 40
  • 1、通过CocoaPods安装项目名称项目信息 AFNetworking网络请求组件 FMDB本地数据库组件 SD...
    阳明先生_x阅读 15,967评论 3 119
  • 题记: 我听见风穿过心间 你长成我心上的茧 从此以后 每年的这一天 抵过了流年 说起来这是一个非常简单的故事,电影...
    十二君子阅读 841评论 4 24
  • 在Resources文件夹里面放入资源。加载如: 扩展方法-扩展系统组件ref 、out、params参数区别 r...
    zcwfeng阅读 126评论 0 1