SQL优化分享

SQL优化分享

最近公司部门内部进行了一次分享,是总工给我们进行的一次关于SQL优化的内容。相信关于SQL的优化也是很多公司都会遇到的一个问题,而之前进行的项目就由于数据库的原始设计方式问题较大,因此SQL查询效率很低。而这次分享就针对这个痛点,让我们受益匪浅。

优化方式

数据库优化的方式(以ORACLE)主要包括:语句优化,执行优化,存储优化,系统优化,物理优化。这几种优化有效程度和消耗比由大到小的顺序就是上面的顺序。因此我们也应当先关注效用比大的优化方式。(同时语句优化和执行优化可能也是程序员能接触到的最好的优化方式。)数据库优化的本质就是减少磁盘IO消耗。

#语句优化
1、 过滤优先做
2、 group尽量早执行
3、 去重优先进行
4、 避免笛卡尔积
语句优化的核心就在于两点:减少操作的数据、利用上索引。

#执行优化
1、 创建合适的索引
2、 缩小事务范围
3、 使用合适的表连接方式
4、 SQL执行计划理解
执行上的优化大多都是围绕索引来进行的,创建一个合适的索引就能减少极大的IO次数。

#存储优化,系统优化,物理优化
.....
和之前的两点不一样,之前两点主要减少的是IO的次数,而这几点最主要的是增大IO的速度。两者都能减少整体的查询速度。

索引原理

索引是我们优化数据库速度的一个利器,同时也是极其便利的一个方式。也因此,我们也不能忽略增加索引引起的消耗问题。利用索引优化的本质是利用空间换取时间,因此增加索引会增加空间复杂度,同时索引优化了查询速度,但是会劣化插入速度。

索引本质上是一种存储数据的方式,常见的利用树形结构来存储数据的引用地址从而快速地找到某一具体数据的位置。这种方式就是索引。

索引的速度实际与索引的层级有关,一般来说数据越多,层级也就越多。但是两者并不存在必然关系。如果两者数据量相差巨大,但是层级一致。那么两者查询速度应该是差不多的。

利用索引

#函数
当使用函数时,且所筛选的字段没有明确表明其不为空(直接指定 not null 或 主键指定)不会用到索引。值得注意的是MAX,MIN函数特别的都会用到索引,这是由于索引建立时就会自然的进行排序。所以扫描时会有特别的max min扫描。

#回表优化
很多人都知道不要在生产机中使用/SELECT * FROM .../的语句。这就是因为当你使用*的时候就会使用索引找到主键,然后通过回表的方式再找到其他字段。而这样是会消耗时间的。所以更好的做法是直接明确的写出自己需要的字段。

#复合索引
当需要多个字段的限定谓词时,可以建立复合索引优化查询速度。

#oder by排序
排序对数据库性能的消耗是十分巨大的,而如同之前所说的:索引建立时就会自然的进行排序。因此索引对order by排序的性能优化是十分明显的。

#leading优化
这个主要是指多表连接时的加载顺序优化,我们应当先加载小的表,也就是小标驱动大表。

索引类型

类型 说明
B数索引 最常用的默认索引
位图索引 对整体类型较少的,比如存储选项值的字段效果好。但是可能会导致锁表。慎用
组合索引 用在对多个字段索引时
函数索引 用来解决使用了函数之后不走索引的问题
反向索引 解决热块问题,引起的性能问题。将索引所在块分开储存
分区索引 针对条目数千万级别以上,将一个大的表分割开来查询
全文索引 主要是针对文字中的具体内容检索加快

注意事项

1、利用复合索引中,where条件应当包含复合索引的第一列。这样才会被识别。

2、避免在索引列上使用函数。

3、避免使用前置通配符,如 *12345 不会利用到索引,而 12345* 这样是会利用到的。必要时可用字符串查询(instr())来替代like。

4、避免使用 not or 谓词在索引列。

5、减少对表的查询,子查询层次减少。

6、where子句链接顺序,过滤大的谓词写在最后。因为ORACLE是从右往左执行过滤。

7、连接的列尽量避免字符串操作如||

规范

1、单条SQL不超过100行。

2、嵌套子查询尽量不超过三层。

3、每张表的索引不超过五条。

4、禁止在每条列字段都加索引。

5、索引尽量加在表间关联字段。

6、禁止在生产系统使用*。

7、禁止使用不含字段列表的insert语句。

8、避免join连接过多的表。

9、where从句中尽量减少函数和操作。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,036评论 6 506
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,046评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,411评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,622评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,661评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,521评论 1 304
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,288评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,200评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,644评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,837评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,953评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,673评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,281评论 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,889评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,011评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,119评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,901评论 2 355

推荐阅读更多精彩内容