03.时间复杂度和空间复杂度-01

算法效率的度量方法

上一章提到的设计算法要尽量提高效率,这里效率高一般指的是算法的执行时间短

事后统计

这种方法主要是通过设计好的测试程序和数据,利用计算机计时器对不同算法编制的程序的运行时间进行比较,从而确定算法效率的高低

但是这个方法有比较大的缺陷

  • 必须要依据算法事先编写好测试程序,通常需要花费大量的时间和精力,但是测试出来的结果并不理想时,就花费了大量的无用功

  • 不同的测试环境差别比较大

事先估算

在算法编写前,依据统计方法对算法进行估算

经过总结,算法在计算机运行时所消耗的时间取决于以下因素:

  • 算法才用的策略、方案

  • 编译产生的代码质量(编译器的优劣有比较大的影响)

  • 问题的输入规模

  • 机器执行指令的速度(硬件方面)

由此可见,在不考虑计算机硬件(指令执行速度)、软件(语言、编译器)的因素,一个程序的运行时间依赖于算法的好坏和问题的输入规模(输入量)

例:

public int sum1(int n) {
   int sum = 0;                            // 执行一次
   for (int i = 1; i <= n; i++) {          // 执行n + 1次
       sum += i;                           // 执行n次
   }
   return sum;
}

public int sum2(int n) {
   int sum = 0;                            // 执行一次
   sum = (1 + n) * n / 2;                  // 执行一次
  return sum;
}

以上为两种求和算法

  • 第一种算法执行了 1 + (n + 1 )+ n = 2n + 2次

  • 第二种算法执行了 1 + 1 = 2次

如果我们把循环看做一个整体,不考虑判断以及初始化的开销,那么两个算法就是n和1的差距

注:for循环的过程中会先进行判断,才会进入循环体,在最后一次判断并不进入所以为n + 1次,那么为什么不考虑这个判断时间呢,请看下面的例子

int n = 10000;
int x = 0;
for (int i = 0; i < n; i++) {
  for (int j = 0; j < n; j++) {
    x++;
    sum = sum + x;
  }
}

这个例子中,外层循环每执行一次,内部循环会执行10000次,而且循环内的逻辑可能会很复杂,在这种情况下,判断的时间是可以忽略不计的

另一方面,我们研究算法的复杂度,侧重的是研究算法随着输入规模扩大增长量的一个抽象,而不是精确的定位需要执行几条指令,如果精确到指令执行条数有需要考虑编译器优化等问题了。所以对于这个例子,我们可以判定需要执行n^2

我们不关心编写程序所用的语言,也不关心程序跑在什么样的机器上,我们只关心他所实现的算法,这样不计循环索引的递增和循环终止条件、变量声明、打印等操作。最终在分析程序运行时间的时候,最重要的就是把程序堪称是独立于程序设计语言的算法或是一系列步骤。我们在分析一个算法的运行时间是,最重要的是\color{red}{把基本操作的数量和输入模式关联起来}

不同时间复杂度示意图

函数的渐进增长

测试一:

判断一下两个算法A和算法B那个更好

假设两个算法的输入规模都是n

  • 算法A要做2n + 3次操作
  • 算法B要做3n + 1次操作

先来看一个统计数据

规模 算法A1(2n+3) 算法A2(2n) 算法B1(3n+1) 算法B2(3n)
n=1 5 2 4 3
n=2 7 4 7 6
n=3 9 6 10 9
n=10 23 20 31 30
n=100 203 200 301 300

当n=1时,算法A1效率不如算法B1;当n=2时,两者相率相同;当n>2时,算法A1就开始优于算法B1,随着n的继续增加,算法A1比算法B1逐步拉大差距。所以总体来说算法A1比算法B1更优秀。

各算法对比图

从以上图表中我们发现,随着n的增大,算法A1和算法A2、算法B1和算法B2近乎重合,所以+3、+1等常数项其实是不影响最终的算法变化曲线的。

就此我们可以得出结论,给定两个函数f(n)和g(n),如果存在一个整数N,使得所有的n>N,f(n)总是大于g(n),那么我们说f(n)的增长渐近快于g(n),如上例子N为3

测试二:

  • 算法C:4n+8
  • 算法D:2n^2+1

同样我们先看统计数据

规模 算法C1(4n+8 算法C2(n 算法D1(2n^2+1 算法D2(n^2
n=1 12 1 3 1
n=2 16 2 9 4
n=3 20 3 19 9
n=10 48 10 201 100
n=100 408 100 20001 10000
n=1000 4008 1000 2000001 1000000
各算法对比

通过观察以上图表,我们发现去掉与n相乘的常数,两者的结果还是没有改变(这里针对C和D之间的比较),算法C2的次数随着n的增长,还是远小于算法D2的。也就是说,与最高次项相乘的常数并不重要,也可以忽略。

测试三:

  • 算法E:2n^2+3n+1
  • 算法F:2n^3+3n+1

同样我们先看统计数据

规模 算法E1(2n^2+3n+1 算法E2(n^2 算法F1(2n^3+3n+1 算法F2(n^3
n=1 6 1 6 1
n=2 15 4 23 8
n=3 28 9 64 27
n=10 231 100 2031 1000
n=100 20301 10000 2000301 1000000
各算法对比

通过观察以上图表,我们又发现,最高次项的指数大的,函数随着n的增长,结果也回变得增长特别快。

最后一个测试

  • 算法G:2n^2
  • 算法H:3n+1
  • 算法I:2n^3+3n+1

通过测试一、测试二我们可以看做

  • 算法G:n^2
  • 算法H:n
  • 算法I:n^3

再根据测试三可以比较出H>G>I

通过以上所有测试,我们得出结论,判断一个算法效率时,\color{red}{函数中的常数和次要项通常可以忽略不计,而更应该关注最高项的阶数}

注意:判断一个算法好坏时,我们只通过少量的数据是不能做出准确判断的,很容易以偏概全。


内容均来源于学习资料,在学习过程中进行记录,如有侵权联系作者进行删除

Change the world by program

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 219,490评论 6 508
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,581评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 165,830评论 0 356
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,957评论 1 295
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,974评论 6 393
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,754评论 1 307
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,464评论 3 420
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,357评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,847评论 1 317
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,995评论 3 338
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,137评论 1 351
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,819评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,482评论 3 331
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 32,023评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,149评论 1 272
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,409评论 3 373
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 45,086评论 2 355