(摘自《程序员的自我修养》)
1. 被隐藏了的过程
当我们使用gcc来编译一个程序时,例如
gcc hello.c
运行结束后会生成一个可执行文件,事实上,该命令执行成功的背后可分为四个步骤:预处理(Prepressing)、编译(Compilation)、汇编(Assembly)、链接(Linking)
1.1 预编译
预编译主要处理那些源代码文件中以“#”开始的预编译指令。比如“#include”、“#define”等,主要处理规则如下:
- 将所有的“#define”删除,并且展开所有宏定义。
- 处理所有条件预编译指令,例如“#if”、“#else”、“#endif”等。
- 处理“#include”预编译指令,将被包含的文件插入到该预编译指令的位置。这个过程是递归进行的。
- 删除所有的注释代码。
- 添加行号和文件名标识,以便于编译时编译器产生调试用的行号信息及用于编译时产生编译错误或警告时能显示行号。
- 保留所有的“#pragma”编译器指令,因为编译时编译器须使用它们。
1.2 编译
编译就是把预处理后的文件进行一系列词法分析、语法分析、语义分析和优化后生成相应的汇编代码文件。
1.3 汇编
汇编器是将汇编代码转变成机器可以执行的指令,每一条语句基本都对应一条机器指令。
1.4 链接
先关注一下上面的内容,再来分析链接过程。
2. 编译器做了什么
编译过程一般可以分为6步:扫描、语法分析、语义分析、源代码优化、代码生成和目标代码优化。
2.1 词法分析
首先源代码程序被输入到扫描器,扫描器的任务很简单,它只是简单地进行词法分析,运用一种类似于有限状态机的算法可以很轻松地将源代码的字符序列分割成一系列的记号。这些记号一般分为如下几类:关键字、标识符、字面量(包含数字和字符串等)和特殊符号(如加号、等号)。在识别记号的同时,扫描器也完成了其他工作。比如将标识符存放到符号表,将数字、字符串常量存放到文字表等,已被后面的步骤使用。
2.2 语法分析
接下来语法分析器将对扫描器产生的记号进行语法分析,从而产生语法树。整个分析过程采用了上下文无关语法的分析手段。简单地讲,由语法分析器产生的语法树就是以表达式为节点的树。在这个阶段,如果出现了表达式不合法,比如括号不匹配,表达式中缺少操作符等,编译器就会报告语法分析阶段的错误。
2.3 语义分析
语法分析器仅仅完成了对表达式的语法层面的分析,但它并不了解这个语句是否真正有意义。比如C语言里面两个指针做乘法运算是没有意义的,但是这个语句在语法上是合法的,编译器能够分析的语义是静态语义,所谓的静态语义是指在编译期可以确定的语义,与之对应的动态语义就是只有在运算期才能确定的语义。
静态语义通常包括声明和类型的匹配,类型的转换,比如当一个浮点型的表达式转换为一个整型的表达式时,其中隐含了一个从浮点型到整型的转换过程,语义分析中需要完成这个步骤。比如将一个浮点型赋值个一个指针时,语义分析程序会发现这个类型不匹配,编译器将会报错。动态语义一般指在运行期出现的语义相关的问题,比如将0作为除数是一个运行期语义错误。
经过语义分析之后,整个语法树表达式都被标识了类型,如果有些类型需要做隐式转换,语义分析程序会在语法树中插入相应的转换节点。
2.4 中间语言生成
中间代码是由源代码优化器通过转化语法树生成的,它是语法树的顺序表示,已经非常接近目标代码了。但是它一般跟目标机器和运行时环境是无关的,比如它不包含数据的尺寸、变量地址和寄存器的名字等。中间代码有多种类型,比较常见的有P-代码和三地址码,最基本的三地址码是这样的:
x = y op z
这个三地址码表示将y和z进行op操作后赋值给x。
假设存在代码如下:
array[index] = (index + 4) * (2 + 6)
这段代码生成的语法树转换成中间代码为:
t1 = 2 + 6
t2 = index + 4
t3 = t2 * t1
array[index] = t3
为了使所有的操作都符合三地址码形式,这里采用了几个临时变量:t1、t2和t3,在三地址码基础上进行优化时,优化程序会将(2+6)的结果计算出来,得到t1=8,然后将后面的t1替换为8,还可以省去一个临时变量t3,因为t2可以重复使用,经过优化以后的代码如下:
t2 = index + 4
t2 = t2 * 8
array[index] = t2
中间代码使得编译器可以被分为前端和后端。编译器前端负责产生机器无关的中间代码,编译器后端将中间代码转换成目标机器代码。这样对于一些可以跨平台的编译器而言,它们可以针对不同的平台使用同一个前端和针对不同机器平台的数个后端。
2.5 目标代码生成和优化
源代码级优化器产生中间代码标志着下面的过程都属于编辑器后端。编译器后端主要包括代码生成器和目标代码优化器。代码生成器将中间代码生成目标机器代码,这个过程十分依赖于目标机器,因为不同机器有着不同的字长、寄存器、整数数据类型和浮点数数据类型等。对于上面例子的中间代码,代码生成器可能会生成下面的代码序列(用x86汇编语言表示):
movl index, %ecx ;将index的值写入ecx寄存器
addl $4, %ecx ;ecx = ecx + 4
mull $8, %ecx ;ecx = ecx * 8
movl index, %eax ;将index的值写入eax寄存器
movl %ecx, array(,eax,4) ;array[index] = ecx
最后目标代码优化器对上述的目标代码进行优化,
。。。未完待续