FFmpeg开发——AAC音频格式解析

前言

前一篇文章我们分析了MP4文件的文件格式,接下来我们深入文件内,分析它的数据格式,今天我们主要主要分析的是音频格式AAC。AAC全称Advanced Audio Coding,是相比于MP3更优秀的音频编码格式:更多的采样率,更多的声道,更好的压缩算法等。目前它也是MP4文件中音频部分的数据的常见编码格式。

如果我们测试了之前文章的demo,并调用了av_dump_format函数的话,就会打印如下的类似的媒体信息:

  Duration: 00:00:10.00, start: 0.000000, bitrate: 2279 kb/s
  Stream #-1:0[0x1](und): Video: h264 (High) (avc1 / 0x31637661), yuv420p(progressive), 1920x1080 [SAR 1:1 DAR 16:9], 1927 kb/s, 30 fps, 30 tbr, 15360 tbn (default)
    Metadata:
      handler_name    : VideoHandler
      vendor_id       : [0][0][0][0]
  Stream #-1:1[0x2](und): Audio: aac (LC) (mp4a / 0x6134706D), 48000 Hz, 5.1, fltp, 340 kb/s (default)
    Metadata:
      handler_name    : SoundHandler
      vendor_id       : [0][0][0][0]

我们看到一般至少有两个数据流,其中一个就是音频流,Audio: aac (LC),表明音频就是使用了aac编码格式。

AAC基本格式

AAC标准来源于ISO/IEC 13818-7,所以我们的分析也主要来自于该文档。

AAC编码格式分为两种类型:ADIF(Audio Data Interchange Format)和ADTS(Audio Data Transport Stream),其中后者是互联网上更加常见的类型。

我们一个一个说。

ADIF

ADIF格式在标准文章中的定义如下:

image.png

这是一个伪代码(C)的定义,主要把ADIF数据分为一个header+一个data Stream(byte_alignment是为了和header做内存对齐用的)。

image.png

header部分的结构如下:

image.png

我们可以看到header部分最多一共占有155bit的空间。
我们把字段罗列一下:

字段 占位(bit) 含义
adif_id 32 值固定为0x41444946,即字符串 "ADIF "的 ASCII 表示
copyright_id_present 1 表明copyright_id是否存在
copyright_id 72 版权信息,该字段由 8 位版权标识符和 64 位版权编号组成
original_copy 1
home 1
bitstream_type 1 0,:固定速率比特流,1:可变速录比特流
bitrate 23 比特率(可变速率时表示比特率最大值)
num_program_config_elements 4 配置程序数量(略)
adif_buffer_fullness 20

ADIF的数据只有一个数据头,也即ADIF音频数据只能从头开始进行解码播放。

ADTS(重点)

ADTS则用于ADIF不同,ADTS把音频数据分为不同的帧组成,每个帧中有独立的头部和数据。其数据解析方式定义如下:

image.png

从伪代码中我们可以看到,数据被循环读取,每次都读取一个Frame,而在Frame读取内部,则是先读取header(读取两次),然后读取data。

adts_fixed_header

首先读取固定头部数据:adts_fixed_header

image.png

固定头部的占位是28bit,我们把固定头部数据罗列一下:

字段 占位(bit) 含义
syncword 12 总是0xfff,标识帧开始的位置
ID 1 表示算法ID,对于ffmpeg音频为固定1
layer 2 表明处于哪个层级:"11" Layer I, "10" Layer II, "01" Layer III,"00" reserved
protection_absent 1 判断error_check() data 是否存在
profile 2 配置选项(3种:Main profile/LC/SSR)
sampling_frequency_index 4 指向采样频率取值的下标
private_bit 1
channel_configuration 3 声道配置
original_copy 1
home 1

sampling_frequency_index

表示采样频率表的下标,可以获取采样频率值。

image.png

channel_configuration

声道配置,表示该音频的数据声道数,根据声道数来确定不同的解析方式。

image.png

adts_variable_header

然后是可变头部数据:adts_variable_header

image.png

可变头部的占位也是28bit,我们把可变头部数据罗列一下:

字段 占位(bit) 含义
copyright_identification_bit 1 版权标识相关
copyright_identification_start 1 版权标识相关
aac_frame_length 13 音频帧的大小(含header)
adts_buffer_fullness 11
number_of_raw_data_blocks_in_frame 2 raw_data_blocks的数量+1

我们可以做一个ADTS基本数据结构的示意图:固定头部+可变头部+data

image.png

由于ADTS的的数据结构是分帧结构,每个帧有自己独立的header部分,也意味着ADTS格式的数据可以从任意位置(任意帧)开始解码,播放。这也更加符合目前互联网上对于音频的消费习惯,所以ADTS的音频格式在互联网上更加流行。

数据部分

AAC文件的数据主要是原始数据流部分,且围绕着音频的编码过程进行,这就超出了本文的探讨了。有兴趣的同学可以查看文档ISO/IEC 13818-7

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 219,188评论 6 508
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,464评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 165,562评论 0 356
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,893评论 1 295
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,917评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,708评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,430评论 3 420
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,342评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,801评论 1 317
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,976评论 3 337
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,115评论 1 351
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,804评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,458评论 3 331
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 32,008评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,135评论 1 272
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,365评论 3 373
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 45,055评论 2 355

推荐阅读更多精彩内容