利用FFmpeg转码视频并支持裁剪,这是目前我们团队提到的一个需求点,我们的项目多采用Swift语言,Demo便采用Swift吧,并不影响核心代码。两套方案:fftools和API,本章采用fftools实现,下一章实现调用FFmpeg API实现视频转码
在FFmpeg 命令行工具我们已经详细介绍了视频转码的命令和参数配置,本文结合需求将iPhone录制的mov转码为MP4,也可直接将原始码流转码为MP4。
开始前,我们先用iPhone录制一个mov格式的视频,保存在了Demo里面使用。
-
1、将编译好的FFmpeg、x264、fdk_aac导入工程
-
2、修配置头文件搜索路径,在工程文件->Bulid Setting->Search Paths->Header Search Paths添加(PRODUCT_NAME)/FFmpeg-iOS/include,(请根据自己实际路径更改)
-
3、添加依赖:
libbz2.tbd
libz.tbd
libiconv.tbd
CoreMedia.framework
VideoToolbox.framework
AudioToolbox.framework
AVFoundation.framework
到这一步其实已经可以使用library库了,如果要对音视频进行操作,需要手动写C++代码去调用 API 使用FFmpeg。你可以导入 #import "avformat.h" 在代码中 写 av_register_all() 然后进行编译,如果没有报错,代表编译成功。av_register_all() 目前版本已经弃用,只是做测试。
如果想要使用Tool工具来调用 FFmpg 的话,就是直接通过调用传参的方式执行ffmpeg 命令的话,就需要导入对应的文件。
-
4、集成FFmpeg的命令行工具fftools
在iOS上集成FFmpeg的命令行工具fftools是个繁琐的过程,各个版本之间还有差异,需要导入的文件不一样.
从 ffmpeg-4.2 中找到以下fftools文件夹并拷贝以下相关文件:
从scratch 文件夹中找到
config.h
-
5、注释代码、补充文件,如果不清楚用途基本上是缺啥补啥
cmdutils.c
注释:
#include "compat/va_copy.h"
#include "libavresample/avresample.h"
#include "libavutil/libm.h"
PRINT_LIB_INFO(avresample, AVRESAMPLE, flags, level);
添加:
libavformat/network.h 文件
ffmpeg.h
添加:
libavutil/thread.h 文件
ffprobr.c
注释:
#include "libavutil/libm.h"
ffmpeg_filter.c
注释:
#include "libavresample/avresample.h"
ffmpeg.c
注释:
#include "libavutil/internal.h"
#include "libavutil/libm.h"
ff_dlog(NULL, "force_key_frame: n:%f n_forced:%f prev_forced_n:%f t:%f prev_forced_t:%f -> res:%f\n",
ost->forced_keyframes_expr_const_values[FKF_N],
ost->forced_keyframes_expr_const_values[FKF_N_FORCED],
ost->forced_keyframes_expr_const_values[FKF_PREV_FORCED_N],
ost->forced_keyframes_expr_const_values[FKF_T],
ost->forced_keyframes_expr_const_values[FKF_PREV_FORCED_T],
res);
新增:
#include "libavcodec/mathops.h"
#include "libavutil/reverse.h"
到此基本上就文件添加、修改差不多了,编译。
优化:
1、避免两个main函数问题:
ffmpeg.h 文件下增加函数声明:
int ffmpeg_main(int argc, char **argv);
ffmpeg.c 文件中:
main函数修改为ffmpeg_main;主要是为了避免两个main函数存在
2、计数器置零问题 (ffmpeg.c的代码中会访问空属性导致程序崩溃)
在 ffmpeg.c 中 找到 ffmpeg_cleanup 方法,在 term_exit() 前,将各个计数器置零:
nb_filtergraphs=0;
nb_output_files=0;
nb_output_streams=0;
nb_input_files=0;
nb_input_streams=0;
3、命令执行结束崩溃问题
Tips:FFmpeg 默认执行完会执行 exit_program 方法结束进程,而iOS下只能启动一个进程,如果默认不做处理,执行完一条命令后app就自动退出了,所以需要做一个处理。
解决方案有两种:
(1)第一种方案(有缺点):
网上流传的方法的方法都是找到 exit_program 函数,然后注释掉结束进程的代码,然后调用 pthread_exit 结束线程来代替结束进程,进行解决。
这种方法的缺点:
- 执行完 ffmpeg 的 main 函数后会回调一个code,这个回调是用于判断命令指定过程中是否执行错误的回调。但是我们如果在退出的时候调用了pthread_exit 这样线程就结束了,然后也不会走执行是否成功的回调了。
- 并且这样的话,想要监听到命令结束,必须要注册一个通知,进行监听线程结束。
(2)第二种方案(修复缺点):
- 在命令执行完不进行结束线程和进程,只进行 cleanup。
具体做法:
- 在 ffmpeg.c把所有调用 exit_program 函数 ,改为调用 ffmpeg_cleanup 函数就可以了。
iOS 调用 FFmpeg Tool
目前为止,我们做完上面所有步骤后,我们已经可以调用 FFmpeg Tool 进行各种音视频操作了,例如视频合成、视频转Gif、视频帧操作、视频特效、格式转换,视频调速,等各种操作了。Demo里面实现了本文提到的视频转码功能。
Demo的代码套用网上现有,跟业务相关的需要自己修改。
//转换视频
- (void)converWithInputPath:(NSString *)inputPath
outputPath:(NSString *)outpath
processBlock:(void (^)(float process))processBlock
completionBlock:(void (^)(NSError *error))completionBlock {
self.processBlock = processBlock;
self.completionBlock = completionBlock;
self.isBegin = NO;
// ffmpeg语法,可根据需求自行更改 !#$ 为分割标记符,也可以使用空格代替
NSString *commandStr = [NSString stringWithFormat:@"ffmpeg!#$-ss!#$00:00:00!#$-i!#$%@!#$-b:v!#$2000K!#$-y!#$%@", inputPath, outpath];
[[[NSThread alloc] initWithTarget:self selector:@selector(runCmd:) object:commandStr] start];
}
// 执行指令
- (void)runCmd:(NSString *)commandStr{
// 判断转换状态
if (self.isRuning) {
NSLog(@"正在转换,稍后重试");
}
self.isRuning = YES;
// 根据 !#$ 将指令分割为指令数组
NSArray *argv_array = [commandStr componentsSeparatedByString:(@"!#$")];
// 将OC对象转换为对应的C对象
int argc = (int)argv_array.count;
char** argv = (char**)malloc(sizeof(char*)*argc);
for(int i=0; i < argc; i++) {
argv[i] = (char*)malloc(sizeof(char)*1024);
strcpy(argv[i],[[argv_array objectAtIndex:i] UTF8String]);
}
ffmpeg_main(argc,argv);
}
获取转码进度
- 打开视频源时获取总时长
ffmpeg_opt.c
1、添加头文件 #include "LEYFFmpegConverOC.h"
2、在static int open_input_file(OptionsContext *o, const char *filename)函数的恰当位置添加回调
setDuration(ic->duration);
我放在av_freep(&opts)释放内存之前。
- 获取当前转码进度
ffmpeg.c
1、添加头文件 #include "LEYFFmpegConverOC.h"
2、在static void print_report(int is_last_report, int64_t timer_start, int64_t cur_time)函数的恰当位置添加回调
setCurrentTime(buf.str);
我放在 fflush(stderr)语句之前。
- 转码结束
ffmpeg.c
1、添加头文件 #include "LEYFFmpegConverOC.h"
2、在ffmpeg_cleanup函数的term_exit()语句之前添加stopRuning();
写在最后
FFmpeg非常强大,相应的,编译选项也就非常的多,要深入了解每个编译选项的意义,这样编译出来的库文件才是适合自己的:用最小的库实现自己的需求。
本教程FFmpeg版本为最新4.2,只单纯集成FFmpeg,没有使用x264和fdk_aac,如需使用自己单独编译替换lib和对应的include即可,iOS使用fftools转码Demo
如果喜欢,请帮忙点赞。支持转载,转载请附原文链接。