简介
FFmpeg是一套可以用来记录、转换数字音频、视频，并能将其转化为流的开源计算机程序。采用LGPL或GPL许可证。它提供了录制、转换以及流化音视频的完整解决方案，包括了领先的音、视频编码库libavcodec等。
以下是各个模块功能简要说明：
libavformat：用于各种音视频封装格式的生成和解析；
libavcodec：用于各种类型声音、图像编解码；
libavutil：包含一些公共的工具函数；
libswscale：用于视频场景比例缩放、色彩映射转换；
libpostproc：用于后期效果处理；
ffmpeg：该项目提供的一个工具，可用于格式转换、解码或电视卡即时编码等；
ffsever：一个 HTTP 多媒体即时广播串流服务器；
ffplay：是一个简单的播放器，使用ffmpeg 库解析和解码，通过SDL显示；
实现功能
代码地址 https://github.com/QinminiOS/FFmpeg/
- 图片、声音合成视频。
- 视频编码转换。
- 视频加水印。
- 视频滤镜。
库文件编译
1、编译编解码库文件
由于FFmpeg库文件编译的难度比较大，因此我这里主要使用了github开源的脚本文件去编译。脚本地址: FFmpeg-iOS-build-script 这个脚本更新很及时，已经支持3.0以上的版本了。这里我使用的是FFmpeg3.0的版本。因此修改了shell脚本的ffmpeg版本：
SOURCE="ffmpeg-3.0"
修改好后执行命令：
sh build-ffmpeg.sh
脚本则会自动从github中把ffmpeg源码下到本地并开始编译，编译好后在当前目录生成了FFmpeg-iOS文件夹。
注意：
在scratch目录每个架构都有一个配置文件 config.h 这个文件比较重要。它表示当前编译的库文件的配置参数。比如：开启了哪些解码器、编码器。
2、编译命令行支持库文件
当库文件编译好后，我们可以看到在当前目录生成了FFmpeg-iOS文件夹，这个文件夹就是编译生成的通用库。
由于我们在编译的时候使用了--disable-programs编译选项，如下所示：
CONFIGURE_FLAGS="--enable-cross-compile --disable-debug --disable-programs --disable-doc --enable-pic"
因此并不会编译命令行相关的工具。因此，我们需要自己编译相关文件来支持FFmpeg命令行的解析。
在编译命令解析相关的库文件的时候，我们主要用到了一下几个源文件
ffmpeg_videotoolbox.c
cmdutils.c
ffmpeg_filter.c
ffmpeg_opt.c
ffmpeg.c
ffprobe.c
在编译的时候我们需要修改ffmpeg.c的main函数，因为一个程序不能有两个main函数，在这里我们改成ffmpeg_main，如下所示：
int ffmpeg_main(int argc, char **argv)
{
int ret;
int64_t ti;
register_exit(ffmpeg_cleanup);
setvbuf(stderr,NULL,_IONBF,0); /* win32 runtime needs this */
av_log_set_flags(AV_LOG_SKIP_REPEATED);
parse_loglevel(argc, argv, options);
if(argc>1 && !strcmp(argv[1], "-d")){
run_as_daemon=1;
av_log_set_callback(log_callback_null);
argc--;
argv++;
}
//以下是省略内容
...
}
我们还需要修改cmdutils.c中的exit_program函数，删掉函数中原来的内容, 添加 return ret；并修改函数的返回类型为int。如果不修改，在FFmpeg命令执行完成后，程序会退出。
int exit_program(int ret);
int exit_program(int ret)
{
//if (program_exit)
// program_exit(ret);
//exit(ret);
return ret;
}
修改完成后，我们用Xcode新建一个静态库工程，然后将上面的源文件拖入项目中。在这里需要配置头文件搜索路径，我们主要是在FFmpeg-iOS文件夹中搜索($(SRCROOT)/../FFmpeg-iOS/include)以及ffmpeg-3.0目录中搜索($(SRCROOT)/../ffmpeg-3.0)也就是源文件中搜索。之所以要在源文件中搜索，是因为编译出来的FFmpeg-iOS文件夹中并没有拷贝所有头文件，只有必要的头文件。在这里我们不需要链接之前编译的库文件，因为静态库本来就只是编译(clang -c)和打包(ar -r)的产物，并不需要链接。
编译好后我们通过lipo -create 命令生成模拟器和真机架构的通用库。
lipo -create /Users/qinmin/Library/Developer/Xcode/DerivedData/FFmpeg-cvfzxtnwpwznsfclqrttxwgczhjv/Build/Products/Debug-iphonesimulator/libFFmpeg.a /Users/qinmin/Library/Developer/Xcode/DerivedData/FFmpeg-cvfzxtnwpwznsfclqrttxwgczhjv/Build/Products/Debug-iphoneos/libFFmpeg.a -output /Users/qinmin/Desktop/libFFmpeg.a
使用库文件
1、视频切分为图片。
extern int ffmpeg_main(int argc, char * argv[]);
- (IBAction)sliceBtnClick:(UIButton *)sender
{
dispatch_async(dispatch_get_global_queue(0, 0), ^{
char *movie = (char *)[BundlePath(@"1.mp4") UTF8String];
char *outPic = (char *)[DocumentPath(@"%05d.jpg") UTF8String];
char* a[] = {
"ffmpeg",
"-i",
movie,
"-r",
"10",
outPic
};
ffmpeg_main(sizeof(a)/sizeof(*a), a);
});
}
2、图片、声音合成视频。
extern int ffmpeg_main(int argc, char * argv[]);
- (IBAction)composeBtnClick:(UIButton *)sender
{
dispatch_async(dispatch_get_global_queue(0, 0), ^{
char *outPic = (char *)[DocumentPath(@"%05d.jpg") UTF8String];
char *movie = (char *)[DocumentPath(@"1.mp4") UTF8String];
char* a[] = {
"ffmpeg",
"-i",
outPic,
"-vcodec",
"mpeg4",
movie
};
ffmpeg_main(sizeof(a)/sizeof(*a), a);
});
}
3、视频编码转换。
extern int ffmpeg_main(int argc, char * argv[]);
- (IBAction)transBtnClick:(UIButton *)sender
{
dispatch_async(dispatch_get_global_queue(0, 0), ^{
char *outPic = (char *)[DocumentPath(@"out.avi") UTF8String];
char *movie = (char *)[BundlePath(@"1.mp4") UTF8String];
char* a[] = {
"ffmpeg",
"-i",
movie,
"-vcodec",
"mpeg4",
outPic
};
ffmpeg_main(sizeof(a)/sizeof(*a), a);
});
}
4、视频加水印
extern int ffmpeg_main(int argc, char * argv[]);
- (IBAction)logoBtnClick:(UIButton *)sender
{
dispatch_async(dispatch_get_global_queue(0, 0), ^{
char *outPic = (char *)[DocumentPath(@"logo.mp4") UTF8String];
char *movie = (char *)[BundlePath(@"1.mp4") UTF8String];
char logo[1024];
// 左上
sprintf(logo, "movie=%s [logo]; [in][logo] overlay=30:10 [out]", [BundlePath(@"ff.jpg") UTF8String]);
// 左下
//sprintf(logo, "movie=%s [logo]; [in][logo] overlay=30:main_h-overlay_h-10 [out]", [BundlePath(@"ff.jpg") UTF8String]);
// 右下
//sprintf(logo, "movie=%s [logo]; [in][logo] overlay=main_w-overlay_w-10:main_h-overlay_h-10 [out]", [BundlePath(@"ff.jpg") UTF8String]);
// 右上
//sprintf(logo, "movie=%s [logo]; [in][logo] overlay=main_w-overlay_w-10:10 [out]", [BundlePath(@"ff.jpg") UTF8String]);
char* a[] = {
"ffmpeg",
"-i",
movie,
"-vf",
logo,
outPic
};
ffmpeg_main(sizeof(a)/sizeof(*a), a);
});
}
5、视频滤镜
extern int ffmpeg_main(int argc, char * argv[]);
- (IBAction)filterBtnClick:(id)sender
{
dispatch_async(dispatch_get_global_queue(0, 0), ^{
char *outPic = (char *)[DocumentPath(@"filter.mp4") UTF8String];
char *movie = (char *)[BundlePath(@"1.mp4") UTF8String];
// 画格子
//char *filter = "drawgrid=w=iw/3:h=ih/3:t=2:[email protected]";
// 画矩形
char *filter = "drawbox=x=10:y=20:w=200:h=60:[email protected]";
// 裁剪
//char *filter = "crop=in_w/2:in_h/2:(in_w-out_w)/2+((in_w-out_w)/2)*sin(n/10):(in_h-out_h)/2 +((in_h-out_h)/2)*sin(n/7)";
char* a[] = {
"ffmpeg",
"-i",
movie,
"-vf",
filter,
outPic
};
ffmpeg_main(sizeof(a)/sizeof(*a), a);
});
}
效果展示
总结
在移动设备上使用FFmpeg编解码、添加滤镜等操作的时候还是很费CPU的。因此，在使用的时候需要综合考虑。
参考
https://ffmpeg.org/ffmpeg-filters.html#crop
FFmpeg-iOS-build-script