FFmpeg简介
FFMPEG是一套具有非常强大功能的多媒体处理工具,它几乎涵盖了目前所有主流的多媒体数据封装格式、多媒体传输协议以及音视频编解码器,并且支持多媒体后处理,视频色彩转换、滤镜和缩放等,也支持众多主流的协议:HTTP、RTP、RTSP、RTMP、HLS、UDP等
FFmpeg它主要含有以下几个核心库:
1、libavcodec-提供了更加全面的编解码实现的合集
2、libavformat-提供了更加全面的音视频容器格式的封装和解析以及所支持的协议
3、libavutil-提供了一些公共函数
4、libavfilter-提供音视频的过滤器,如视频加水印、音频变声等
5、libavdevice-提供支持众多设备数据的输入与输出,如读取摄像头数据、屏幕录制
6、libswresample,libavresample-提供音频的重采样工具
7、libswscale-提供对视频图像进行色彩转换、缩放以及像素格式转换,如图像的YUV转换
8、libpostproc-多媒体后处理器
以及包含以下几个工具:
1、ffmpeg-一个流媒体的编解码、格式转换以及多媒体流的内容处理工具
2、ffplay-一个使用FFmpeg编解码的播放器
3、ffprobe-一个多媒体分析工具
4、ffserver-一个流多媒体服务器
FFmpeg命令
一些命令:
//获取帮助
ffmpeg -help
//支持的格式
ffmpeg -formats
//支持的解码
ffmpeg -decoders
//支持的编码
ffmpeg -encoders
//支持的协议
ffmpeg -protocols
//本地视频文件推流至指定rtmp流媒体服务器
ffmpeg -re -i movie.mp4 -c copy -f flv rtmp://localhost:1935/live/room
//媒体流保存为视频文件
ffmpeg -i rtmp://localhost:1935/live/room -c copy moive.flv
更多命令请看文档FFmpeg文档
FFmpeg编译
首先在官网下载FFmpeg
在root dir编辑configure文件,把以下内容
SLIBNAME_WITH_MAJOR='$(SLIBNAME).$(LIBMAJOR)'
LIB_INSTALL_EXTRA_CMD='$$(RANLIB) "$(LIBDIR)/$(LIBNAME)"'
SLIB_INSTALL_NAME='$(SLIBNAME_WITH_VERSION)'
SLIB_INSTALL_LINKS='$(SLIBNAME_WITH_MAJOR) $(SLIBNAME)'
替换成:
SLIBNAME_WITH_MAJOR='$(SLIBPREF)$(FULLNAME)-$(LIBMAJOR)$(SLIBSUF)'
LIB_INSTALL_EXTRA_CMD='$$(RANLIB) "$(LIBDIR)/$(LIBNAME)"'
SLIB_INSTALL_NAME='$(SLIBNAME_WITH_MAJOR)'
SLIB_INSTALL_LINKS='$(SLIBNAME)'
目的是修改so的文件名,为了编译出来的so能够被android平台正常使用,否则将编译出libavcodec.so.57.64.100
这种类型的so,替换后将编译成我们能正常使用的libavcodec-57.so
动态链接库,后面的数字为版本号
一般对于so,我们只需兼容arm cpu架构的即可,在root dir下新建bash脚本文件,内容为:
#!/bin/bash
NDK=/home/south/Android/android-ndk-r15c
function build_android
{
echo "Compiling FFmpeg for $CPU"
./configure \
--prefix=$PREFIX \
--enable-neon \
--enable-hwaccels \
--enable-gpl \
--enable-postproc \
--enable-shared \
--enable-jni \
--enable-mediacodec \
--enable-decoder=h264_mediacodec \
--disable-static \
--disable-doc \
--enable-ffmpeg \
--disable-ffplay \
--disable-ffprobe \
--enable-avdevice \
--disable-doc \
--disable-symver \
--cross-prefix=$CROSS_PREFIX \
--target-os=android \
--arch=$ARCH \
--cpu=$CPU \
--enable-cross-compile \
--sysroot=$SYSROOT \
--extra-cflags="-Os -fpic $OPTIMIZE_CFLAGS" \
--extra-ldflags="$ADDI_LDFLAGS" \
$ADDITIONAL_CONFIGURE_FLAG
make clean
make
make install
echo "The Compilation of FFmpeg for $CPU is completed"
}
#armv8-a
ARCH=arm64
CPU=armv8-a
TOOLCHAIN=$NDK/toolchains/aarch64-linux-android-4.9/prebuilt/linux-x86_64
SYSROOT=$NDK/platforms/android-21/arch-$ARCH/
CROSS_PREFIX=$TOOLCHAIN/bin/aarch64-linux-android-
PREFIX=$(pwd)/android/$CPU
OPTIMIZE_CFLAGS="-march=$CPU"
build_android
#armv7-a
ARCH=arm
CPU=armv7-a
TOOLCHAIN=$NDK/toolchains/arm-linux-androideabi-4.9/prebuilt/linux-x86_64
SYSROOT=$NDK/platforms/android-21/arch-$ARCH/
CROSS_PREFIX=$TOOLCHAIN/bin/arm-linux-androideabi-
PREFIX=$(pwd)/android/$CPU
OPTIMIZE_CFLAGS="-mfloat-abi=softfp -mfpu=vfp -marm -march=$CPU "
build_android
#x86
ARCH=x86
CPU=x86
TOOLCHAIN=$NDK/toolchains/x86-4.9/prebuilt/linux-x86_64
SYSROOT=$NDK/platforms/android-21/arch-$ARCH/
CROSS_PREFIX=$TOOLCHAIN/bin/i686-linux-android-
PREFIX=$(pwd)/android/$CPU
OPTIMIZE_CFLAGS="-march=i686 -mtune=intel -mssse3 -mfpmath=sse -m32"
build_android
#x86_64
ARCH=x86_64
CPU=x86-64
TOOLCHAIN=$NDK/toolchains/x86_64-4.9/prebuilt/linux-x86_64
SYSROOT=$NDK/platforms/android-21/arch-$ARCH/
CROSS_PREFIX=$TOOLCHAIN/bin/x86_64-linux-android-
PREFIX=$(pwd)/android/$CPU
OPTIMIZE_CFLAGS="-march=$CPU -msse4.2 -mpopcnt -m64 -mtune=intel"
build_android
NDK目录改为自己的NDK目录即可,关于configure配置,可以根据自己需要进行配置,可配置的属性在FFmpeg root dir的configure文件中show_help方法中查看,我摘一段:
Program options:
--disable-programs do not build command line programs
--disable-ffmpeg disable ffmpeg build
--disable-ffplay disable ffplay build
--disable-ffprobe disable ffprobe build
--disable-ffserver disable ffserver build
--disable-ffmpeg
意为禁用ffmpeg工具,编译时不编译出ffmpeg工具,--enable-ffmpeg
为启用,但是configure文件配置有个特点,FFmpeg的默认的配置不是以show_help方法中的配置配置的,而是以前缀disable
orenable
取反配置的,也就是FFmpeg中各属性默认的配置把show_help中各个配置的前缀取反即可,disable
变为enable
,enable
变为disable
,如:在上面那段配置中,--disable-ffmpeg
意为启用ffmpeg工具。
但是我们编译的bash脚本中却不是这样,而是配置的实意配置,disable
就是disable
。
运行上面的bash脚本:
cd ffmpeg-4.0.4
./android_config.sh
编译完成后可以发现在FFmpeg的root目录下多了一个android目录,该目录就是所生成对应cup架构的so目录
按以上配置的bash脚本,会发现libavcodec.so
比较大,有13.6M,肯定不能在Android中使用,所以,在编译时,我们可以针对自己需要的功能来进行配置,更改bash脚本,加入配置:
--disable-everything
该属性会把下列所有的组件都不加入编译:
Individual component options:
--disable-everything disable all components listed below
--disable-encoder=NAME disable encoder NAME
--enable-encoder=NAME enable encoder NAME
--disable-encoders disable all encoders
--disable-decoder=NAME disable decoder NAME
--enable-decoder=NAME enable decoder NAME
--disable-decoders disable all decoders
--disable-hwaccel=NAME disable hwaccel NAME
--enable-hwaccel=NAME enable hwaccel NAME
--disable-hwaccels disable all hwaccels
--disable-muxer=NAME disable muxer NAME
--enable-muxer=NAME enable muxer NAME
--disable-muxers disable all muxers
--disable-demuxer=NAME disable demuxer NAME
--enable-demuxer=NAME enable demuxer NAME
--disable-demuxers disable all demuxers
--enable-parser=NAME enable parser NAME
--disable-parser=NAME disable parser NAME
--disable-parsers disable all parsers
--enable-bsf=NAME enable bitstream filter NAME
--disable-bsf=NAME disable bitstream filter NAME
--disable-bsfs disable all bitstream filters
--enable-protocol=NAME enable protocol NAME
--disable-protocol=NAME disable protocol NAME
--disable-protocols disable all protocols
--enable-indev=NAME enable input device NAME
--disable-indev=NAME disable input device NAME
--disable-indevs disable input devices
--enable-outdev=NAME enable output device NAME
--disable-outdev=NAME disable output device NAME
--disable-outdevs disable output devices
--disable-devices disable all devices
--enable-filter=NAME enable filter NAME
--disable-filter=NAME disable filter NAME
--disable-filters disable all filters
而我们生成的libavcodec-57.so
过大也是由于加入了过多我们不需要使用的组件,禁用了所有的,接下来就是把自己需要的加入到bash脚本中配置即可,比如加入下面两个配置确保h264和aac的解码功能的保留:
--enable-decoder=h264
--enable-decoder=aac
等等,当然还有其它的,可以参考上面禁用的配置进行选择性保留。
编译支持H.264编码的FFmpeg动态链接库
x264
首先下载x264源码 x264是一个开源的H.264编码器,据说是最好的视频有损编码器,和编译FFmpeg类似,要编译x264成动态so库,一样通过configure配置文件,需要先修改configure文件中的:
echo "SOSUFFIX=so" >> config.mak
echo "SONAME=libx264.so.$API" >> config.mak
echo "SOFLAGS=-shared -Wl,-soname,\$(SONAME) $SOFLAGS" >> config.mak
替换成:
echo "SOSUFFIX=so" >> config.mak
echo "SONAME=libx264-$API.so" >> config.mak
echo "SOFLAGS=-shared -Wl,-soname,\$(SONAME) $SOFLAGS" >> config.mak
目的一样,确保可以在Android平台下可用,然后使用下面的bash脚本进行编译,arm为例:
#!/bin/bash
NDK=$HOME/Library/Android/sdk/ndk-bundle
SYSROOT=$NDK/platforms/android-14/arch-arm/
TOOLCHAIN=$NDK/toolchains/arm-linux-androideabi-4.9/prebuilt/darwin-x86_64
CPU=arm
PREFIX=$(pwd)/android/$CPU
ADDI_CFLAGS=""
ADDI_LDFLAGS=""
function build_arm
{
./configure \
--prefix=$PREFIX \
--enable-shared \
--disable-asm \
--enable-pic \
--enable-strip \
--host=arm-linux-androideabi \
--cross-prefix=$TOOLCHAIN/bin/arm-linux-androideabi- \
--sysroot=$SYSROOT
--extra-cflags="-Os -fpic $ADDI_CFLAGS" \
--extra-ldflags="$ADDI_LDFLAGS" \
$ADDITIONAL_CONFIGURE_FLAG
make clean
make
make install
}
build_arm
NDK目录同样改为自己的 运行上面脚本:
cd x264
./build_x264_arm.sh
编译完成后可以android目录找到libx264-148.so
库
静态链接x264编译
FFmpeg默认是不支持H.264的编码,不过支持H.264解码,但是FFmpeg为我们提供了众多配置,可添加额外功能库的支持,方便我们自己链接所需要额外功能的库,在FFmpeg的configure文件配置中,可以看到这么一段配置:
External library support:
//...
--enable-libfdk-aac enable AAC de/encoding via libfdk-aac [no]
--enable-libopenh264 enable H.264 encoding via OpenH264 [no]
--enable-libopenjpeg enable JPEG 2000 de/encoding via OpenJPEG [no]
--enable-librtmp enable RTMP[E] support via librtmp [no]
--enable-libwebp enable WebP encoding via libwebp [no]
--enable-libx264 enable H.264 encoding via x264 [no]
--enable-opengl enable OpenGL rendering [no]
--enable-openssl enable openssl, needed for https support
if gnutls is not used [no]
//...
避免篇幅太长,做了一部分删减,留了一些比较眼熟的,FFmpeg可以让我们自己配置添加需要的功能库,如使用fdk-aac库来做aac的编解码,H.264编码可选x264或openh264以及可选其它功能库的支持
要编译支持x264编码的FFmpeg动态链接库,首先是编译出x264静态链接库libx264.a
,然后修改FFmpeg的编译脚本,配置x264静态链接库和头文件路径,接下来即可编译了
1、编译x264静态链接库
因为FFmpeg是使用静态链接方式链接其它额外的外部功能库,所以需要把x264库编译成.a
静态库,通过--enable-static
配置参数来编译出.a
静态库,而--enable-shared
则是编译动态链接so库,所以只需在上面的x264脚本中增加个配置:
--enable-static
2、在FFmpeg脚本中配置x264静态链接库和头文件路径及编译
在此之前,先安装yasm:
--enable-gpl \
--enable-libx264 \
--enable-yasm \
--extra-cflags="-I../x264/android/arm/include" \
--extra-ldflags="-L../x264/android/arm/lib" \
然后在之前FFmpeg的脚本基础上添加以下配置:
--enable-gpl \
--enable-libx264 \
--enable-yasm \
--extra-cflags="-I../x264/android/arm/include" \
--extra-ldflags="-L../x264/android/arm/lib" \
FFmpeg默认的LICENSE是LGPL,而libx264需要GPL,所以加入--enable-gpl
,最后面两项配置是配置编译x264出的头文件和静态链接库路径,在这里我把x264和FFmpeg放在了同一目录层级,故可这样配置。 如果你需要修改--extra-cflags
和--extra-ldflags
路径为自己x264头文件和静态链接库路径,必须符合--extra-cflags
以-I开头,--extra-ldflags
以-L开头,这些参数含义为:
-D:用于在编译时定义宏 -I:编译阶段生效的参数,用于指定头文件的搜索路径 -L:链接阶段生效的参数,用于指定链接库的搜索路径,-l用于指定链接库的名称,一般两者一起使用的话,就可以指定动态链接库
比如x264在桌面上,路径为:
--extra-cflags="-I/Users/xxx/Desktop/x264/android/arm/include" \
--extra-ldflags="-L/Users/xxx/Desktop/x264/android/arm/lib" \
然后进行编译,编译中可以看到encode的支持选择中,多了libx264的支持:
其它外部添加库如fdk-aac、openh264等也类似方式链接编译
未完待续...