http://blog.csdn.net/kaven826/article/details/14517189
由于最近要做一个音频视频合成的东东,经过各方面的资料查找,开始锁定javaCV,想用它搞定音视频合成的问题。可后来用javacv出现了很多问题,发邮件给javacv的作者,也没有得到很好的答案,后来逼于无奈只好移植ffmepg到andorid,在Android上使用ffmpeg合成音视频的问题了,ffmpeg真的很强大,无所不能。不多说了, 下面直接介绍整个过程。
感谢如下提供资料:
http://blog.csdn.net/shn_lee/article/details/11485543
大纲如下:
一,环境配置
二,编译ffmpeg.so库,也就是移植ffmepg到android。
三,改编ffmpeg接口,供jni调用
四,测试例子
一 ,环境配置
所需工具
1,ndk-r8d
2,ubuntu 12.04 32位(我是用虚拟机的)
3,ffmpeg -1.2.4 (ffmpeg的版本最好与ndk对应,我试过很多版本,目前只有ndk-r8d和ffmpeg1.2.4能使)
4 ,jdk6
5,android sdk
6,eclipse
注:配置好ndk,网上有很多配置ndk的文章,可以搜索,这里就不多说了;
二,编译ffmpeg.so库,也就是移植ffmepg到android
1,首先在你的工程目录下建立一个jni文件夹,然后把ffmpeg-1.2.4解压到jni目录下,然后把ffmpeg-1.2.4文件夹重命名为ffmpeg
如图
2,再者在jni目录下建一个Android.mk文件,内容如下:
include $(all-subdir-makefiles)//这句话的意思是包含该目录下的所有mk文件
3,然后在jni/ffmpeg下建立Android.mk和av.mk文件,内容如下
Android.mk
LOCAL_PATH := $(call my-dir)
include $(CLEAR_VARS) //清楚所有全局变量的值 除了LOCAL_PATH
PATH_TO_FFMPEG_SOURCE:=$(LOCAL_PATH)/ffmpeg
LOCAL_C_INCLUDES += $(PATH_TO_FFMPEG_SOURCE)
LOCAL_WHOLE_STATIC_LIBRARIES := libavformat libavcodec libavfilter libavutil libpostproc libswscale libswresample
LOCAL_MODULE := ffmpeg //生成so库的名称 libffmpeg.so
include $(BUILD_SHARED_LIBRARY)
include $(call all-makefiles-under,$(LOCAL_PATH))
av.mk
# LOCAL_PATH is one of libavutil, libavcodec, libavformat, or libswscale
#include $(LOCAL_PATH)/../config-$(TARGET_ARCH).mak
include $(LOCAL_PATH)/../config.mak
OBJS :=
OBJS-yes :=
MMX-OBJS-yes :=
include $(LOCAL_PATH)/Makefile
# collect objects
OBJS-$(HAVE_MMX) += $(MMX-OBJS-yes)
OBJS += $(OBJS-yes)
FFNAME := lib$(NAME)
FFLIBS := $(foreach,NAME,$(FFLIBS),lib$(NAME))
FFCFLAGS = -DHAVE_AV_CONFIG_H -Wno-sign-compare -Wno-switch-Wno-pointer-sign
FFCFLAGS += -DTARGET_CONFIG=\"config-$(TARGET_ARCH).h\"
ALL_S_FILES := $(wildcard $(LOCAL_PATH)/$(TARGET_ARCH)/*.S)
ALL_S_FILES := $(addprefix $(TARGET_ARCH)/, $(notdir $(ALL_S_FILES)))
ifneq ($(ALL_S_FILES),)
ALL_S_OBJS := $(patsubst %.S,%.o,$(ALL_S_FILES))
C_OBJS := $(filter-out$(ALL_S_OBJS),$(OBJS))
S_OBJS := $(filter $(ALL_S_OBJS),$(OBJS))
else
C_OBJS := $(OBJS)
S_OBJS :=
endif
C_FILES := $(patsubst %.o,%.c,$(C_OBJS))
S_FILES := $(patsubst %.o,%.S,$(S_OBJS))
FFFILES := $(sort $(S_FILES)) $(sort $(C_FILES))
4,同样在jni/ffmpeg目录下建立config.sh文件,内容如下:
#!/bin/bash
PREBUILT=/home/yy/java/ndk8/android-ndk-r8d/toolchains/arm-linux-androideabi-4.4.3/prebuilt/linux-x86
PLATFORM=/home/yy/java/ndk8/android-ndk-r8d/platforms/android-14/arch-arm
./configure --target-os=linux \
--arch=arm \
--enable-version3 \
--enable-gpl \
--enable-nonfree \
--enable-shared \
--enable-stripping \
--enable-ffmpeg \
--disable-ffplay \
--disable-ffserver \
--disable-ffprobe \
--enable-decoders \
--disable-symver \
--enable-encoders \
--enable-muxers \
--disable-devices \
--enable-protocols \
--enable-protocol=file \
--enable-avfilter \
--enable-network \
--disable-avdevice \
--disable-asm \
--enable-cross-compile \
--cc=$PREBUILT/bin/arm-linux-androideabi-gcc \
--cross-prefix=$PREBUILT/bin/arm-linux-androideabi- \
--strip=$PREBUILT/bin/arm-linux-androideabi-strip \
--extra-cflags="-fPIC -DANDROID"\
--extra-ldflags="-Wl,-T,$PREBUILT/arm-linux-androideabi/lib/ldscripts/armelf_linux_eabi.x -Wl,-rpath-link=$PLATFORM/usr/lib -L$PLATFORM/usr/lib -nostdlib $PREBUILT/lib/gcc/arm-linux-androideabi/4.4.3/crtbegin.o $PREBUILT/lib/gcc/arm-linux-androideabi/4.4.3/crtend.o -lc -lm -ldl"\
sed -i 's/HAVE_LRINT 0/HAVE_LRINT 1/g'config.h
sed -i 's/HAVE_LRINTF 0/HAVE_LRINTF 1/g'config.h
sed -i 's/HAVE_ROUND 0/HAVE_ROUND 1/g'config.h
sed -i 's/HAVE_ROUNDF 0/HAVE_ROUNDF 1/g'config.h
sed -i 's/HAVE_TRUNC 0/HAVE_TRUNC 1/g'config.h
sed -i 's/HAVE_TRUNCF 0/HAVE_TRUNCF 1/g'config.h
sed -i 's/HAVE_CBRT 0/HAVE_CBRT 1/g'config.h
sed -i 's/HAVE_CBRTF 0/HAVE_CBRTF 1/g'config.h
sed -i 's/HAVE_ISINF 0/HAVE_ISINF 1/g'config.h
sed -i 's/HAVE_ISNAN 0/HAVE_ISNAN 1/g'config.h
sed -i 's/HAVE_SINF 0/HAVE_SINF 1/g'config.h
sed -i 's/HAVE_RINT 0/HAVE_RINT 1/g'config.h
# collect objects OBJS-$(HAVE_MMX) += $(MMX-OBJS-yes) OBJS += $(OBJS-yes) FFNAME := lib$(NAME) FFLIBS := $(foreach,NAME,$(FFLIBS),lib$(NAME)) FFCFLAGS = -DHAVE_AV_CONFIG_H -Wno-sign-compare -Wno-switch -Wno-pointer-sign FFCFLAGS += -DTARGET_CONFIG=\"config-$(TARGET_ARCH).h\" ALL_S_FILES := $(wildcard $(LOCAL_PATH)/$(TARGET_ARCH)/*.S) ALL_S_FILES := $(addprefix $(TARGET_ARCH)/, $(notdir $(ALL_S_FILES)))ifneq ($(ALL_S_FILES),) ALL_S_OBJS := $(patsubst %.S,%.o,$(ALL_S_FILES)) C_OBJS := $(filter-out $(ALL_S_OBJS),$(OBJS)) S_OBJS := $(filter $(ALL_S_OBJS),$(OBJS)) else C_OBJS := $(OBJS) S_OBJS := endif C_FILES := $(patsubst %.o,%.c,$(C_OBJS)) S_FILES := $(patsubst %.o,%.S,$(S_OBJS)) FFFILES := $(sort $(S_FILES)) $(sort $(C_FILES))
上面中的PREBUILT 和PLATFORM 要根据自己的ndk实际路径来配置。
5,在jni/ffmpeg/libavformat下添加Android,mk内容如下:
LOCAL_PATH := $(call my-dir)
include $(CLEAR_VARS)
include $(LOCAL_PATH)/../av.mk
LOCAL_SRC_FILES := $(FFFILES)
LOCAL_C_INCLUDES := \
$(LOCAL_PATH) \
$(LOCAL_PATH)/..
LOCAL_CFLAGS += $(FFCFLAGS)
LOCAL_CFLAGS += -include "string.h"-Dipv6mr_interface=ipv6mr_ifindex
LOCAL_LDLIBS := -lz
LOCAL_STATIC_LIBRARIES := $(FFLIBS)
LOCAL_MODULE := $(FFNAME)
include $(BUILD_STATIC_LIBRARY)
6,在jni/ffmpeg/libavcodec下添加Android,mk内容如下:
LOCAL_PATH := $(call my-dir)
include $(CLEAR_VARS)
include $(LOCAL_PATH)/../av.mk
LOCAL_SRC_FILES := $(FFFILES)
LOCAL_C_INCLUDES := \
$(LOCAL_PATH) \
$(LOCAL_PATH)/..
LOCAL_CFLAGS += $(FFCFLAGS)
LOCAL_LDLIBS := -lz
LOCAL_STATIC_LIBRARIES := $(FFLIBS)
LOCAL_MODULE := $(FFNAME)
include $(BUILD_STATIC_LIBRARY)
7,在jni/ffmpeg/libavutil libavfilter libpostproc libswscale libswresample 下添加Android,mk内容如下:
LOCAL_PATH := $(call my-dir)
include $(CLEAR_VARS)
include $(LOCAL_PATH)/../av.mk
LOCAL_SRC_FILES := $(FFFILES)
LOCAL_C_INCLUDES := \
$(LOCAL_PATH) \
$(LOCAL_PATH)/..
LOCAL_CFLAGS += $(FFCFLAGS)
LOCAL_STATIC_LIBRARIES := $(FFLIBS)
LOCAL_MODULE := $(FFNAME)
include $(BUILD_STATIC_LIBRARY)
8,运行config.sh
进去jni/ffmpeg目录下执行如下命令:
chmod +x config.sh
执行config.sh
这样就会在ffmpeg目录下生成config.h,config.log,config.mak文件
然后修改jni/ffmpeg/config.h下的
#define avrestrict restrict为#define restrict
把config.log中的restrict的关键字删掉
9,删除 libavformat libavcodec libavutil libpostproc libswscale libswresample 目录下Makefile下的
include $(SUBDIR)../config.mak
删除libavcodec libavutil libswresample目录下Makefile下的 log2_tab.o \
10,把 ffmpeg/libavutil/time.h更名为avtime.h,
同时修改下面文件中的引用libavutil/time.h为libavutil/avtime.h
ffmpeg/libavformat/avformat.h:211
ffmpeg/libavformat/avio.c:25
ffmpeg/libavformat/hls.c:33
ffmpeg/libavformat/hlsproto.c:29
ffmpeg/libavformat/mux.c:39:30
ffmpeg/libavformat/utils.c:40
ffmpeg/libavutil/time.c:36
注:上面需要修改avtime.h文件引用的部分文件。根据版本,环境不同可能还会出现其他的文件引用time.h,如果当你编译的时候说找不到time.h,你就可以根据日志显示的文件逐个修改。很好解决的。
11,最后重要的事情就是编译so库了。
回到project的目录下,如我的项目结构是是ffmpegPro/jni/ffmpeg,那么就需要退回到ffmpegPro目录下,执行
$NDK/ndk-build
如顺利就会在ffmpegPro目录下生成一个libs/armeabi的文件夹,里面会有一个libffmpeg.so的文件
这样就编译好了ffmepg的so库了。。
12,下面我介绍在编译过程中遇到的问题
问题1,编译的时候会在libavfilter文件的某个文件出现找不到time.h文件。time.h No such file or directory
解决办法:参照第10点。
问题2,出现/home/yy/Java/ndkr8/android-ndk-r8d/build/core/build-binary.mk:41: *** target file `clean' has both : and :: entries. Stop.
解决办法:找到build-binary.mk提示错误那一行,把那一行注释掉。
问题3:会出现语法不对的,如 error: expected ';', ',' or ')' before 'vi' ,原因是因为不认restrict这个关键字
解决办法:参照第8点,把restrict的关键字删掉
上面就是我遇到的问题了。。
三,改编ffmpeg接口,供jni调用
我本来想直接调用ffmpeg源码的函数用来合成音频视频的,发现对源码不熟悉,需要大量时间去研究ffmpeg的源码以及各函数的是使用,太费时了。果断放弃这个想法。还好我在网上找到了这篇文章
http://bbs.rosoo.net/thread-13362-1-1.html 给了我提示。。感谢啊。
把ffmpeg.c的main函数该函数接口,用命令来实现我的所有需要的功能,ffmpeg的命令的用法可在网上找资料,很多的命令资料,肯定有你需要的。
下面介绍实现步骤:
1,把编译好的ffmpeg.so文件复制到android-ndk-r8d/platforms/android-14/arch-arm/usr/lib目录下,注:android-14就是对应你的config.sh文件配置中的PLATFORM=/home/yy/java/ndk8/android-ndk-r8d/platforms/android-14/arch-arm的android-14
2,在jni目录下建立一个Android.mk文件(把之前的Android.mk文件删掉,或者重命名),内容如下:
LOCAL_PATH := $(call my-dir)
include $(CLEAR_VARS)
PATH_TO_FFMPEG_SOURCE:=$(LOCAL_PATH)/ffmpeg
LOCAL_C_INCLUDES += $(PATH_TO_FFMPEG_SOURCE)
LOCAL_LDLIBS := -lffmpeg -llog -ljnigraphics -lz -ldl -lgcc //这些就是所要关联的库了,刚才把ffmpeg.so复制到android-ndk-r8d/platforms/android-14/arch-arm/usr/lib目录下的原因就是为了这个
LOCAL_MODULE := ffmpeg-jni
LOCAL_SRC_FILES := ffmpeg-jni.c ffmpeg/cmdutils.h ffmpeg/cmdutils.c ffmpeg/ffmpeg.h ffmpeg/ffmpeg_opt.c ffmpeg/ffmpeg_filter.c //必须把这几个文件编译进去,不然会很多undefinded的。。
include $(BUILD_SHARED_LIBRARY)
3,同样在jni目录下建立一个ffmpeg-jni.c的文件,内容为ffmpeg.c文件的内容,只不过main函数改名为video_merge函数,然后在该.c文件创建一个jni接口,函数如下
jstring
Java_com_example_ffmpegpro_MainActivity_stringFromJNI( JNIEnv* env,
jobject thiz )
{
//LOGI("goto function video_gen()");
charconst*str;
inta=10;
char*arg[10];
arg[0]="ffmpeg";
arg[1]="-i";
arg[2]="/sdcard/movie/video2.avi";
arg[3]="-i";
arg[4]="/sdcard/movie/222.mp3";
arg[5]="-vcodec";
arg[6]="copy";
arg[7]="-acodec";
arg[8] = "copy";
arg[9]="/sdcard/movie/output.avi";
__android_log_print(ANDROID_LOG_INFO, "JNIMsg","============");
__android_log_print(ANDROID_LOG_INFO, "filePath",arg[2]);
intret = video_merge(a,arg);
str="Using FFMPEG doing your job";
return(*env)->NewStringUTF(env,str);
}
4,接下来就是编译ffmepg-jni.c了。
回到ffmepgPro的目录下,执行$NDK/ndk-build
这样就在libs/armeabi的文件夹,里面会有一个libffmpeg-jni.so的文件
这样就可以在你的andorid项目里用jni使用这个功能了。
遇到的问题列表如下:
问题1:在编译ffmpeg-jni.c的时候,遇到很多undefinded。原因是在Android.mk文件按没有把下面的文件编译进去
ffmpeg/cmdutils.h ffmpeg/cmdutils.c ffmpeg/ffmpeg.h ffmpeg/ffmpeg_opt.c ffmpeg/ffmpeg_filter.c(上面我已经加进去了)
问题2:在getutime函数中说没有定义struct rusage数据结构。storage size of 'rusage' isn't known
解决办法:在头文件找到
#if HAVE_SYS_RESOURCE_H
#include
#include
#include
#elif HAVE_GETPROCESSTIMES
把#include #include 放在if语句外面就可以了。顺便在cmdutils.c文件中,也把这两个头文件引进来。。
问题3:找不到version.h文件。version.h No such file or directory
解决办法:运行version.sh文件生成version.h 如:./version.sh . version.h
完毕,谢谢指教