Android+FFmpeg+OpenSL ES音频解码播放
- 准备工作
- 编译FFmpeg
- 开发环境
- 建立audioplayer工程
- 建立AS工程
- 实现解码播放
- 运行结果
- 本例工程下载audioplayer
准备工作
1.编译FFmpeg
下载最新版的FFmpeg，具体编译步骤参考文章：FFmpeg的Android平台移植—编译篇。
对于FFmpeg不太了解的可以先阅读雷霄骅的FFmpeg博客专栏。
2.开发环境
Windows 10
Android Studio 1.4
android-ndk-r10d
FFmpeg 3.0
具体的环境配置这里不细讲，可参考Android Studio + NDK的环境配置。
建立audioplayer工程
本文章仅介绍音频播放部分，不包含视频播放，视频播放参见Android+FFmpeg+ANativeWindow视频解码播放。
1.建立AS工程
本文采用直接从SD卡中读取音频文件进行播放，同时还要添加音频许可，因此在AndroidManifest.xml文件中添加权限：
<uses-permission android:name="android.permission.READ_EXTERNAL_STORAGE" />
<uses-permission android:name="android.permission.MODIFY_AUDIO_SETTINGS" />
<uses-permission android:name="android.permission.RECORD_AUDIO" />在本例中使用两个功能按钮，播放和停止：
<Button
android:id="@+id/play"
android:layout_width="match_parent"
android:layout_height="wrap_content"
android:text="play"/>
<Button
android:id="@+id/stop"
android:layout_width="match_parent"
android:layout_height="wrap_content"
android:text="stop"/>在MainActivity.java中实现这两个按钮的功能：
@Override
protected void onCreate(Bundle savedInstanceState) {
super.onCreate(savedInstanceState);
setContentView(R.layout.activity_main);
... ...
Button playBtn = (Button) findViewById(R.id.play);
Button stopBtn = (Button) findViewById(R.id.stop);
playBtn.setOnClickListener(this);
stopBtn.setOnClickListener(this);
}
@Override
public void onClick(View v) {
switch (v.getId()) {
case R.id.play :
new Thread(new Runnable() {
@Override
public void run() {
AudioPlayer.play();
}
}).start();
break;
case R.id.stop :
new Thread(new Runnable() {
@Override
public void run() {
AudioPlayer.stop();
}
}).start();
break;
}
}同样音频播放为耗时操作，为了不阻塞UI线程，需要新建线程播放音频。AudioPlayer类的具体实现为：
public class AudioPlayer {
public static native int play();
public static native int stop();
static {
System.loadLibrary("AudioPlayer");
}
}在AudioPlayer类中需要加载动态库，并将play和stop方法声明为本地方法。现在可以使用javah命令生成头文件：jonesx_audioplayer_AudioPlayer.h。
2.实现解码播放
首先按照文章FFmpeg的Android平台移植—编译篇：
新建jni目录，并将编译好的FFmpeg目录中的include和prebuilt文件夹拷贝到jni目录下。
在AudioPlayer.c文件中衔接的音频解码播放：
#include "log.h"
#include "jonesx_audioplayer_AudioPlayer.h"
#include "AudioDevice.h"
JNIEXPORT jint JNICALL Java_jonesx_audioplayer_AudioPlayer_play
(JNIEnv * env, jclass clazz)
{
LOGD("play");
play();
}
JNIEXPORT jint JNICALL Java_jonesx_audioplayer_AudioPlayer_stop
(JNIEnv * env, jclass clazz)
{
LOGD("stop");
shutdown();
}在AudioDevice.c中实现play和shutdown方法，主要参考ndk自带例子native_audio和Android 音频 OpenSL ES PCM数据播放。
#include "AudioDevice.h"
#include "FFmpegAudioPlay.h"
#include 接下来实现FFmpeg解码音频文件，具体实现在FFmpegAudioPlay.c中：
#include "log.h"
#include "FFmpegAudioPlay.h"
#include "libavcodec/avcodec.h"
#include "libavformat/avformat.h"
#include "libswscale/swscale.h"
#include "libswresample/swresample.h"
#include "libavutil/samplefmt.h"
#include 其中的音频转换问题参考自：How to convert sample rate from AV_SAMPLE_FMT_FLTP to AV_SAMPLE_FMT_S16?。
现在需要编写Android.mk文件：
LOCAL_PATH := $(call my-dir)
include $(CLEAR_VARS)
LOCAL_MODULE := avcodec
LOCAL_SRC_FILES := prebuilt/libavcodec-57.so
include $(PREBUILT_SHARED_LIBRARY)
include $(CLEAR_VARS)
LOCAL_MODULE := avformat
LOCAL_SRC_FILES := prebuilt/libavformat-57.so
include $(PREBUILT_SHARED_LIBRARY)
include $(CLEAR_VARS)
LOCAL_MODULE := avutil
LOCAL_SRC_FILES := prebuilt/libavutil-55.so
include $(PREBUILT_SHARED_LIBRARY)
include $(CLEAR_VARS)
LOCAL_MODULE := swresample
LOCAL_SRC_FILES := prebuilt/libswresample-2.so
include $(PREBUILT_SHARED_LIBRARY)
include $(CLEAR_VARS)
LOCAL_MODULE := swscale
LOCAL_SRC_FILES := prebuilt/libswscale-4.so
include $(PREBUILT_SHARED_LIBRARY)
include $(CLEAR_VARS)
LOCAL_SRC_FILES := AudioPlayer.c FFmpegAudioPlay.c AudioDevice.c
LOCAL_LDLIBS += -llog -lz -landroid -lOpenSLES
LOCAL_MODULE := AudioPlayer
LOCAL_C_INCLUDES += $(LOCAL_PATH)/include
LOCAL_SHARED_LIBRARIES:= avcodec avformat avutil swresample swscale
include $(BUILD_SHARED_LIBRARY)同样由于没有用到device和filter库中的方法，因此并未连接这两个动态库。
Application.mk文件如下：
APP_ABI := armeabi
APP_PLATFORM := android-9经过ndk-build之后，整个工程的主要目录结构如下图所示：
3.运行结果
同样为了使工程能够运行，还需要在build.gradle文件中添加一行代码：
android {
... ...
sourceSets.main.jni.srcDirs = []
... ...
}由于本例为音频播放，因此无法贴出运行结果。