前言

今天，我们正式开始Nuplayer的旅途吧。因为本菜鸟也是因为工作原因刚刚接触Android，更是对多媒体一窍不通。所以，包括前面的准备篇——《消息通信机制AXXX》也有可能是漏洞百出的，等以后功底深厚了再慢慢修改吧。同时，在这里也感谢各位看官提出宝贵的意见或者建议。

好，接着说一下Nuplayer。既然说是“旅途”，那我总要给个旅游路线图吧。（本文部分图是copy自网络，如有侵权，请及时告知）

1. “总路线图”

来看一看Android整体的一个“地图”（框架），如图1所示：

图1 Android_Framework.png

可以清晰的看到，大致可以分为5个部分。在这里简单的介绍一下。（摘录自 http://www.cnblogs.com/forlina/archive/2011/06/29/2093332.html
）

1.1 Linux Kernel

提供核心系统服务，例如：安全、内存管理、进程管理、网络堆栈、驱动模型、进程间通信（Binder）。Linux Kernel也作为硬件和软件之间的抽象层，它隐藏具体硬件细节而为上层提供统一的服务。（android 7.0现在内核是4.1.18（某为手机上看到的））

1.2 Android Runtime

提供大部分在Java编程语言核心类库中可用的功能。每一个Android应用程序是Dalvik虚拟机中的实例，运行在他们自己的进程中。
Dalvik虚拟机依赖于Linux 内核提供基本功能，如线程和底层内存管理。

1.3 Libraries

Android包含一个C/C++库的集合，供Android系统的各个组件使用。这些功能通过Android的应用程序框架（application framework）暴露给开发者。下面列出一些核心库：

1.3.1 系统C库——标准C系统库（libc）的BSD衍生，调整为基于嵌入式Linux设备
1.3.2 媒体库——基于PacketVideo的OpenCORE。这些库支持播放和录制许多流行的音频和视频格式，以及静态图像文件，包括MPEG4、 H.264、 MP3、 AAC、 AMR、JPG、 PNG
1.3.3 界面管理——管理访问显示子系统和无缝组合多个应用程序的二维和三维图形层
1.3.4 LibWebCore——新式的Web浏览器引擎,驱动Android 浏览器和内嵌的web视图
1.3.5 SGL——基本的2D图形引擎
1.3.6 3D库——基于OpenGL ES 1.0 APIs的实现。库使用硬件3D加速或包含高度优化的3D软件光栅
1.3.7 FreeType ——位图和矢量字体渲染
1.3.8 SQLite ——所有应用程序都可以使用的强大而轻量级的关系数据库引擎

1.4 Application Framework

通过提供开放的开发平台，开发者可以自由地利用设备硬件优势、访问位置信息、运行后台服务、设置闹钟、向状态栏添加通知等等。
应用程序的体系结构旨在简化组件的重用，任何应用程序都能发布他的功能且任何其他应用程序可以使用这些功能（需要服从框架执行的安全限制）。
所有的应用程序其实是一组服务和系统，包括：

1.4.1 视图（View）——丰富的、可扩展的视图集合，可用于构建一个应用程序。包括包括列表、网格、文本框、按钮，甚至是内嵌的网页浏览器
1.4.2 内容提供者（Content Providers）——使应用程序能访问其他应用程序（如通讯录）的数据，或共享自己的数据
1.4.3 资源管理器（Resource Manager）——提供访问非代码资源，如本地化字符串、图形和布局文件
1.4.4 通知管理器（Notification Manager）——使所有的应用程序能够在状态栏显示自定义警告
1.4.5 活动管理器（Activity Manager）——管理应用程序生命周期,提供通用的导航回退功能

1.5 Applications

Android装配一个核心应用程序集合，包括电子邮件客户端、SMS程序、日历、地图、浏览器、联系人和其他设置。

1.6 小节

这里，给出一位大神总结好的图，画的特别好，小弟就不班门弄斧，直接拿过来用了。出处：http://www.cnblogs.com/yaowen/p/6413429.html，如图2所示：

图2 android系统结构.png

2. Media Framework“路线图”

从图1中，我们可以看到用红色框框圈起来的地方。一个是app应用Gallery（也可以为第三方player）；另外一个是Media Framework。对，没错，讲了这么多，我们的主角“Media Framework”登场了。让我们来看看它的庐山真面目，如图3所示：

图3 Media_Framework.png

接下来，给大家简单介绍下它。看的顺序是→ ↓ ← ↓ →（肿么都觉得是在打表情符号:-D）

2.1 代理端

这一端做的事情只是将下面复杂的逻辑进行封装（java），然后透过jni调用底下的native层方法来实现具体功能。并且，这些个具体的功能是在服务端实现的，他们分属不同的进程，通过Binder来通信，最终通过调用服务端的方法实现具体的逻辑处理。（有童鞋问：Binder是个什么东东呢？小弟有时间会讲解的，现在就理解它是一个进程间通信的一种方式就好，求甚解的朋友们可以百度下^_）

2.2 服务端

这边的主要任务就是在MediaPlayerFactory中，创建出NuplayerDriver（这个不是底层驱动啦，我们理解为一个抽象出来的NuPlayer的基类就好啦）。
然后Nuplayer中，我们可以看到有三大模块。

2.2.1 Source

这里是为咱们的播放器提供数据源的（解协议，解封装在这里）。

2.2.2 Decoder

这里是解码数据的地方（解码在这里）

2.2.3 Renderer

这里是用来做Display的，里面涉及到A/V同步的问题。

2.2.4 Foundation

这个部分是基础类。在后面的分析当中，我们会知道在NuPlayer中会启动相当多的线程，这些线程如何异步/同步的通信，需要依靠AMessage/ALooper/AHandler来支持

之后，通过接口类IOMX来通过Binder进程间通信，远程调用具体的decoder来实现解码。

2.3 OMX端

这一端就比较靠近底层了，里面会有各种各样的插件注册其中。它还链接这Codec Driver，这里面就是放的各种具体的解码器啦。

2.4 Kernel端

最后， OMX的具体解码器在启动Kernel层的A/V Codec Driver完成解码操作。

3 后语

大致的框架，我们了解了，我在接下来的讲解中。刚开始的时候，会先结合MediaPlayer提供的接口，从java->jni->native一层层讲如何启动的Nuplayer的。在大家熟悉了这个过程后，就省略掉这一步，直接“一把刀直插心脏”，专注于NuPlayer这一块。
最后，总结下。在本篇中，我们知道了Media Framework在整个Android框架中的位置，也了解了Media Framework自己是个什么样框架，以及它和各部分的联系。
接下来，我们将依照图3的顺序，正式开始踏上了解Nuplayer的旅途。

Media FrameWork简介

前言