Android(安卓)MediaExtractor 浅析

1. JAVA层

file: frameworks/base/media/java/android/media/MediaExtractor.java
class: MediaExtractor

MediaExtractor上层接口。
其中有3个调用JNI的接口：

    private static native final void native_init();    private native final void native_setup();    private native final void native_finalize();

2. JNI

file：frameworks/base/media/jni/android_media_MediaExtractor.cpp
class：JMediaExtractor

此文件中除了JMediaExtractor类，还定义了一些Native的接口，主要有：

static void android_media_MediaExtractor_native_init(JNIEnv *env) static void android_media_MediaExtractor_release(JNIEnv *env, jobject thiz)static void android_media_MediaExtractor_native_finalize(        JNIEnv *env, jobject thiz) static void android_media_MediaExtractor_native_setup(        JNIEnv *env, jobject thiz)

在JMediaExtractor中比较重要的是一个NuMediaExtractor成员，JMediaExtractor所有功能都是由NuMediaExtractor完成的。

3. NuMediaExtractor

file：frameworks/av/media/libstagefright/NuMediaExtractor.cpp
class：NuMediaExtractor

NuMediaExtractor其地位和NuPlayer在MediaPlayer中的地位相当，类似一个引擎。
其核心成员是：

    sp<DataSource> mDataSource;    sp<MediaExtractor> mImpl;

其中mImpl指向具体的Extractor，它完成具体的extract工作。

4. MediaExtractor

file：frameworks/av/media/libstagefright/MediaExtractor.cpp
class：MediaExtractor

MediaExtractor（C++）是MediaExtractor体系中核心，是各个extractor（eg.MPEG4Extractor）的父类，管理者.
其中最重要的一个成员是一个函数指针：

typedef MediaExtractor *(*CreateFunc)(const sp<DataSource> &source,             const char *mime, const sp<AMessage> &meta);

5. Extractor

以MPEG4Extractor为例：
file：frameworks/av/media/libstagefright/MPEG4Extractor.cpp
class：MPEG4Extractor

MPEG4Extractor继承MediaExtractor，实现对mp4的解析。

任何一个具体执行的Extractor都会定义一个Sniff**的函数用于外部调用接口，比如MPEG4Extractor的SniffMPEG4：

bool SniffMPEG4(        const sp<DataSource> &source, String8 *mimeType, float *confidence,        sp<AMessage> *);

6. 工作原理

MediaExtractor.setDataSource阶段会创建一个DataSource（参见NuMediaPlayer），
（1）Sniff阶段
创建DataSource时会创建Sniffer类，在Sniffer中注册了各种Extractor的执行函数即Sniff**

void Sniffer::registerDefaultSniffers() { .... registerSniffer_l(SniffMPEG4);    registerSniffer_l(SniffMatroska);    registerSniffer_l(SniffOgg);    registerSniffer_l(SniffWAV);    registerSniffer_l(SniffFLAC);    registerSniffer_l(SniffAMR);    registerSniffer_l(SniffMPEG2TS);    registerSniffer_l(SniffMP3);    registerSniffer_l(SniffAAC);    registerSniffer_l(SniffMPEG2PS);    registerSniffer_l(SniffWVM);    registerSniffer_l(ExtendedExtractor::Sniff);    .....}

实际上registerSniffer就是把Sniff××函数存入一个函数列表

    typedef bool (*SnifferFunc)(            const sp<DataSource> &source, String8 *mimeType,            float *confidence, sp<AMessage> *meta);    List<SnifferFunc> mSniffers;

Sniff某个文件时会遍历执行mSniffers中注册的函数，执行结果中会有一个可信度（confidence）数值，然后从执行结果中选一个最大的可信度结果作为Sniff结果。

（2）Extractor::Create
Create它根据文件的MIME信息创建对应的Extractor，具体逻辑如下：
（1）sniff ：获取文件meta信息
（2）根据meta中的MIME创建对应的Extractor
（3）ExtendedUtils判断创建默认Extractor还是扩展Extractor
MediaExtractor_CreateIfNeeded的作用如其名就是判断是否需要启用ExtentedExtractor。
（3） ExtentedExtractor
如果看源代码的话会发现整个过程比较繁琐，下面说下启用ExtentedExtractor的原则，（如果需要深究还是仔细阅读源代码好了），原则如下：
（1）尽量采用ExtentedExtractor
因为DefaultExtractor是google的decoder，采用的是软解；ExtentedExtractor一般是厂商的decoder，通常采用硬解。
（2）如果无法正确获取多媒体信息则采用ExtentedExtractor
（3）如果没有找到DefaultExtractor则采用ExtentedExtractor
（4）对于某些特殊格式采用ExtentedExtractor
比如MPEG4格式，这个一般厂商都支持硬解。
详细内容参考：Android MediaExtractor setDataSource