1. JAVA层

file: frameworks/base/media/java/android/media/MediaExtractor.java

class: MediaExtractor

MediaExtractor上层接口。

其中有3个调用JNI的接口:

private static native final void native_init();

private native final void native_setup();

private native final void native_finalize();

2. JNI

file:frameworks/base/media/jni/android_media_MediaExtractor.cpp

class:JMediaExtractor

此文件中除了JMediaExtractor类,还定义了一些Native的接口,主要有:

static void android_media_MediaExtractor_native_init(JNIEnv *env)

static void android_media_MediaExtractor_release(JNIEnv *env, jobject thiz)

static void android_media_MediaExtractor_native_finalize(

JNIEnv *env, jobject thiz)

static void android_media_MediaExtractor_native_setup(

JNIEnv *env, jobject thiz)

在JMediaExtractor中比较重要的是一个NuMediaExtractor成员,JMediaExtractor所有功能都是由NuMediaExtractor完成的。

3. NuMediaExtractor

file:frameworks/av/media/libstagefright/NuMediaExtractor.cpp

class:NuMediaExtractor

NuMediaExtractor其地位和NuPlayer在MediaPlayer中的地位相当,类似一个引擎。

其核心成员是:

sp mDataSource;

sp mImpl;

其中mImpl指向具体的Extractor,它完成具体的extract工作。

4. MediaExtractor

file:frameworks/av/media/libstagefright/MediaExtractor.cpp

class:MediaExtractor

MediaExtractor(C++)是MediaExtractor体系中核心,是各个extractor(eg.MPEG4Extractor)的父类,管理者.

其中最重要的一个成员是一个函数指针:

typedef MediaExtractor *(*CreateFunc)(const sp &source,

const char *mime, const sp &meta);

5. Extractor

以MPEG4Extractor为例:

file:frameworks/av/media/libstagefright/MPEG4Extractor.cpp

class:MPEG4Extractor

MPEG4Extractor继承MediaExtractor,实现对mp4的解析。

任何一个具体执行的Extractor都会定义一个Sniff**的函数用于外部调用接口,比如MPEG4Extractor的SniffMPEG4:

bool SniffMPEG4(

const sp &source, String8 *mimeType, float *confidence,

sp *);

6. 工作原理

MediaExtractor.setDataSource阶段会创建一个DataSource(参见NuMediaPlayer),

(1)Sniff阶段

创建DataSource时会创建Sniffer类,在Sniffer中注册了各种Extractor的执行函数即Sniff**

void Sniffer::registerDefaultSniffers() { .... registerSniffer_l(SniffMPEG4);

registerSniffer_l(SniffMatroska);

registerSniffer_l(SniffOgg);

registerSniffer_l(SniffWAV);

registerSniffer_l(SniffFLAC);

registerSniffer_l(SniffAMR);

registerSniffer_l(SniffMPEG2TS);

registerSniffer_l(SniffMP3);

registerSniffer_l(SniffAAC);

registerSniffer_l(SniffMPEG2PS);

registerSniffer_l(SniffWVM);

registerSniffer_l(ExtendedExtractor::Sniff);

.....

}

实际上registerSniffer就是把Sniff××函数存入一个函数列表

typedef bool (*SnifferFunc)(

const sp &source, String8 *mimeType,

float *confidence, sp *meta);

List mSniffers;

Sniff某个文件时会遍历执行mSniffers中注册的函数,执行结果中会有一个可信度(confidence)数值,然后从执行结果中选一个最大的可信度结果作为Sniff结果。

(2)Extractor::Create

Create它根据文件的MIME信息创建对应的Extractor,具体逻辑如下:

(1)sniff : 获取文件meta信息

(2)根据meta中的MIME创建对应的Extractor

(3)ExtendedUtils判断创建默认Extractor还是扩展Extractor

MediaExtractor_CreateIfNeeded的作用如其名就是判断是否需要启用ExtentedExtractor。

(3) ExtentedExtractor

如果看源代码的话会发现整个过程比较繁琐,下面说下启用ExtentedExtractor的原则,(如果需要深究还是仔细阅读源代码好了),原则如下:

(1)尽量采用ExtentedExtractor

因为DefaultExtractor是google的decoder,采用的是软解;ExtentedExtractor一般是厂商的decoder,通常采用硬解。

(2)如果无法正确获取多媒体信息则采用ExtentedExtractor

(3)如果没有找到DefaultExtractor则采用ExtentedExtractor

(4)对于某些特殊格式采用ExtentedExtractor

比如MPEG4格式,这个一般厂商都支持硬解。

详细内容参考:Android MediaExtractor setDataSource

Logo

为开发者提供学习成长、分享交流、生态实践、资源工具等服务,帮助开发者快速成长。

更多推荐