温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

Android音视频开发之MediaExtactor怎么使用

发布时间:2022-04-27 09:23:38 来源:亿速云 阅读:154 作者:iii 栏目:开发技术

本文小编为大家详细介绍“Android音视频开发之MediaExtactor怎么使用”,内容详细,步骤清晰,细节处理妥当,希望这篇“Android音视频开发之MediaExtactor怎么使用”文章能帮助大家解决疑惑,下面跟着小编的思路慢慢深入,一起来学习新知识吧。

MediaExtactor

MediaExtactorAndroid音视频开发中负责提取音视频信息和数据流的功能,可以通过该类实现从多媒体文件中剥离得到音频和视频的能力。

使用MediaExtactor

在一个音视频文件多可能会包含多个数据流(音频数据、视频数据等一般情况是一个视频组合多个音频)

  • 因此需要MediaExtactor加载音视频文件获取到所有数据轨道

  • 通过遍历获取到想要操作的轨道

  • 然后指定该轨道是MediaExtactor所有解析的数据流

  • 通过MediaExtactor获取到该轨道MediaFormat

加载音视频文件代码

加载音视频文件过程可传递UripathURL等。在确认希望需要解析的数据轨道后调用selectTrack就能锁定当前MediaExtactor要使用的轨道在之后数据解码中去使用。

// 加载资源
MediaExtractor extractor = new MediaExtractor();
extractor.setDataSource(path);
// 遍历获取视频轨道
int trackIndex = getTrackIndex(extractor, "audio/");
// 选定轨道
extractor.selectTrack(trackIndex);

获取轨道代码

加载文件之后可以通过MediaExtactorgetTrackCount方法获取到所有数据轨道。然后可以通过getTrackFormat获取到轨道信息,通过MediaFormat.KEY_MIME得到轨道格式比对期望所有获取到的轨道,比如比对"audio/"就是希望获取到音频轨道数据。

// 获取指定轨道的方法
private static int getTrackIndex(MediaExtractor extractor, String mediaType) {
    int trackIndex = -1;
    for (int i = 0; i < extractor.getTrackCount(); i++) {
        MediaFormat mediaFormat = extractor.getTrackFormat(i);
        String mime = mediaFormat.getString(MediaFormat.KEY_MIME);
        if (mime.startsWith(mediaType)) {
            trackIndex = i;
            break;
        }
    }
    return trackIndex;
}

提取轨道数据信息

在选定希望获取到的轨道后就可以获取到当前选择轨道的基本信息,例如视频尺寸大小、格式、时长、码率等一些音视频相关基础信息方便只有做解码时选用合适的解码器以及其他必要信息确认。

音频轨道基础信息获取

MediaFormatInfo mediaFormatInfo = new MediaFormatInfo();
mediaFormatInfo.mediaFormat = mediaFormat;
mediaFormatInfo.audioChannels = mediaFormat.getInteger(MediaFormat.KEY_CHANNEL_COUNT);
mediaFormatInfo.audioSampleRate = mediaFormat.getInteger(MediaFormat.KEY_SAMPLE_RATE);
mediaFormatInfo.maxInputSize = mediaFormat.getInteger(MediaFormat.KEY_MAX_INPUT_SIZE);
mediaFormatInfo.mime = mediaFormat.getString(MediaFormat.KEY_MIME);

视频轨道基础信息获取

MediaFormatInfo mediaFormatInfo = new MediaFormatInfo();
mediaFormatInfo.mediaFormat = mediaFormat;
mediaFormatInfo.videoHeight = mediaFormat.getInteger(MediaFormat.KEY_HEIGHT);
mediaFormatInfo.videoWidth = mediaFormat.getInteger(MediaFormat.KEY_WIDTH);
mediaFormatInfo.timeDuration = mediaFormat.getLong(MediaFormat.KEY_DURATION);
mediaFormatInfo.mime = mediaFormat.getString(MediaFormat.KEY_MIME);

但如果你选取的轨道是视频轨道但操作错误提取了音频相关信息可能会出现错误崩溃的情况(例如KEY_IS_ADTS 只有音频轨道才能提取),因此尽量保证提取参数是否正确做好代码保护机制。

一些源码细节分析

MediaExtactor作为提取器,其底层代码逻辑也是调用JNI来实现的,它只是上层API提供出能力而已。 在源码细节中可以看到MediaExtactor同样是加载media_jniso库,这和MediaPlayer是一样的逻辑。

public MediaExtractor() {
    native_setup();
}
private native final void native_setup();
static {
    System.loadLibrary("media_jni");
    native_init();
}

同时setDataSoure方法调用底层native接口和MediaPlayer也是同样的方法名和入参。

private native final void nativeSetDataSource(
        @NonNull IBinder httpServiceBinder,
        @NonNull String path,
        @Nullable String[] keys,
        @Nullable String[] values) throws IOException;

这基本也能够了解MediaExtactorMediaPlayer在底层实现上应该属于同一套逻辑和功能。只不过MediaExtactor可以理解为MediaPlayer其中一小部分功能提供提取能力而MediaPlayer是封装成型的工具类只需要加载音视频资源文件播放即可,中间提取轨道和解析过程直接就在底层帮开发者实现了。

读到这里,这篇“Android音视频开发之MediaExtactor怎么使用”文章已经介绍完毕,想要掌握这篇文章的知识点还需要大家自己动手实践使用过才能领会,如果想了解更多相关内容的文章,欢迎关注亿速云行业资讯频道。

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI