Android音视频处理中MediaExtractor的使用 Android音视频处理中MediaExtract

Android 程序中提供了一个 MediaExtractor 类，可以用来分离容器中的视频track和音频track，下面的例子展示了使用MediaExtractor 和MediaMuxer 来实现视频的换音： private void muxingAudioAndVideo() throws IOException { MediaMuxer mMediaMuxer = new MediaMuxer(mOutputVideoPath, MediaMuxer.OutputFormat.MUXER_OUTPUT_MPEG_4); // 视频的 MediaExtractor MediaExtractor mVideoExtractor = new MediaExtractor(); mVideoExtractor.setDataSource(mVideoPath); int videoTrackIndex = -1; for ( int i = 0; i < mVideoExtractor.getTrackCount(); i++) { MediaFormat format = mVideoExtractor.getTrackFormat(i); if (format.getString(MediaFormat.KEY_MIME).startsWith("video/")) { mVideoExtractor.selectTrack(i); videoTrackIndex = mMediaMuxer.addTrack(format); break; } } // 音频的 MediaExtractor MediaExtractor mAudioExtractor = new MediaExtractor(); mAudioExtractor.setDataSource(mAudioPath); int audioTrackIndex = -1; for ( int i = 0; i < mAudioExtractor.getTrackCount(); i++) { MediaFormat format = mAudioExtractor.getTrackFormat(i); if (format.getString(MediaFormat.KEY_MIME).startsWith("audio/")) { mAudioExtractor.selectTrack(i); audioTrackIndex = mMediaMuxer.addTrack(format); } } // 添加完所有轨道后 start mMediaMuxer.start(); // 封装视频 track if (-1 != videoTrackIndex) { MediaCodec.BufferInfo info = new MediaCodec.BufferInfo(); info.presentationTimeUs = 0; ByteBuffer buffer = ByteBuffer.allocate(100 * 1024); while ( true) { int sampleSize = mVideoExtractor.readSampleData(buffer, 0); if (sampleSize < 0) { break; } info.offset = 0; info. size = sampleSize; info.flags = MediaCodec.BUFFER_FLAG_SYNC_FRAME; info.presentationTimeUs = mVideoExtractor.getSampleTime(); mMediaMuxer.writeSampleData(videoTrackIndex, buffer, info); mVideoExtractor.advance(); } } // 封装音频 track if (-1 != audioTrackIndex) { MediaCodec.BufferInfo info = new MediaCodec.BufferInfo(); info.presentationTimeUs = 0; ByteBuffer buffer = ByteBuffer.allocate(100 * 1024); while ( true) { int sampleSize = mAudioExtractor.readSampleData(buffer, 0); if (sampleSize < 0) { break; } info.offset = 0; info. size = sampleSize; info.flags = MediaCodec.BUFFER_FLAG_SYNC_FRAME; info.presentationTimeUs = mAudioExtractor.getSampleTime(); mMediaMuxer.writeSampleData(audioTrackIndex, buffer, info); mAudioExtractor.advance(); } } // 释放 MediaExtractor mVideoExtractor.release(); mAudioExtractor.release(); // 释放 MediaMuxer mMediaMuxer.stop(); mMediaMuxer.release(); } MediaExtractor 的接口比较简单，首先通过 setDataSource() 设置数据源，数据源可以是本地文件地址，也可以是网络地址： MediaExtractor mVideoExtractor = new MediaExtractor(); mVideoExtractor.setDataSource(mVideoPath); 然后可以通过getTrackFormat(int index) 来获取各个 track 的 MediaFormat ，通过 MediaFormat 来获取 track 的详细信息，如： MimeType 、分辨率、采样频率、帧率等等： for (int i = 0; i < mVideoExtractor.getTrackCount(); i++) { MediaFormat format = mVideoExtractor.getTrackFormat(i); } 获取到track 的详细信息后，通过 selectTrack(int index) 选择指定的通道： if (format.getString(MediaFormat.KEY_MIME).startsWith("video/")) { mVideoExtractor.selectTrack(i); break; } 指定通道之后就可以从MediaExtractor 中读取数据了： while (true) { int sampleSize = mVideoExtractor.readSampleData(buffer, 0); if (sampleSize < 0) { break; } // do something mVideoExtractor.advance(); // 移动到下一帧 } 在读取结束之后，记得释放资源： mVideoExtractor.release(); 来源：简书

Android音视频处理中MediaExtractor的使用

推荐阅读

什么是碱性岩

洛阳奥斯卡影院6月13号放映什么电影？洛阳奥斯卡影院今日放映表

京东“京银计划” 是什么怎么参与？

共栅极放大电路分析,场效应管共栅极放大电路

2022年三伏天时间表？

活珠子不适合哪些人吃

m当前“最接近完美”的五款手机，别看价格贵，用三年毫无压力

上海电商有哪些什么是电商上海，什么是电商上海人

家用茶具多少钱的合适 – 高档茶盘图片价格表

冰箱不结冰是怎么回事？原因分析与解决方法

热水器不烧水怎么办,是因为这些原因

增加注册资本后股东的股权比例

白发傅筹第几集知道身世

CPB水前肌底精华好不好？CPB水前肌底精华怎么用

兄弟T310如何清零废墨？

炒杜仲与生杜仲的区别炒杜仲与生杜仲的不同之处

《侠客风云传前传》激活方法及特权简单介绍

取暖器品牌排名？哪个比较好的？

中风|女性中风有奇特症状？盘点易被女性忽视的11个中风症状！

减肥可以吃红枣吗