使用 MediaCodec 编码时三分之二的屏幕为绿色

Lê *_*ang 5 video android ios android-mediacodec

我正在开发一个需要在 Android 上使用 OpenGL 处理视频的项目。我决定使用 MediaCodec,并在ExtractDecodeEditEncodeMuxTest的帮助下设法让它工作。结果非常好,我让它接收视频,提取轨道,解码视频轨道,使用 OpenGL 进行编辑,然后编码为视频文件。

问题是结果视频可以在Android上很好地播放,但是到了iOS时,屏幕的三分之二是绿色的。

我尝试使用此处此处此处的建议解决编码器的不同格式,但问题仍然相同。

有人可以告诉我可能导致此问题的原因以及如何解决吗?

这是在iOS上播放时的视频

这是编码器的配置

MediaCodec mediaCodec = MediaCodec.createEncoderByType("video/avc");
MediaFormat mediaFormat = MediaFormat.createVideoFormat("video/avc", 540, 960);
mediaFormat.setInteger(MediaFormat.KEY_BIT_RATE, 2000000);
mediaFormat.setInteger(MediaFormat.KEY_FRAME_RATE, 30);
mediaFormat.setInteger(MediaFormat.KEY_COLOR_FORMAT, CodecCapabilities.COLOR_FormatSurface);
mediaFormat.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 1);
mediaCodec.configure(mediaFormat, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);
Run Code Online (Sandbox Code Playgroud)

更新 我想知道我是否对视频方向有任何错误,因为输出视频的工作部分与所需的输出分辨率具有相同的比率,但在水平方向上。输入是垂直记录的,所需的输出也是如此。这是解码器配置的代码:

inputFormat.setInteger(MediaFormat.KEY_WIDTH, 540);
inputFormat.setInteger(MediaFormat.KEY_HEIGHT, 960);
inputFormat.setInteger("rotation-degrees", 90);

String mime = inputFormat.getString(MediaFormat.KEY_MIME);
MediaCodec decoder = MediaCodec.createDecoderByType(mime);
decoder.configure(inputFormat, surface, null, 0);
Run Code Online (Sandbox Code Playgroud)

12 月 25 日更新:在配置编码器和解码器以检查视频的方向是否有问题时,我尝试了不同的分辨率和方向,但输出视频刚刚旋转,绿色问题仍然存在。我还为编码器尝试了“video/mp4v-es”,结果视频在 Mac 上可见,但 iPhone 甚至无法播放。

Lê *_*ang 2

我刚刚解决了。原因是 MediaMuxer,它将 h264 原始流包装在 iOS 无法理解的某种容器中。因此,我没有使用 MediaMuxer,而是将原始 h264 流从编码器写入文件,并使用mp4parser将其复用为 mp4 文件。