使用MediaCodec和MediaMuxer录制视频，但码率和帧率不正确

Question

我写了一个演示来使用 MediaCodec 和 MediaMuxer 录制视频。

我用我的demo录制了一段视频，用ffprobe查看视频，结果如下：

  Duration: 00:00:06.86, start: 0.000000, bitrate: 723 kb/s
Stream #0:0(eng): Video: h264 (High) (avc1 / 0x31637661), yuv420p, 320x240, 619 kb/s, SAR 1:1 DAR 4:3, 30.02 fps, 30 tbr, 90k tbn, 180k tbc (default)
Metadata:
  creation_time   : 2015-06-05 13:19:24
  handler_name    : VideoHandle
Stream #0:1(eng): Audio: aac (LC) (mp4a / 0x6134706D), 44100 Hz, mono, fltp, 96 kb/s (default)
Metadata:
  creation_time   : 2015-06-05 13:19:24
  handler_name    : SoundHandle

它包含视频和音频信息，我发现音频属性与我在源代码中设置的相同，但视频属性不正确。我的视频设置源码如下：

        MediaFormat format = MediaFormat.createVideoFormat(MIME_TYPE, mWidth, mHeight);
    format.setInteger(MediaFormat.KEY_COLOR_FORMAT,
            MediaCodecInfo.CodecCapabilities.COLOR_FormatSurface);
    format.setInteger(MediaFormat.KEY_BIT_RATE, 384000);
    format.setInteger(MediaFormat.KEY_FRAME_RATE, 19);
    format.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 5);
    if (VERBOSE) Log.d(TAG, "format: " + format);
    mVideoEncoder = MediaCodec.createEncoderByType(MIME_TYPE);
    mVideoEncoder.configure(format, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);
    mInputSurface = mVideoEncoder.createInputSurface();
    mVideoEncoder.start();

视频的宽度和高度是正确的，但比特率和帧率高于我在源代码中设置的。这导致视频文件大小比我预期的要大得多。然后，我修改了我的源代码以删除录音线程并仅录制视频。但它没有任何区别，比特率和帧率也更高。谁能告诉我原因并给我一些建议？

还有另一个问题。我偶尔录制一段破碎的视频，系统播放器可以播放，但视频的开头是黑色的，1 或 2 秒后显示正常图像。我不知道如何在stackoverflow中上传文件，我可以将损坏的视频文件发送给任何需要它的人。有没有人遇到这个问题？

添加？我发现另一个奇怪的事情：我的视频编码配置：

private int mWidth = 480;
private int mHeight = 848;
private int mVideoBitrate = 1200 * 1000;

    MediaFormat format = MediaFormat.createVideoFormat(MIME_TYPE, 480, 848);

    format.setInteger(MediaFormat.KEY_COLOR_FORMAT,
            MediaCodecInfo.CodecCapabilities.COLOR_FormatSurface);
    format.setInteger(MediaFormat.KEY_BIT_RATE, 1200000);
    format.setInteger(MediaFormat.KEY_FRAME_RATE, 30);
    format.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 1);

但实际的视频信息是：

  Duration: 00:00:06.01, start: 0.000000, bitrate: 6491 kb/s
Stream #0:0(eng): Audio: aac (LC) (mp4a / 0x6134706D), 44100 Hz, mono, fltp, 15 kb/s (default)
Metadata:
  creation_time   : 2015-09-30 15:44:18
  handler_name    : SoundHandle
Stream #0:1(eng): Video: h264 (Baseline) (avc1 / 0x31637661), yuv420p, 480x848, 6484 kb/s, SAR 1:1 DAR 30:53, 16 fps, 30 tbr, 90k tbn, 180k tbc (default)
Metadata:
  creation_time   : 2015-09-30 15:44:18
  handler_name    : VideoHandle

Answer 1

看起来您的预期帧速率 (19fps) 与实际帧速率 (30fps) 不匹配。编码器试图满足以 19fps 提交的帧的比特率要求，但它们的输入速度更快，因此未命中并且实际比特率更高。我假设 30fps 值是根据视频文件中的实际演示时间戳确定的，这些时间戳由传递给 MediaMuxer 的演示时间戳设置。如果您想要 19fps 视频，则需要生成相隔 (1000/19) 毫秒的时间戳。

如果您的输入视频为 30fps，则需要在编码过程中丢帧才能达到 19fps。MediaCodec 不会为您丢帧——它会对您传入的所有内容进行编码。

我不知道为什么你会在视频开头看到一个破碎的部分。