使用 MediaCodec 和 MediaMuxer 录制视频,但比特率和帧率不正确

Record video with MediaCodec and MediaMuxer, but the bitrate and framerate are incorrect

我写了一个演示来使用 MediaCodec 和 MediaMuxer 录制视频。

我用我的演示录制了一个视频,并使用 ffprobe 来检查视频, 结果如下:

  Duration: 00:00:06.86, start: 0.000000, bitrate: 723 kb/s
Stream #0:0(eng): Video: h264 (High) (avc1 / 0x31637661), yuv420p, 320x240, 619 kb/s, SAR 1:1 DAR 4:3, 30.02 fps, 30 tbr, 90k tbn, 180k tbc (default)
Metadata:
  creation_time   : 2015-06-05 13:19:24
  handler_name    : VideoHandle
Stream #0:1(eng): Audio: aac (LC) (mp4a / 0x6134706D), 44100 Hz, mono, fltp, 96 kb/s (default)
Metadata:
  creation_time   : 2015-06-05 13:19:24
  handler_name    : SoundHandle

里面有视频和音频信息,我发现音频属性和我在源码里设置的一样,但是视频属性不对。 我的视频设置源码如下:

        MediaFormat format = MediaFormat.createVideoFormat(MIME_TYPE, mWidth, mHeight);
    format.setInteger(MediaFormat.KEY_COLOR_FORMAT,
            MediaCodecInfo.CodecCapabilities.COLOR_FormatSurface);
    format.setInteger(MediaFormat.KEY_BIT_RATE, 384000);
    format.setInteger(MediaFormat.KEY_FRAME_RATE, 19);
    format.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 5);
    if (VERBOSE) Log.d(TAG, "format: " + format);
    mVideoEncoder = MediaCodec.createEncoderByType(MIME_TYPE);
    mVideoEncoder.configure(format, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);
    mInputSurface = mVideoEncoder.createInputSurface();
    mVideoEncoder.start();

视频的宽度和高度是正确的,但码率和帧率比我在源代码中设置的要高。这导致视频文件的大小远大于 我期望。 然后,我修改了我的源代码以删除音频录制线程并只录制视频。但这并没有什么区别,比特率和帧率也更高。 谁能告诉我原因并给我一些建议?

还有一个问题。我偶尔录制了一个可以通过系统播放器播放的破视频,但视频的开头只是黑色,1或2秒后显示正常图像。我不知道如何在 Whosebug 中上传文件,我可以将损坏的视频文件发送给任何需要它的人。 有人遇到过这个问题吗?

地址: 我发现了另一个奇怪的事情: 我的视频编码配置:

private int mWidth = 480;
private int mHeight = 848;
private int mVideoBitrate = 1200 * 1000;

    MediaFormat format = MediaFormat.createVideoFormat(MIME_TYPE, 480, 848);

    format.setInteger(MediaFormat.KEY_COLOR_FORMAT,
            MediaCodecInfo.CodecCapabilities.COLOR_FormatSurface);
    format.setInteger(MediaFormat.KEY_BIT_RATE, 1200000);
    format.setInteger(MediaFormat.KEY_FRAME_RATE, 30);
    format.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 1);

但实际视频信息是:

  Duration: 00:00:06.01, start: 0.000000, bitrate: 6491 kb/s
Stream #0:0(eng): Audio: aac (LC) (mp4a / 0x6134706D), 44100 Hz, mono, fltp, 15 kb/s (default)
Metadata:
  creation_time   : 2015-09-30 15:44:18
  handler_name    : SoundHandle
Stream #0:1(eng): Video: h264 (Baseline) (avc1 / 0x31637661), yuv420p, 480x848, 6484 kb/s, SAR 1:1 DAR 30:53, 16 fps, 30 tbr, 90k tbn, 180k tbc (default)
Metadata:
  creation_time   : 2015-09-30 15:44:18
  handler_name    : VideoHandle

您的预期帧速率 (19fps) 似乎与实际帧速率 (30fps) 不匹配。编码器正试图满足以 19fps 提交的帧的比特率要求,但它们进入的速度更快,因此它错过了并且实际比特率更高。我假设 30fps 值是根据视频文件中的实际呈现时间戳确定的,这些时间戳由传递到 MediaMuxer 的呈现时间戳设置。如果你想要 19fps 的视频,你需要生成间隔 (1000/19) 毫秒的时间戳。

如果您的输入视频是 30fps,您需要在编码过程中丢帧才能达到 19fps。 MediaCodec 不会为您丢帧——它会对您传入的所有内容进行编码。

我不知道为什么你会在视频开头看到一个断断续续的部分。