使用 MediaCodec 编码时，三分之二的屏幕为绿色

Question

我正在开展一个项目，需要在 Android 上使用 OpenGL 处理视频。我决定使用 MediaCodec，并在 ExtractDecodeEditEncodeMuxTest 的帮助下设法让它工作。结果很好，我让它接收视频，提取轨道，解码视频轨道，用OpenGL编辑，编码成视频文件。

问题是结果视频在Android上可以很好地播放，但是到了iOS，三分之二的屏幕都是绿色的。

我尝试按照 , here, and here 的建议解决，为编码器尝试不同的格式，但问题仍然相同。

有人可以告诉我导致此问题的原因以及解决方法吗？

This is the video when it's played on iOS

这是编码器的配置

MediaCodec mediaCodec = MediaCodec.createEncoderByType("video/avc");
MediaFormat mediaFormat = MediaFormat.createVideoFormat("video/avc", 540, 960);
mediaFormat.setInteger(MediaFormat.KEY_BIT_RATE, 2000000);
mediaFormat.setInteger(MediaFormat.KEY_FRAME_RATE, 30);
mediaFormat.setInteger(MediaFormat.KEY_COLOR_FORMAT, CodecCapabilities.COLOR_FormatSurface);
mediaFormat.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 1);
mediaCodec.configure(mediaFormat, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);

更新我想知道我是否对视频方向有任何错误，因为输出视频的工作部分与所需的输出分辨率具有相同的比率，但在水平方向上。输入是垂直记录的，所需的输出也是如此。这是解码器配置的代码：

inputFormat.setInteger(MediaFormat.KEY_WIDTH, 540);
inputFormat.setInteger(MediaFormat.KEY_HEIGHT, 960);
inputFormat.setInteger("rotation-degrees", 90);

String mime = inputFormat.getString(MediaFormat.KEY_MIME);
MediaCodec decoder = MediaCodec.createDecoderByType(mime);
decoder.configure(inputFormat, surface, null, 0);

12 月 25 日更新： 我在配置编码器和解码器时尝试了不同的分辨率和方向以检查视频的方向是否有问题，但输出视频只是旋转了，绿色问题仍然存在。我还尝试了 "video/mp4v-es" 的编码器，结果视频可以在 Mac 上观看，但 iPhone 甚至无法播放它。

Answer 1

我刚刚解决了。原因原来是 MediaMuxer，它将 h264 原始流包装在某种 iOS 无法理解的容器中。因此，我没有使用 MediaMuxer，而是将来自编码器的原始 h264 流写入文件，然后使用 mp4parser 将其混合到 mp4 文件中。

Answer 2

我现在知道答案了：跟fps范围有关。我更改了我的相机参数和媒体编解码器的 fps 速率，突然它起作用了！

使用 MediaCodec 编码时，三分之二的屏幕为绿色

Two-thirds of screen is green when encode with MediaCodec

android

ios

video

android-mediacodec