android 中有关 stagefright 编解码器输入格式的一些信息
something about stagefright codec input format in android
我正在使用 stagefright videoencoder 在 android 4.4;
中编码视频
sp<AMessage> format = new AMessage;
format->setInt32("width", 1080);
format->setInt32("height", 1920);
format->setString("mime", "video/avc");
format->setInt32("color-format", OMX_COLOR_FormatYUV420Planar);
format->setInt32("bitrate", 1000000);
format->setFloat("frame-rate", 25);
format->setInt32("i-frame-interval", 5);
sp<MediaCodec> videoEncoder = MediaCodec::CreateByType(looper, "video/avc", true);
videoEncoder->configure(format, NULL, NULL,MediaCodec::CONFIGURE_FLAG_ENCODE);
videoEncoder->start();
但是当我打电话时:
status_t err = gSpVideoEncoder->dequeueOutputBuffer(&bufIndex, &offset, &size, &ptsUsec, &flags, kTimeout);
我得到了:
err === INFO_FORMAT_CHANGED
下一步,我调用了:
sp<AMessage> newFormat;
videoEncoder->getOutputFormat(&newFormat);
uint32_t width = 0, height = 0;
newFormat->findInt32("width", (int32_t *)(&width));
newFormat->findInt32("height", (int32_t *)(&height));
fprintf(stderr, "new width: %d, height: %d\n", width, height)
我得到了结果:
new width: 1088, height: 1920
我很困惑(不是 1080x1920),我是否应该向 videoEncoder 提供新的输入帧(1088x1920)?
视频编码要求帧尺寸与 16 的倍数对齐,即宏块尺寸。高清分辨率,即 1920 x 1080 是一种特殊情况,因为 1080 不是 16 的倍数。底层编码器希望客户端提供对齐的边界.
在这种情况下,您可以提供窗口化的数据,如下所示。对于 Luma
,您必须对齐到 16 的倍数,对于 Chroma
,您必须对齐到 8 的倍数。剩余的像素可以用 zeroes.
预填充
请注意:如果编码器能够处理 1920 x 1080 作为编码分辨率,输出应该没问题。如果编码器使用 1920 x 1088 进行编码,由于零填充,您将在生成的比特流中的图片底部观察到绿色带。
---------------------------------------------
| |
| |
| |
| Luma |
| 1920 x 1080 |
| filled into |
| a buffer of |
| 1920 x 1088 |
| |
| Last 8 lines could |
| be filled with zeroes |
| |
---------------------------------------------
-----------------------
| Cb |
| 960 x 540 |
| filled into |
| a buffer of |
| 960 x 544 |
| |
-----------------------
-----------------------
| Cr |
| 960 x 540 |
| filled into |
| a buffer of |
| 960 x 544 |
| |
-----------------------
我正在使用 stagefright videoencoder 在 android 4.4;
中编码视频sp<AMessage> format = new AMessage;
format->setInt32("width", 1080);
format->setInt32("height", 1920);
format->setString("mime", "video/avc");
format->setInt32("color-format", OMX_COLOR_FormatYUV420Planar);
format->setInt32("bitrate", 1000000);
format->setFloat("frame-rate", 25);
format->setInt32("i-frame-interval", 5);
sp<MediaCodec> videoEncoder = MediaCodec::CreateByType(looper, "video/avc", true);
videoEncoder->configure(format, NULL, NULL,MediaCodec::CONFIGURE_FLAG_ENCODE);
videoEncoder->start();
但是当我打电话时:
status_t err = gSpVideoEncoder->dequeueOutputBuffer(&bufIndex, &offset, &size, &ptsUsec, &flags, kTimeout);
我得到了:
err === INFO_FORMAT_CHANGED
下一步,我调用了:
sp<AMessage> newFormat;
videoEncoder->getOutputFormat(&newFormat);
uint32_t width = 0, height = 0;
newFormat->findInt32("width", (int32_t *)(&width));
newFormat->findInt32("height", (int32_t *)(&height));
fprintf(stderr, "new width: %d, height: %d\n", width, height)
我得到了结果:
new width: 1088, height: 1920
我很困惑(不是 1080x1920),我是否应该向 videoEncoder 提供新的输入帧(1088x1920)?
视频编码要求帧尺寸与 16 的倍数对齐,即宏块尺寸。高清分辨率,即 1920 x 1080 是一种特殊情况,因为 1080 不是 16 的倍数。底层编码器希望客户端提供对齐的边界.
在这种情况下,您可以提供窗口化的数据,如下所示。对于 Luma
,您必须对齐到 16 的倍数,对于 Chroma
,您必须对齐到 8 的倍数。剩余的像素可以用 zeroes.
请注意:如果编码器能够处理 1920 x 1080 作为编码分辨率,输出应该没问题。如果编码器使用 1920 x 1088 进行编码,由于零填充,您将在生成的比特流中的图片底部观察到绿色带。
---------------------------------------------
| |
| |
| |
| Luma |
| 1920 x 1080 |
| filled into |
| a buffer of |
| 1920 x 1088 |
| |
| Last 8 lines could |
| be filled with zeroes |
| |
---------------------------------------------
-----------------------
| Cb |
| 960 x 540 |
| filled into |
| a buffer of |
| 960 x 544 |
| |
-----------------------
-----------------------
| Cr |
| 960 x 540 |
| filled into |
| a buffer of |
| 960 x 544 |
| |
-----------------------