执行失败:0x80070057,使用 dxva2 通过 ffmpeg 解码视频时

Failed to execute: 0x80070057, when decoding video via ffmpeg with dxva2

我已经成功地使用 ffmpeg 实现了一个视频播放器。我现在正在尝试使用硬件解码,但遇到了几个问题。 我在这里找到了一个 post 作为起点:https://ffmpeg.org/pipermail/libav-user/2014-August/007323.html

我更新了为解码器设置必要内容的代码。更新后的代码可在此处获得:https://drive.google.com/file/d/0B5ufHdoDzA4ieVk5UVpxcDNzRHc/view?usp=sharing

这就是我使用它来初始化解码器的方式:

// Prepare the decoding context
AVCodec *codec = nullptr;
_codecContext = _avFormatContext->streams[_streamIndex]->codec;
if ((codec = avcodec_find_decoder(_codecContext->codec_id)) == 0)
{
    std::cout << "Unsupported video codec!" << std::endl;
    return false;
}

_codecContext->thread_count = 1;  // Multithreading is apparently not compatible with hardware decoding
InputStream *ist = new InputStream();
ist->hwaccel_id = HWACCEL_AUTO;
ist->hwaccel_device = "dxva2";
ist->dec = codec;
ist->dec_ctx = _codecContext;
_codecContext->coded_width = _width;
_codecContext->coded_height = _height;

_codecContext->opaque = ist;
dxva2_init(_codecContext);

_codecContext->get_buffer2 = ist->hwaccel_get_buffer;
_codecContext->get_format = GetHwFormat;
_codecContext->thread_safe_callbacks = 1;

if (avcodec_open2(_codecContext, codec, nullptr) < 0)
{
    std::cout << "Video codec open error" << std::endl;
    return false;
}

这里是上面引用的 GetHwFormat 的定义:

AVPixelFormat GetHwFormat(AVCodecContext *s, const AVPixelFormat *pix_fmts)
{
    InputStream* ist = (InputStream*)s->opaque;
    ist->active_hwaccel_id = HWACCEL_DXVA2;
    ist->hwaccel_pix_fmt = AV_PIX_FMT_DXVA2_VLD;
    return ist->hwaccel_pix_fmt;
}

当我打开高清分辨率或更低分辨率的 mp4(以 h264 编码)视频时,似乎一切正常。然而,当我尝试更高分辨率的视频(如 3840x2160)时,我会反复收到以下错误:

Failed to execute: 0x80070057
Hardware accelerator failed to decode picture

几秒钟后我也开始收到以下错误:

co located POCs unavailable

而且视频显示不正确:我在视频中发现了很多瑕疵,而且它很滞后。我检查了ffmpeg源代码中的第一个错误。 IDirectXVideoDecoder_Execute 似乎由于参数无效而失败。由于这是在 ffmpeg 中发生的,所以一定有一些我遗漏的东西,但我不知道是什么。我发现与此错误唯一相关的 post 是因为多线程,但我在打开编解码器之前将 thread_count 设置为 1。

这个问题发生在我的主计算机上,它具有以下规格:

我的第二台具有以下规格的计算机上没有发生同样的问题:

如果我在我的主计算机上使用 DXVAChecker,它说我的显卡支持 H264_VLD_* 的 DXVA2,我可以看到正在调用 Microsoft API(DXVA2_DecodeDeviceCreated, DXVA2_DecodeDeviceBeginFrame, DXVA2_DecodeDeviceGetBuffer, DXVA2_DecodeDeviceExecute, DXVA2_DecodeDeviceEndFrame) 我的视频正在播放。

我也没有看到有硬件解码的版本和没有硬件解码的版本之间的 GPU 使用率(在两台计算机上)有任何增加;但是,我确实看到 CPU 使用率有所下降(虽然没有我预期的那么多)。这也很奇怪。

请注意,我尝试了 FFmpeg 网站上可用的 Windows 版本,以及我使用 --enable-dxva2 编译的版本。我已经搜索了很多,但找不到我做错了什么。

希望有人能帮助我,或者给我一个更好的例子?

我终于找到了我的问题所在。在调用 avcodec_decode_video2 之后,我并没有像这样更新数据包的大小和数据指针:

int r = avcodec_decode_video2(_codecContext, frame, &frameDecoded, &pkt);
pkt.size -= r;
pkt.data += r;

现在,视频已正确解码,我再也没有伪影了。

此外,关于延迟,我认为这是一个单独的问题,与错误消息无关,并且由于将图像复制回 CPU 的内存需要时间。如果您需要这样做,而不是像我在上面的问题中发布的代码中那样使用 av_image_copy_plane,您可能想看看 VLC 做了什么,或者在这个 link https://software.intel.com/en-us/articles/copying-accelerated-video-decode-frame-buffers .我在我的机器上做了一个快速测试,它减少了 7 或 8 倍的时间。