JavaCV FFmpegFrameGrabber 和 Java2DFrameConverter 创建奇怪的图像

Question

我是 JavaCV 的新手，所以这个问题可能非常明显。我正在尝试完成说起来容易、做起来难的任务，即从视频中获取图像和音频，这样我就可以开始制作视频编辑器了。经过大量的混乱和错误，我终于得到了结果，但它和错误一样奇怪。图像似乎在 x 方向上被压扁，右侧的额外 space 是透明的（因此图像大小与视频的大小相匹配）。此外，它有很多额外的透明像素，并且以一种奇怪的方式呈多色。

图像应该是什么样子：https://gofile.io/d/1lQnNd

图像的样子：https://gofile.io/d/kc09G7

这是我的代码：

try {
    FFmpegFrameGrabber frameGrabber = new FFmpegFrameGrabber("C:/Users/mega12345mega/Desktop/Test Files/video.mp4");
    frameGrabber.setFormat("mp4");
    frameGrabber.start();

    int width = frameGrabber.getImageWidth();
    int height = frameGrabber.getImageHeight();
    System.out.println("width: " + width + ", height: " + height);

    Frame frame = frameGrabber.grabImage();
    if (frame == null)
        throw new Exception("Frame is NULL!");
    if (frame.image == null)
        throw new Exception("Frame Image is NULL!");

    BufferedImage bi = new BufferedImage(width, height, BufferedImage.TYPE_INT_ARGB);
    if (bi == null)
        throw new Exception("bi is NULL!");

    Java2DFrameConverter.copy(frame, bi);
    ImageIO.write(bi, "png", new File("C:/Users/mega12345mega/Desktop/Test Files/img.png"));

    frameGrabber.stop();
    frameGrabber.close();
} catch (Exception e) {
    throw new Exception("Error Getting Image", e);
}

如果你有兴趣，这里是控制台：

width: 1280, height: 720
Input #0, mov,mp4,m4a,3gp,3g2,mj2, from 'C:/Users/mega12345mega/Desktop/Test Files/video.mp4':
  Metadata:
    major_brand     : isom
    minor_version   : 512
    compatible_brands: isomiso2avc1mp41
    encoder         : Lavf58.29.100
  Duration: 00:00:04.95, start: 0.000000, bitrate: 16375 kb/s
    Stream #0:0(und): Video: h264 (High) (avc1 / 0x31637661), yuv420p, 1280x720 [SAR 1:1 DAR 16:9], 16401 kb/s, 60 fps, 60 tbr, 90k tbn, 120 tbc (default)
    Metadata:
      handler_name    : VideoHandler
    Stream #0:1(und): Audio: aac (LC) (mp4a / 0x6134706D), 44100 Hz, stereo, fltp, 2 kb/s (default)
    Metadata:
      handler_name    : SoundHandler

此外，如果我只做 frameGrabber.grab() 而不是 frameGrabber.grabImage()（我相信这会遗漏音频），则帧的图像属性为空（这就是 frame.image == null 声明在那里）。我不确定这是否属于一个新问题，但也欢迎提供帮助。

提前致谢！

Answer 1

我想出了如何解决这个问题，但我不确定为什么会这样。（欢迎对此发表评论！）

查看 this issue 之后 - 尽管问题有所不同 - 我发现他们在代码中使用了这个：

bi = new Java2DFrameConverter().convert(frame);

我做的是这样的：

Java2DFrameConverter.copy(frame, bi);

出于某种原因，这解决了问题。
显然，使用解决方案，您也可以删除这一行：

new BufferedImage(width, height, BufferedImage.TYPE_INT_ARGB);

JavaCV FFmpegFrameGrabber 和 Java2DFrameConverter 创建奇怪的图像

JavaCV FFmpegFrameGrabber & Java2DFrameConverter creating weird looking image

java

ffmpeg

javacv