在实时相机预览中应用自定义相机滤镜 - Swift
Apply custom camera filters on live camera preview - Swift
我想在 Swift 3/4 中制作原生 iPhone iOS 应用程序，它使用后置摄像头的实时预览并允许用户应用滤镜，例如在内置的相机应用程序中。我的想法是通过调整色调/RGB/亮度级别等来创建自己的过滤器。最终我想创建一个 HUE 滑块，允许用户在实时预览中过滤特定颜色。
我遇到的类似问题的所有答案都是 2 年前发布的，我什至不确定它们是否为我提供了我正在寻找的相关、最新的解决方案。
我不想先拍张照片，然后再应用滤镜。我正在寻找与本机相机应用程序相同的功能。在您看到相机预览时实时应用滤镜。
如何创建此功能？这可以使用 AVFoundation 实现吗？ AV工具包？也许这个功能可以用 ARKit 实现吗？
是的，您可以通过使用 AVFoundation 捕获系统捕获视频并使用您自己的渲染器来处理和显示视频帧，从而将图像过滤器应用于相机源。
Apple 有一个名为 AVCamPhotoFilter 的示例代码项目，它就是这样做的，并展示了使用 Metal 或 Core Image 的多种流程方法。重点是：
- 使用
AVCaptureVideoDataOutput获取实时视频帧。
- 使用
CVMetalTextureCache 或 CVPixelBufferPool 获取您最喜欢的渲染技术可访问的视频像素缓冲区。
- 使用 Metal（或 OpenGL 或其他）和 Metal 着色器或 Core Image 过滤器绘制纹理，在渲染过程中对 CPU 进行像素处理。
顺便说一句，如果您只想将图像处理应用到相机画面，ARKit 就太过分了。 ARKit 适用于当您想了解相机与现实世界的关系时 space，主要用于绘制似乎存在于现实世界中的 3D 内容等目的。
我想在 Swift 3/4 中制作原生 iPhone iOS 应用程序，它使用后置摄像头的实时预览并允许用户应用滤镜，例如在内置的相机应用程序中。我的想法是通过调整色调/RGB/亮度级别等来创建自己的过滤器。最终我想创建一个 HUE 滑块，允许用户在实时预览中过滤特定颜色。
我遇到的类似问题的所有答案都是 2 年前发布的，我什至不确定它们是否为我提供了我正在寻找的相关、最新的解决方案。
我不想先拍张照片，然后再应用滤镜。我正在寻找与本机相机应用程序相同的功能。在您看到相机预览时实时应用滤镜。
如何创建此功能？这可以使用 AVFoundation 实现吗？ AV工具包？也许这个功能可以用 ARKit 实现吗？
是的，您可以通过使用 AVFoundation 捕获系统捕获视频并使用您自己的渲染器来处理和显示视频帧，从而将图像过滤器应用于相机源。
Apple 有一个名为 AVCamPhotoFilter 的示例代码项目，它就是这样做的，并展示了使用 Metal 或 Core Image 的多种流程方法。重点是：
- 使用
AVCaptureVideoDataOutput获取实时视频帧。 - 使用
CVMetalTextureCache或CVPixelBufferPool获取您最喜欢的渲染技术可访问的视频像素缓冲区。 - 使用 Metal（或 OpenGL 或其他）和 Metal 着色器或 Core Image 过滤器绘制纹理，在渲染过程中对 CPU 进行像素处理。
顺便说一句，如果您只想将图像处理应用到相机画面，ARKit 就太过分了。 ARKit 适用于当您想了解相机与现实世界的关系时 space，主要用于绘制似乎存在于现实世界中的 3D 内容等目的。