如何通过 Javascript 在 PythonAnywhere 上访问 OpenCV 中的网络摄像头？

Question

我在 Django 中开发了一个 WebApplication，它有一个包含 OpevCV 代码的视图方法，当触发该代码时，它会打开用户网络摄像头以检测其面部。这个应用程序在我的本地服务器上运行良好，但是当我在 PythonAnywhere 上托管它时，它说找不到相机，因为我的 PA 托管不提供相机服务。
所以有人建议我通过 javascript 打开网络摄像头，因为它与客户端机器打交道，然后将其提要传递到我托管的服务器机器。
但由于我是 Python 的菜鸟，我不知道如何执行上述任务。我找到了这段 js 代码，但我不知道如何以及在何处将其添加到我的 Django 应用程序中。

使用 Javascript

获取提要的代码

var video = document.querySelector("#videoElement");

if (navigator.mediaDevices.getUserMedia) {
    navigator.mediaDevices.getUserMedia({video: true}).then(function(stream) {
      video.srcObject = stream;
  }).catch(function(err0r) {
      console.log("Something went wrong!");
  });
}

我的Python打开摄像头检测人脸的代码如下（在localserver中有效）

import cv2

cascade = cv2.CascadeClassifier('./haarcascade_frontalface_default.xml')

cam = cv2.VideoCapture(0)


while True:
    ret, frame = cam.read()
    frame = cv2.flip(frame, 1)

    if ret:
        gray = cv2.cvtColor(frame, cv2.COLOR_BGR2GRAY)

        faces = cascade.detectMultiScale(gray, scaleFactor=1.3, minNeighbors=3)

        for (x, y, w, h) in faces:
            cropped = cv2.resize(frame[y:y+h, x:x+w], (198,198))
            cv2.rectangle(frame, (x, y), (x+w, y+h), (255, 0, 0), 2)

        if cv2.waitKey(1) & 0xFF == ord('q'):
            break
            cv2.destroyAllWindows()

        cv2.imshow('Stream', frame)

感谢任何帮助。提前谢谢你

Answer 1

您需要使用 javascript 获取实时视频流，然后将该流提供给 opencv2 以使其正常工作。

使用：get live videostream in nodejs

您将得到一个 url 作为 "http://localhost:3000"，您可以在 python 代码中使用它，如下所示：

import cv2

cascade = cv2.CascadeClassifier('./haarcascade_frontalface_default.xml')

cam = cv2.VideoCapture('http://localhost:3000')


while True:
    ret, frame = cam.read()
    frame = cv2.flip(frame, 1)

    if ret:
        gray = cv2.cvtColor(frame, cv2.COLOR_BGR2GRAY)

        faces = cascade.detectMultiScale(gray, scaleFactor=1.3, minNeighbors=3)

        for (x, y, w, h) in faces:
            cropped = cv2.resize(frame[y:y+h, x:x+w], (198,198))
            cv2.rectangle(frame, (x, y), (x+w, y+h), (255, 0, 0), 2)

        if cv2.waitKey(1) & 0xFF == ord('q'):
            break
            cv2.destroyAllWindows()

        cv2.imshow('Stream', frame)

Answer 2

我曾经做过类似的事情，我使用的方案如下：

如您所知，我们需要 javascript 从网络摄像头获取用户照片。我发现 an article 向我们展示了如何做到这一点，如果你想使用 Django，你只能使用前端（HTML 文件）。该代码用于获取图片并将其编码为base64（字符串）并通过websocket发送。

在那之后，我们希望 Django 为 websocket 服务。过去，我是用 Flask 做的，而不是 Django，但是你可以看到如何使用 django-channel.

创建 websocket 服务器

对于最后一步，您需要一个带有 OpenCV 代码的函数。你需要 decode base64 and

def modify_picture(img_data):
    # decode image
    img = from_b64(img_data)

    # your OpenCV filter
    gray = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY)

    # encode image to base64
    return to_b64(gray)

当然，您不需要 while True 和 cv2.imshow，但 return 您的新图片的 base64 版本。希望对你有帮助。

更新：我在 github 中写了一个示例代码。不在 Django 中，但仍在 Python 中。希望它能给你更多的见识。

如何通过 Javascript 在 PythonAnywhere 上访问 OpenCV 中的网络摄像头？

How to access webcam in OpenCV on PythonAnywhere through Javascript?

javascript

django

opencv

python-3.x

pythonanywhere