Error: "Your deployment does not have an associated swagger.json" - ACI deployment on Stream Analytics Job

Error: "Your deployment does not have an associated swagger.json" - ACI deployment on Stream Analytics Job

最新更新:在 public 审查 link 流分析作业的当前版本中,不支持 ACI 容器部署。因此,我将关闭这个问题,直至另行通知。如需更多信息,请关注下面发布的 GitHub 话题。

注意:当 Deployment 值是 ACI 容器而不是 AKS 集群时,就会出现问题。使用 Kubernetes 集群,成功创建 Azure ML 服务功能。虽然我想用 ACI 容器而不是 AKS 集群来测试我的功能。

我正在尝试在流分析作业服务中创建 Azure ML 服务函数。为此,我在 Azure 容器实例 (a.k.a ACI) 中使用了一个已部署的 ml 模型。但是,我收到此错误:

link of the issue on GitHub and the related Microsoft document

尽管存在以下三个因素,但仍存在此错误:

因素 1:当我使用评分 URL(ACI 容器的)在本地(在 Jupyter Notebook 中)对某些值进行评分时,评分成功。
因素 2:我已经在我的 score.py 文件中推断出输入数据的模式。
因素3:我把infer-schema[numpy-support]模块作为对环境文件的依赖。

我做错了什么?

ACI 容器实例是使用授权(主)密钥部署的,另外我在我的 score.py 文件中推断输入和输出样本的模式。但是,Stream 作业无法识别 swagger 文件。因为我在 score.py 文件上推断了模式,所以我 read 认为 swagger.json 文件会自动生成。

我的 score.py 文件样本:

import json
import numpy as np
import os
import itertools
import joblib
from sklearn.ensemble import RandomForestRegressor

from azureml.core.model import Model

from inference_schema.schema_decorators import input_schema, output_schema
from inference_schema.parameter_types.numpy_parameter_type import NumpyParameterType

def init():

    global model

    # retrieve the path to the model file using the model name
    model_path = Model.get_model_path('<model_name>')
    model = joblib.load(model_path)

input_sample = np.array([["0", 0, 0, 0, 0, 0]])
output_sample = np.array([0])

@input_schema('raw_data', NumpyParameterType(input_sample))
@output_schema(NumpyParameterType(output_sample))

def run(raw_data):
    try:

        data = np.array(raw_data)
        result=[]

        for array in data:

            prediction_result=model[array[0]].predict(array[1:].reshape(1,-1))
            result.append(prediction_result.tolist())

        result=list(itertools.chain.from_iterable(result))

        # you can return any data type as long as it is JSON-serializable
        return result

    except Exception as e:
        error = str(e)
        return error

我的 env.yml 文件样本:

name: project_environment
dependencies:
  - python=3.7.3
  - pip:
    - azureml-defaults
    - inference-schema[numpy-support]
    - joblib
    - numpy
    - scikit-learn==0.20.3

对于解决此问题的任何评论,我将不胜感激。

关键发现:

我比较了 AKS 集群和 ACI 容器实例的 swagger.json 文件。 而这两个swagger文件的区别在于关键"paths"。 在 AKS 中,swagger.json 中的路径是:"paths": { "/api/v1/service/aks-service/":.... 等 在 ACI 中,swagger.json 中的路径是:"paths": { "/":....etc

部分 Swagger.json AKS 集群:

ACI 集群 Swagger.json 的一部分:

而且我认为这可能是问题的根源。也许流分析作业函数无法识别 auto-generate ACI 容器函数签名的路径“/”。

我们首先支持 AKS,因为这是推荐的实时评分方法。由于此功能在 public 预览版中,我们正在为部署在 ACI 上的模型完成一些性能基准测试,以便它可以可靠地用于 dev/test 目的。我们应该会在接下来的几周内提供对 ACI 部署的支持。