在 scikit-learn 中将分类器保存到 postrgesql 数据库

Question

我知道 scikit-learn 模型可以通过使用 joblib 保存在文件中（如此处所述：http://scikit-learn.org/stable/modules/model_persistence.html）。但是，由于我在 postgresql plpythonu 函数中有机器学习过程，我宁愿将模型保存在 Postgresql 数据库中。

在 Postgresql 数据库中存储 scikit-learn 模型最方便的推荐方法是什么？

Answer 1

这里是 python 中的示例代码，用于将经过训练的模型发送到 Postgres table。请注意，您首先需要创建一个 table，其中包含一个类型为“bytea”的列，以二进制格式存储 pickled sklearn 模型。

from sklearn import svm
    
import psycopg2
import pickle
    
#### # Connect to postgres
    
connection = psycopg2.connect(user, password, host, port, database)
cur = connection.cursor()
model = svm.OneClassSVM()
model.fit(features)   # features are some training data
data = pickle.dumps(model)    # first we should pickle the model
    
#### # Assuming you have a postgres table with columns epoch and file

sql = "INSERT INTO sampletable (epoch, file)  VALUES(%s)"
cur.execute(sql, (epochpsycopg2.Binary(data)) )
connection.commit()

Answer 2

如果您使用的是 Django，则可以对 sci-kit 学习模型进行二值化

使用 pickle 然后将其保存到具有 BinaryField 成员的 table。

一个简单的例子：

views.py（节省）

from sklearn import svm
import pickle
from ml.models import MlModels
from rest_framework.response import Response

@api_view(['GET'])
def save(request):
  if request.method == 'GET':
    X = [[0.12, 22, 33, 100], [0.19, 19, 99, 33], [0.5, 50, 150, 0]]
    y = [1, 0, 1]
    model = svm()
    model.fit(X=X, y=y)
    data = pickle.dumps(model)
    MlModels.objects.create(model=data)
    return Response(status=status.HTTP_200_OK)

models.py

from django.db import models

class MlModels(models.Model):
    model       =   models.BinaryField()

views.py（使用）

import pickle
from ml.models import MlModels
from rest_framework.response import Response

@api_view(['GET'])
def predict(request):
    if request.method == "GET":
        X = [[0.12, 22, 33, 100]]
        raw_model = MlModel.objects.all()[0]
        model = pickle.loads(raw_model.model)
        print(model.predict(X))
        return Response(status=status.HTTP_200_OK)

在 scikit-learn 中将分类器保存到 postrgesql 数据库

Save classifier to postrgesql database, in scikit-learn

postgresql

scikit-learn

persistence