scikit-learn：如何对具有不同特征的数据训练和数据测试进行分类？

Question

我的数据序列：3 个特征（永久数据）

我的数据测试：它每次都在变化（2 个特征或 1 个特征），在我的示例代码中它现在是 2 个特征。

我想用不同的特征进行分类，因为它是不同的维度。我怎样才能做到这一点？在我的代码下面：

def classify(a):
    xtrain = np.loadtxt(open("el.csv","rb"), delimiter=",", usecols= (0,1,2), skiprows=1)
    print xtrain
    >>[[ -56.  -82. -110.]  
       [-110. -110. -110.]  
       [ -58. -110.  -79.]  
       [ -56. -110. -110.]  
       [ -57.  -83. -110.]  
       [ -63. -110. -110.]  
       [-110. -110. -110.]]

    ytrain = np.loadtxt(open("el.csv","rb"), delimiter=",", usecols= (3,), dtype=int, skiprows=1)   
    print ytrain
    >>[1 1 2 2 3 3 4]       

    xtest = np.asarray(a)
    xtest = xtest.reshape([1,-1])
    print xtest
    >>[['-83' '-56']]

    knn = neighbors.KNeighborsClassifier(n_neighbors=7, weights='distance') #Fuzzy K-Nearest Neighbor
    knn.fit(xtrain, ytrain)

    results = knn.predict(xtest)
    print results

错误是：

ValueError: Incompatible dimension for X and Y matrices: X.shape[1] == 2 while Y.shape[1] == 3

Answer 1

目前 sklearn 模型不处理测试集中的缺失值。您可以维护多个模型（针对不同的特征进行训练）并为您要预测的每种类型的数据使用适当的模型。另一种选择是为不具备所有功能的实例填充缺失值。

Answer 2

首先，让我们生成一些训练和测试数据：

import numpy as np
xtrain = np.asarray([[ -56.,  -82., -110.],
                     [-110., -110., -110.],
                     [ -58., -110.,  -79.],
                     [ -56., -110., -110.],
                     [ -57.,  -83., -110.],
                     [ -63., -110., -110.],
                     [-110., -110., -110.]], dtype='float')
ytrain = np.asarray([1, 1, 2, 2, 3, 3, 4], dtype='int')

现在您必须使用整数键创建字典 knns。 key n 对应的值是一个 k 最近邻分类器，仅使用 第一个 n 训练数据的特征。

from sklearn.neighbors import KNeighborsClassifier
knns = {}
for n_feats in range(1, xtrain.shape[-1] + 1):
    knns[n_feats] = KNeighborsClassifier(n_neighbors=7, weights='distance')
    knns[n_feats].fit(xtrain[:, :n_feats], ytrain)

classify函数应该使用两个参数，即测试数据和分类器字典。通过这种方式，您可以确保分类器是由使用与测试数据完全相同的特征（并丢弃其他特征）训练的分类器执行的：

def classify(test_data, classifiers):
    """Classify test_data using classifiers[n], which is the classifier
    trained with the first n features of test_data
    """
    X = np.asarray(test_data, dtype='float')
    n_feats = X.shape[-1]
    return classifiers[n_feats].predict(X)

Demo（注意测试数据必须是数字而不是字符串）：

In [107]: xtest1 = [[-83, -56]]

In [108]: classify(xtest1, knns)
Out[108]: array([3])

In [109]: xtest2 = [[ -52],
     ...:           [-108],
     ...:           [ -71]]
     ...: 

In [110]: classify(xtest2, knns)
Out[110]: array([2, 1, 3])

In [111]: xtest3 = [[-122,  -87,  -94],
     ...:           [-136,  -99, -107]]
     ...: 

In [112]: classify(xtest3, knns)
Out[112]: array([1, 1])

scikit-learn：如何对具有不同特征的数据训练和数据测试进行分类？

scikit-learn: How to classify data train and data test with a different features?

python

numpy

knn

scikit-learn