无法打印模型的混淆矩阵

Question

我实现了一个 MLP，它运行良好。但是，我在尝试打印混淆矩阵时遇到问题。

我的模型定义为...

logits = layers(X, weights, biases)

在哪里...

def layers(x, weights, biases):
    layer_1 = tf.add(tf.matmul(x, weights['h1']), biases['b1'])
    layer_2 = tf.add(tf.matmul(layer_1, weights['h2']), biases['b2'])
    out_layer = tf.matmul(layer_2, weights['out']) + biases['out']

    return out_layer

我在 mnist 数据集上训练模型。训练后，我能够成功打印出模型的准确性...

pred = tf.nn.softmax(logits)

correct_prediction = tf.equal(tf.argmax(pred, 1), tf.argmax(y, 1))

accuracy = tf.reduce_mean(tf.cast(correct_prediction, "float"))
print("Accuracy: ", accuracy.eval({X:mnist.test.images, y:mnist.test.labels}))

准确率是 90%。现在我想打印出结果的混淆矩阵。我尝试了以下...

confusion = tf.confusion_matrix(
         labels=mnist.test.labels, predictions=correct_prediction)

但这给了我错误...

ValueError: Can not squeeze dim[1], expected a dimension of 1, got 10 for 'confusion_matrix/remove_squeezable_dimensions/Squeeze' (op: 'Squeeze') with input shapes: [10000,10].

打印混淆矩阵的正确方法是什么？我已经挣扎了一段时间了。

Answer 1

看起来 tf.confusion_matrix 的参数之一有一个 10 作为第二个 dim。问题是 mnist.test.labels 或 correct_prediction 是否被 one-hot 编码？这样就可以解释了。你需要那里的标签作为一个暗淡的张量。你能打印出这两个张量的形状吗？

另外，correct_prediction 似乎是一个布尔张量，用于标记您的预测是否准确。对于您想要预测标签的混淆矩阵，应该是 tf.argmax( pred, 1 )。类似地，如果你的标签是 one-hot 编码的，你想为混淆矩阵解码它们。所以试试这一行 confusion:

confusion = tf.confusion_matrix(
     labels = tf.argmax( mnist.test.labels, 1 ),
     predictions = tf.argmax( pred, 1 ) )

为了打印混淆矩阵本身，需要使用eval，最终结果：

print(confusion.eval({x:mnist.test.images, y:mnist.test.labels}))

Answer 2

这对我有用：

confusion = tf.confusion_matrix(
       labels = tf.argmax( mnist.test.labels, 1 ),
       predictions = tf.argmax( y, 1 ) )
   print(confusion.eval({x:mnist.test.images, y_:mnist.test.labels})) 

[[ 960    0    2    2    1    5    7    2    1    0]
 [   0 1113    3    2    0    1    4    2   10    0]
 [   6    7  941   15   12    2   10    8   27    4]
 [   2    1   27  926    1   12    1    8   24    8]
 [   1    2    6    1  928    0    9    2    9   24]
 [   9    2    8   51   12  729   15    9   50    7]
 [  13    3   10    2    9    9  905    2    5    0]
 [   1    9   28    8   11    1    0  938    3   29]
 [   6   10    7   19    9   13    8    5  891    6]
 [   9    7    2    9   43    5    0   14   12  908]]

Answer 3

对于 NLTK 混淆矩阵，您需要一个列表

classifier = NaiveBayesClassifier.train(trainfeats)
refsets = collections.defaultdict(set)
testsets = collections.defaultdict(set)

lsum = []
tsum = []

for i, (feats, label) in enumerate(testfeats):
  refsets[label].add(i)
  observed = classifier.classify(feats)
  testsets[observed].add(i)
  lsum.append(label)
  tsum.append(observed

print (nltk.ConfusionMatrix(lsum,tsum))

无法打印模型的混淆矩阵

Cannot print confusion matrix for model

python

machine-learning

confusion-matrix

mnist

tensorflow