Tensorflow-如何使用完整批处理的 MNIST 数据集？

Question

我正在研究机器学习。在学习期间，我发现了使用 MNIST 的 Tensorflow CNN 代码 Dataset.And 这是我想知道的代码。

cross_entropy = tf.reduce_mean(-tf.reduce_sum(y_ * tf.log(y_conv), reduction_indices=[1]))
train_step = tf.train.AdamOptimizer(1e-4).minimize(cross_entropy)
correct_prediction = tf.equal(tf.argmax(y_conv,1), tf.argmax(y_,1))
accuracy = tf.reduce_mean(tf.cast(correct_prediction, tf.float32))
sess.run(tf.global_variables_initializer())

for i in range(1000):
  batch = mnist.train.next_batch(100)
   if i%100 == 0:
     train_accuracy = accuracy.eval(feed_dict={
        x:batch[0], y_: batch[1], keep_prob: 1.0})
    print("step %d, training accuracy %g"%(i, train_accuracy))
  train_step.run(feed_dict={x: batch[0], y_: batch[1], keep_prob: 0.5})

print("test accuracy %g"%accuracy.eval(feed_dict={
     x: mnist.test.images, y_: mnist.test.labels, keep_prob: 1.0}))

在这段代码中，我的问题是关于 batch = mnist.train.next_batch(100)。当我搜索这个时，这意味着这是 mini-batch，从 MNIST 数据集中随机选择 100 个数据。下面是我的问题。

当我想全批测试这段代码时，我该怎么办？只需将 mnist.train.next_batch(100) 更改为 mnist.train.next_batch(55000)？

Answer 1

是的，获得一批 55000 将在 MNIST 的所有数字上训练一个 epoch。

请注意，这是个坏主意：这可能不适合您的记忆。您将不得不保存 55000 位数字的权重激活和梯度...很可能您的 Python 会崩溃！

通过对一批 100 张随机图像进行 1000 次训练，你会得到很好的结果，你的计算机很高兴！

Tensorflow-如何使用完整批处理的 MNIST 数据集？

Tensorflow- How can I use MNIST Dataset with full batch?

machine-learning

tensorflow

mini-batch