Comments 9
Dataset без Estimator как пиво без водки
А для Tensorflow есть средства визуального программирования вроде майкрософтовского Machine Learning Studio для Azure ML?
Кстати, для «one hot»-вектора у tensorflow тоже есть удобная функция: tf.one_hot
А если данные лежат в одном файле (типа как в MNIST), но держать их все в памяти всё-таки не хочется — в какую сторону копать?
Последний батч, возвращаемый итератором, может быть размером меньше BATCH_SIZE, так что все-таки делать
total += BATCH_SIZE
не вполне корректно. Один из возможных вариантов — среди прочего в sess.run считать что-то вроде tf.shape(img_batch)[0].Верное замечаение.
Вообще правильнее решить задачу было бы с помощью tf.metrix.accuarcy
, но в версии 1.4 статистику нельзя сбрасывать между эпохами, что не очень удобно.
Sign up to leave a comment.
Асинхронная загрузка больших датасетов в Tensorflow