оптимальный размер файла tfrecord - PullRequest
0 голосов
/ 05 сентября 2018

Исходя из вашего опыта, какой будет идеальный размер файла .tfrecord, который лучше всего будет работать на самых разных устройствах (жесткий диск, ssd, nvme) и местах хранения (локальный компьютер, кластер hpc с сетевыми подключениями)

В случае, если производительность на технически более мощном компьютере в облаке будет ниже, чем на моем локальном ПК, может ли размер набора данных tfrecord стать основной причиной узкого места?

Спасибо

1 Ответ

0 голосов
/ 18 сентября 2018

Официальный сайт Tensorflow рекомендует ~ 100 МБ (https://www.tensorflow.org/performance/performance_guide)

...