У меня проблема с загрузкой данных размером около 70 ГБ с использованием numpy.load('my_data.npy')
в python2.7
Вот ошибка:
my_data=np.load('my_data.npy')
Traceback (most recent call last):
File "<stdin>", line 1, in <module>
File "/home/.local/lib/python2.7/site-packages/numpy/lib/npyio.py", line 419, in load
pickle_kwargs=pickle_kwargs)
File "/home/.local/lib/python2.7/site-packages/numpy/lib/format.py", line 640, in read_array
array = pickle.load(fp, **pickle_kwargs)
EOFError
Мой набор данных имеет форму (400,300,256,256,19)
dataset=np.asarray(dataset)
numpy.save('my_data.npy',dataset)
Большое спасибо