Код Pandas работает с ошибкой памяти с большим количеством доступных оперативной памяти - PullRequest
0 голосов
/ 15 июня 2019

sklearn fit, MinMax scaler и т. Д. Приводят к ошибке памяти, когда я запускаю ноутбук jupyter на ec2-экземпляре m5a.xlarge (16 ГБ ОЗУ). Принимая во внимание, что когда я запускаю тот же код на моей локальной машине (MacBook Air, 8 ГБ ОЗУ), код работает нормально, хотя и медленно.

Я проверил, что моя версия Python является 64-битной.

Я что-то упустил?

from sklearn import preprocessing

scaler = preprocessing.MinMaxScaler(copy=True)
df2_scaled = scaler.fit_transform(df2)

это дает следующий eror:

MemoryError                               Traceback (most recent call last)

Это было отмечено как возможная копия другого вопроса здесь . Хотя у меня возникает проблема с памятью, даже если я запускаю обычный файл .py. В обоих случаях, глядя на результат команды top, я вижу более 5 ГБ свободной памяти

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...