Пользовательская модель Sagemaker: ошибка «Слишком большой архив данных модели» при создании конечной точки

Question

В последнее время, используя заведомо исправную конфигурацию конечной точки, я продолжаю получать: «Архив данных модели слишком велик. Пожалуйста, уменьшите размер архива данных модели или перейдите к типу экземпляра с большим объемом памяти». ошибка. Файл tar.gz имеет размер 7,7 ГБ, но не загружен в память (только небольшая его часть). Мне интересно, если что-то изменилось в последнее время, что может быть причиной этой проблемы.

Спасибо за любые идеи

Эммануил

Answer 1

Когда конечная точка создается с помощью SageMaker, артефакт данных модели загружается и распаковывается на связанный том диска / EBS в экземпляре. Этот размер тома пропорционален [1] выбранному вами типу экземпляра.

Пожалуйста, убедитесь, что у выбранного типа экземпляра достаточно дискового пространства для размещения несжатого файла .tar.gz. (Не имеет значения, будет ли он полностью или частично загружен в память позже, он должен помещаться на диск без сжатия).

[1] Размер тома для типов экземпляров - https://docs.aws.amazon.com/sagemaker/latest/dg/host-instance-storage.html