Проблема с запуском Dask в AWS Sagemaker и AWS Fargate - PullRequest
0 голосов
/ 03 июля 2019

Я пытаюсь настроить кластер на AWS для запуска обучения распределенной модели sklearn с помощью dask. Чтобы начать, я пытался следовать этому уроку, который я надеюсь настроить: https://towardsdatascience.com/serverless-distributed-data-pre-processing-using-dask-amazon-ecs-and-python-part-1-a6108c728cc4

Мне удалось перенести док-контейнер в AWS ECR, а затем запустить шаблон CloudFormation для построения кластера на AWS Fargate. Следующим шагом в учебнике является запуск ноутбука AWS Sagemaker. Я пробовал это, но что-то не работает, потому что, когда я запускаю команды, я получаю ошибки (см. Изображение). В чем может быть проблема? Может ли это быть связано с VPC / подсетями? Это связано с доступом в интернет AWS Sagemaker? (я пытался включить и отключить это).

enter image description here

Ожидаемые результаты: задача обновления, расширение кластера Fargate для работы.

Фактические результаты: ничего из вышеперечисленного.

...