Как получить доступ к текстовому файлу из S3 Bucket в Sagemaker для обучения модели? - PullRequest
0 голосов
/ 25 апреля 2020

Я пытаюсь обучить модель chatbot с использованием тензорного потока и архитектуры seq to seq, используя sagemaker. Я также завершил кодирование в spyder, но когда я пытаюсь получить доступ к cornel mov ie Набор данных корпуса из корзины s3 в sagemaker, он говорит, что такого файла нет или каталог, даже предоставляющий доступ к s3 bucket

1 Ответ

1 голос
/ 25 апреля 2020
  • , если вы находитесь в записной книжке : aws s3 cp s3://path_to_the_file /home/ec2-user/SageMaker скопирует данные из s3 в ваш каталог SageMaker в записной книжке (если у вас есть разрешения IAM для этого)

  • , если вы находитесь в контейнере docker учебного задания SageMaker : вам нужно пройти путь s3 к обучающему вызову SDK: estimator.fit({'mydata':'s3://path_to_the_file'}) и в docker ваш код тензорного потока должен читаться по этому пути: opt/ml/input/data/mydata

...