Настройте учебное задание с помощью Ground Truth и BlazingText в Amazon Sagemaker - PullRequest
Новая
       6

Настройте учебное задание с помощью Ground Truth и BlazingText в Amazon Sagemaker

0 голосов
/ 28 декабря 2018

Я пытаюсь настроить обучающее задание с алгоритмом BlazingText в Amazon Sagemaker, используя его консоль.У меня есть файл манифеста следующим образом: 

{"source":"Text1","GroundtruthTryVideo":2,"GroundtruthTryVideo-metadata": 
{"confidence":0.66,"job-name":"labeling-job/groundtruthtryvideo","class-name":"TrackingToProspecting","human-annotated":"yes","creation-date":"2018-12-27T00:37:23.894062","type":"groundtruth/text-classification"}}
{"source":"Text2","GroundtruthTryVideo":1,"GroundtruthTryVideo-metadata": 
{"confidence":0.66,"job-name":"labeling-job/groundtruthtryvideo","class-name":"FirstDateProspecting","human-annotated":"yes","creation-date":"2018-12-27T00:37:23.894043","type":"groundtruth/text-classification"}}
{"source":"Text3","GroundtruthTryVideo":1,"GroundtruthTryVideo-metadata": 
{"confidence":0.9,"job-name":"labeling-job/groundtruthtryvideo","class-name":"FirstDateProspecting","human-annotated":"yes","creation-date":"2018-12-27T00:38:26.377216","type":"groundtruth/text-classification"}}

Когда я пытаюсь создать обучающую работу с использованием этого манифеста, у меня всегда возникают проблемы с результатом, мои конфигурации:

Источник алгоритма:

Встроенный алгоритм Amazon SageMaker (BlazingText)

Каналы:

  • Тип данных S3: ManifestFile
  • Тип распространения данных S3: FullyReplicated
  • Расположение S3: путь к ManifestFile (в S3 Bucket)

Я пытался использовать augmentedManifestFile и Pipe в качестве режима ввода вместо ManifestFile и File вводано у меня тот же результат, я не могу успешно завершить учебную работу.

Может ли кто-нибудь помочь мне в правильной настройке консоли?Спасибо.

1 Ответ

0 голосов
/ 02 января 2019

Я инженер в AWS и хочу присоединиться, чтобы предложить дополнительную помощь.Я бы повторил предложение выше, чтобы проверить параметр AttributeNames в вашем определении запроса на учебную работу.Я также хотел бы обратить ваше внимание на несколько примеров, которые могут помочь проиллюстрировать использование этой функции.

  1. В этом примере блокнота Jupiter показано, как использовать расширенный манифест для обучения модели обнаружения объектов.Я понимаю, что этот вариант использования немного отличается от вашего (обнаружение объектов или классификация текста), но концепции схожи.https://github.com/awslabs/amazon-sagemaker-examples/blob/master/ground_truth_labeling_jobs/object_detection_augmented_manifest_training/object_detection_augmented_manifest_training.ipynb
  2. Этот полный, сквозной пример задания по маркировке также содержит некоторый контент, касающийся дополненных манифестов, который может быть полезен.https://github.com/awslabs/amazon-sagemaker-examples/blob/master/ground_truth_labeling_jobs/object_detection_augmented_manifest_training/object_detection_augmented_manifest_training.ipynb
  3. В этом сообщении в блоге приведен еще один пример обучения модели с расширенным манифестом, проводимой с помощью консоли AWS.https://aws.amazon.com/blogs/machine-learning/easily-train-models-using-datasets-labeled-by-amazon-sagemaker-ground-truth/
  4. Наконец, документация по дополненным манифестам также может быть полезной.https://docs.aws.amazon.com/sagemaker/latest/dg/augmented-manifest.html#augmented-manifest-console

Наконец, помните, что с нами в AWS можно связаться по телефону https://aws.amazon.com/contact-us/.

...