Скачать изображения с Mechanical Turk

Question

У меня есть куча URL в Mechanical Turk, откуда я могу загрузить загруженные изображения.Я написал скрипт на Python для загрузки всех файлов.Тем не менее, я должен войти в Mechanical Turk, чтобы сначала получить доступ к файлам.Есть ли API или лучшие практики для загрузки большого количества файлов из Mechanical Turk?

Answer 1

Boto http://boto.cloudhackers.com/ - это оболочка Python для веб-сервисов Amazon, включая Mechanical Turk;см. справочник API Mechanical Turk по адресу http://boto.cloudhackers.com/ref/mturk.html

. В качестве альтернативы вы можете использовать urllib2, mechanize или Scrapy для непосредственного их получения.Все три будут поддерживать базовую аутентификацию или аутентификацию на основе файлов cookie.