Как извлечь время модификации файла соскобленного изображения? - PullRequest
0 голосов
/ 17 сентября 2018

Я пытаюсь очистить часть сайта, содержащего изображения частей, чтобы собрать статистику.Однако URL или дата загрузки или создания изображения отсутствуют, поэтому для получения этой информации мне нужно использовать приблизительный файл изображения дата модификации .Используя cURL , это простая задача с:

curl -sI https://path.to.com/blahblah_123/item_picture.jpg |grep "last-modified"

Однако, я думаю, было бы удобнее получить это в пауке scrapy .Но я понятия не имею, поддерживает ли scrapy это вообще, так как я не могу найти это в документации.

Есть ли способ получить дату последнего изменения отсканированногоизображение в скрапе?

1 Ответ

0 голосов
/ 17 сентября 2018

Из документации Scrapy , response имеет поле headers dict.

Таким образом, вы можете получить доступ к last-modified с помощью response.headers.get('Last-Modified').

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...