Scrapy просмотр и запросы. Получите разницу для "https://www.mywebsite.com.sg" - PullRequest
0 голосов
/ 13 ноября 2018

Я пытаюсь очистить https://www.mywebsite.com.sg, но следующая команда возвращает ошибку 400 неверных запросов:

scrapy view https://www.mywebsite.com.sg

Если я использую:

data=requests.get("https://www.mywebsite.com.sg")

Я могу получить содержимое веб-страницы в data.text и data.content.

Однако все операции xpath в моем сценарии не работают, так как data.xpath и data.content оба пусты.

Кажется, что на веб-странице нет защиты как postman программного обеспеченияможно получить результат с помощью простого запроса HTTP GET.

Как получить правильно заполненный объект ответа?

...