Вопросы с тегом scrapy - PullRequest

Вопросы с тегом scrapy

5 голосов
2 ответов

Я пытаюсь поцарапать thesession.org , чтобы создать таблицу того, сколько раз каждая мелодия...

Ben / 26 ноября 2011
0 голосов
2 ответов

У меня проблемы при создании правила.Предположим, что мой начальный URL-адрес http://www.example

Nilesh Tighare / 21 ноября 2011
3 голосов
1 ответ

Я могу установить http-прокси с помощью request.meta ['proxy'], но как мне аутентифицировать прокси

Lionel / 20 ноября 2011
0 голосов
2 ответов

Как мне добавить URL в SgmlLinkExtractor? То есть как добавить произвольный URL для запуска...

Lionel / 20 ноября 2011
0 голосов
1 ответ

У меня есть сценарий Scrapy, и он работает нормально. Чтобы передать его своим друзьям, мне нужно,...

user1020058 / 14 ноября 2011
0 голосов
1 ответ

Я копирую pdf файлы с сайта, используя Scrapy, фреймворк для просмотра веб-страниц Python. Сайт...

Kex / 13 ноября 2011
0 голосов
2 ответов

Я использовал Pip Install Scrapy на моем Mac 10.6.8, и я получаю ошибку ниже кто-нибудь может мне...

Jas / 12 ноября 2011
0 голосов
3 ответов

Я новичок в xpath, поэтому, пожалуйста, потерпите меня. В настоящее время я пытаюсь использовать...

goh / 10 ноября 2011
6 голосов
1 ответ

Я пытаюсь сканировать веб-сайт, который достаточно сложен, чтобы остановить ботов, я имею в виду,...

user1020058 / 10 ноября 2011
1 голос
1 ответ

Как я могу связать разные публичные ip-адреса с пауком-скрапом?И, кроме того, возможно ли...

jack / 08 ноября 2011
12 голосов
2 ответов

Я работаю над Scrapy, чтобы сканировать страницы, однако я не могу обработать страницы с помощью...

HjySix / 08 ноября 2011
1 голос
2 ответов

Чтобы получить нужные мне данные с веб-сайта с использованием scrapy, мне сначала нужно создать...

mercutio22 / 07 ноября 2011
0 голосов
0 ответов

я использую следующее правило Rule(SgmlLinkExtractor(deny=path_deny_base,...

groovehunter / 07 ноября 2011
0 голосов
1 ответ

Я начал с scrapy несколько дней назад, узнал о том, как очищать определенные сайты, например, с...

groovehunter / 06 ноября 2011
10 голосов
4 ответов

Мой скрипт Scrapy работает нормально, когда я запускаю его в сценариях «один раз» из командной...

Trindaz / 03 ноября 2011
0 голосов
1 ответ

сканер scrapy вызывается через скрипт оболочки, который используется в качестве командной строки в...

user891260 / 02 ноября 2011
2 голосов
1 ответ

Когда я запускаю команду scrapy crawl openings -o items.json -t json, как указано в руководстве, я...

abhishek gattani / 01 ноября 2011
0 голосов
1 ответ

на моей html-странице есть таблица с двумя столбцами, первый из которых имеет имя, а второй -...

kodotkom / 30 октября 2011
3 голосов
4 ответов

Я пишу программу Scrapy для извлечения данных. Это URL , и я хочу очистить 20111028013117 (код)...

user1020058 / 29 октября 2011
1 голос
2 ответов

Я сейчас пытаюсь извлечь информацию из плохо отформатированной веб-страницы.В частности, страница...

Edwardr / 25 октября 2011
8 голосов
2 ответов

У меня есть проект Scrapy, и я пытаюсь сохранить выходные элементы как объект из определения модели...

Alex / 25 октября 2011
1 голос
1 ответ

Я пытаюсь заставить Scrapy 0.12 изменить настройку «максимальной глубины» для другого URL-адреса в...

Miguel A. Friginal / 23 октября 2011
2 голосов
2 ответов

Итак, я потратил довольно много времени на просмотр документации и руководств по Scrapy, и с тех...

jerius / 20 октября 2011
1 голос
3 ответов

Я использую scrapy для извлечения данных с определенных веб-сайтов. Проблема в том, что мой паук...

HjySix / 18 октября 2011
13 голосов
2 ответов

Я начал использовать Scrapy , чтобы очистить несколько веб-сайтов. Если позже я добавлю новое поле...

del / 14 октября 2011
Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...