Как искать?
Я хочу иметь возможность:
1. create a search engine
2. programatically search it thorugh an API (python, or other)
3. paginate through the results (all of them, if I chose)
4. store URL's or results that I want.
Возможно ли это даже с помощью системы пользовательского поиска Google?
Я включил выставление счетов,мой CC обновлен с Google, я делаю шаги 1..3 выше.
Например, при поиске я получу 4000 результатов, но я могу получить доступ только к 10 одновременно с помощью API,больше ничего, и когда я достигну 100 результатов, меня отключают.
Я хочу иметь возможность обрабатывать 1000 результатов, если захочу.
Прежде чем ответить, у вас лично есть рабочий код, которыйвыходит за пределы 100?
Если это так, было бы очень интересно поговорить, узнать, как вы это сделали.
Я сейчас использую Python, но это может быть любой язык.
-
Я пытался использовать & start = 100, 200 и т. Д. Для разбивки на страницы, но это не работает.
Я пытался получить 100 результатов вскрипт Python, завершающий работу программы, вызывающий ее снова с установкой start = 100 (после возвращения первого набора) и ничего не происходитнед.
Я хочу использовать API пользовательского поиска Google, платить Google за ежемесячную подписку, но не обнаружил, что это возможно.
Для любого заданного поиска я хочурешить, сколько результатов обрабатывать, может быть 1 КБ, может быть 20 КБ, мне просто нужен / нужен доступ к полному набору результатов, но я, похоже, не нашел способа сделать это.