Я должен получить результаты поиска Google, доступные после первой страницы ответа Google, используя javascript.
Мой вариант использования - получить все URL-адреса, доступные в нескольких результатах поиска Google. В настоящее время с помощью утилиты xpath scrapper я могу добиться этого для первых 10 результатов. Но для других страниц я не могу получить контент.
Я пробовал пользовательский поиск Google, но для него требуется ключ API и CX, которые мне не разрешено создавать, и, кроме того, API имеет ограничение на возврат только 10 результатов одновременно.
Пожалуйста, предложите путь вперед, потому что я поражен и не могу найти путь вперед.
Заранее спасибо.