Можно ли показать и сохранить топ-3 результатов поиска Google?

Question

Можно ли отобразить и сохранить результаты, полученные по поисковому запросу Google? Поиск выполняется из клиента commons-http, через мое веб-приложение. Мои вопросы:

1. Это допустимо?
2. Этично ли это?
3. Возможно ли это?

Я слышал, что Google меняет теги и блокирует скребки. Это правильно? Есть ли другой способ сделать это?

Answer 1

Конечно, можно поцарапать Google для результатов - многие делают. Вы можете использовать прокси, чтобы замаскировать свой IP и избежать блокировки.

Убедитесь, что вы установили свой пользовательский агент в браузер.

Google это не нравится и предоставляет API поиска , но это довольно бесполезно.