Как PiPL.com может выполнить публичный поиск на Linkedin.com

Question

Я занимаюсь разработкой веб-сайта с репутацией в Интернете и мне интересно узнать, как pipl выполняет поиск на linkedin.com без Oauth.Кто-нибудь может сказать мне способ поиска людей на Linkedin.com и Facebook.com без oAuth (если не API, каким-либо другим способом?)?

Answer 1

Единственный способ, которым Facebook позволяет вам это сделать, - это получить их разрешение.Вы должны заполнить эту форму: http://www.facebook.com/apps/site_scraping_tos.php

Насколько я понимаю, они на самом деле не дают такого разрешения, если вы уже не являетесь компанией с хорошей репутацией и довольно быстро заблокируют вас, если вы сканируете их сайт безразрешение.

Я предполагаю, что для linkedin вы должны только следовать их файл robots.txt, который можно найти здесь: http://www.linkedin.com/robots.txt