Форма запроса на разрешение Facebook для сканирования? - PullRequest
2 голосов
/ 22 октября 2010

Я уже некоторое время гуглю, но, думаю, я использую неправильный набор ключевых слов. Кто-нибудь знает этот URI, который позволяет мне запрашивать разрешение от Facebook, чтобы я мог сканировать их сеть? В прошлый раз, когда я использовал Python для этого, кто-то предложил мне посмотреть на него, но я тоже не смог найти этот пост.

Ответы [ 2 ]

5 голосов
/ 22 октября 2010

Удивительно, но это указано в их файле robots.txt.

Ссылка, которую вы ищете, это:

http://www.facebook.com/apps/site_scraping_tos.php

Если выуже не огромная организация, не ожидайте, что там будет явный белый список.Если у вас нет явного белого списка, вам не разрешено сканировать вообще, в соответствии с robots.txt и TOS.Вместо этого вы должны использовать API.

Даже не думайте притворяться одним из искателей, занесенных в белый список.Facebook фильтрует IP-адреса из белого списка для каждого сканера, а все остальное, что выглядит как сканирование, получает мгновенный бан.Некоторое время пользователи, которые просто нажимали слишком быстро, могли время от времени сталкиваться с этим.

0 голосов
/ 22 октября 2010

Так как это сообщество с логином и паролем, я не уверен, насколько оно легально для сканирования.Если вы видите даже индексы Google, то только страницы профиля пользователя.Но не их посты или фотографии и т. Д.

Я бы предложил вам опубликовать этот вопрос на форуме Facebook.Но вы можете проверить это здесь -

  1. Разработчики Facebook
  2. Документация для разработчиков Facebook
  3. FacebookФорум разработчиков
...