Это не считается "вежливым", но, тем не менее, это часто делается. Некоторые веб-сайты принимают контрмеры против такой деятельности, но в целом вы сможете сделать это без каких-либо последствий.
Если вы хотите сделать это правильно, вы просто спросите оператора сайта. Насколько вам известно, с ними все будет в порядке, или у них даже может быть набор API, который вы можете использовать.
Но если вы выполняете очистку без разрешения, если ваш сайт становится популярным, а исходные сайты обнаруживают, что вы делаете, они могут отправить вам письмо о прекращении и отказе от участия и / или предпринять дополнительные юридические действия, если они Вы нарушаете авторские права на материал.
http://en.wikipedia.org/wiki/Web_scraping