Как получить контент с других сайтов

Question

Существует так много публичных веб-сайтов, которые отображают весь сайт в виде рамки на своем сайте. Например: - Проверьте прокси-сайты, в которых есть рамка и поле, в котором мы вводим URL. После ввода URL-адреса эти сайты извлекают всю HTML-страницу и отображают ее в своем окне. Я хочу узнать, как они выполняют это. Разве они не сталкиваются с проблемой XSS? Пожалуйста, помогите мне понять и научиться. :)

Answer 1

Прежде всего, вы не должны чистить чужие сайты и показывать их в своем собственном фрейме.

вы можете получить все содержимое URL , используя инструмент cURL

Если вы можете кодировать на Java, используйте Apache HTTPClient library

Answer 2

Ограничения на межсайтовый скриптинг (XSS) имеют отношение только к JavaScript.Проблема в том, что на ваш сайт может быть вставлен произвольный исполняемый код без ограничений.Есть много способов связать контент с других сайтов с вашим;эта идея является одной из основных идей WWW.
Одна из многих возможностей заключается в том, что они используют Framing , например, с iframes: <iframe src="someone-elses-website.com">.

Answer 3

Вы можете попробовать, например, модуль urllib в python, чтобы очистить сайты по их URL, но будьте осторожны с вещами, которые вы не должны делать. Всегда будьте в курсе условий. Помните, с великой силой приходит большая ответственность.