Как заблокировать сканирование и индексацию URL-адресов, созданных API-интерфейсами? - PullRequest
0 голосов
/ 05 сентября 2018

Мы использовали API финансовых данных для генерации обновлений фондового рынка. Виджет API имеет выпадающий раздел для прокрутки различных опций, чтобы узнать список акций из разных метрик, например. Top Losers, Top Gainers и т. Д., Некоторые из вариантов в раскрывающемся списке.

Однако для каждого из этих разделов создается новый URL-адрес (например, www.abc.com?mm-opions=52-week,www.abc.com?mm-opions=top-gainers и т. Д.) и новый URL индексируется в поисковой выдаче Google. Это вызывает проблемы с дублированием контента, так как индексируются 4-5 версий одного и того же URL. Кто-нибудь может предложить решение о том, как я могу заблокировать дополнительные URL-адреса от сканирования и индексации?

Заранее спасибо!

...