Как крупные сайты работают с тысячами старых URL-адресов, которые удаляются каждый день?особенно когда веб-сайт перенаправляет на настроенную страницу с ошибкой при попадании неработающей ссылки, а не с ошибкой 404.(Я читал, что поисковые роботы не учитывают URL, которые выдают страницу ошибки 404)