Как я могу получить все страницы, которые возвращают 200 ответ сайта
Я не хочу никаких данных со страницы, просто хочу проверить, какие страницы доступны. например https://www.httpbin.org
https://www.httpbin.org/anything
https://www.httpbin.org/ip
...
Я пытался использовать Google site:example.com, но он дает только 1000 результатов (хотя результаты поиска составляют 1 миллион), я пытался DirBuster, но он получил только 80 000 результатов
есть ли готовый инструмент или функция, которая делает это, или как я могу go об этом?