Сканеры и запросы GET и POST

Question

Я слышал, что сканеры должны выполнять только запросы GET, а не POST.

В реальном мире это верное предположение?

Answer 1

Обычно они не выполняют POST-запросы. Это просто текущее положение дел и нигде не продиктовано, я считаю. Некоторые поисковые системы экспериментируют со сканирующими формами , но это все еще запросы GET.

Answer 2

Вежливые сканеры используют только запросы GET. Так же, как вежливые сканеры подчиняются bots.txt.

Однако даже если Google играет быстро и свободно с определением вежливости, их сканер нанес серьезный урон пропускной способности некоторым сайтам, включая stackoverflow.

Answer 3

Вы спрашиваете, будут ли сканеры анализировать URL-адреса из тегов формы и следовать им? Некоторые будут. Это довольно безопасное предположение, что они всегда будут использовать глагол GET.

Спам-боты - это отдельная история.