Будет только один запрос, потому что есть только один URL. Если есть два URL-адреса с одного хоста с fetcher.threads.per.queue=2
, то к одному хосту могут быть два одновременных запроса. Большое количество fetcher.threads.fetch
имеет смысл, только если у вас есть большое количество хостов, которые нужно сканировать, или вы сканируете свой собственный локальный быстрый и отзывчивый веб-сервер. В последнем случае fetcher.threads.per.queue
должно быть равно или близко к fetcher.threads.fetch
. Если это не ваш собственный сервер и вам явно не разрешено, вы всегда должны сохранять значение по умолчанию для fetcher.threads.per.queue
, которое представляет собой один поток (= 1) без параллельных подключений к одному хосту и гарантированной задержки между последовательными запросами.