Каков уровень файла журнала?

Question

Есть задача написать crawler для сканирования веб-страницы по python.одно из требований - указать уровень файла журнала, а также уровень детализации файла журнала.Но я не знаю, что должно быть записано?а какой уровень детализации?Кто-нибудь может привести пример?

Answer 1

Это похоже на то, что вы сейчас регистрируете:

12:01:08 Downloaded http://a.com/aaaaa/1.
12:02:51 Downloaded http://a.com/aaaaa/2.

Это будет входить в систему более подробно:

12:01:03 Preparing to download http://a.com/aaaaa/1...
12:01:03 Resolved host 'a.com' to '147.34.98.1'
12:01:04 Connected to 'a.com' (147.34.98.1)
12:01:04 Sent HTTP request http://a.com/aaaaa/1
12:01:06 Downloaded (48 KB in 1.5s) from http://a.com/aaaaa/1
12:01:08 Indexed http://a.com/aaaaa/1 (in 1.2s)
12:01:08 Downloaded http://a.com/aaaaa/1.

12:02:39 Preparing to download http://a.com/aaaaa/2
....

Если вы даете контроль над уровнем журнала, это может бытьуровень посередине:

12:01:06 Downloaded (48 KB in 1.5s) from http://a.com/aaaaa/1
12:01:08 Indexed http://a.com/aaaaa/1 (in 1.2s)

12:02:36 Downloaded (153 KB in 1.3s) from http://a.com/aaaaa/2
12:02:40 Indexed http://a.com/aaaaa/2 (in 1.6s)