Я читал о BeautifulSoup, http-заголовках, аутентификации, файлах cookie и о механизме.
Я пытаюсь очистить свои любимые сайты с Python. Как девиантное искусство, для которого я нашел скребок. Сейчас я пытаюсь войти, но примеры кода проверки подлинности, которые я пытаюсь сделать, не работают.
Итак, вопрос, как мне узнать, какой тип аутентификации использует сайт, чтобы я знал, что пытаюсь войти в систему правильным способом? Включая такие вещи, как действительные пользовательские агенты, когда они пытаются заблокировать ботов.
Имейте мое невежество, поскольку я новичок в HTTP, Python и чистке.