Есть ли способ захватить заголовки запроса селена с помощью python? - PullRequest
0 голосов
/ 05 августа 2020

Я хочу захватить заголовок авторизации из исходящего запроса, либо напрямую с помощью селена, либо через прокси.

Методы, которые я пробовал:

  1. Получение журнала запросов с помощью driver.get_log('performance') => Кажется, что только некоторые запросы проиндексированы, и ни один из них не включал заголовок авторизации.
  2. Использование browsermobproxy для перехвата запросов => Хотя все запросы были зарегистрированы, он не вернул заголовков (headers==[], хотя headersSize==814)

Вот текущий код:

from time import sleep
from selenium import webdriver
from selenium.webdriver.common.keys import Keys
from browsermobproxy import Server

# Set configuration variables
browsermob_binary_path = r"path\to\browsermob-proxy"
facebook_credentials = {'email': 'my_email', 'password': 'my_password'}

# Configure proxy server
server = Server(browsermob_binary_path)
server.start()
proxy = server.create_proxy()

# Configure chrome to use proxy
chrome_options = webdriver.ChromeOptions()
chrome_options.add_argument('--proxy-server=%s' % proxy.proxy)
chrome_options.add_argument('--ignore-certificate-errors')

# Start chrome
driver = webdriver.Chrome(chrome_options=chrome_options)

# Start network capture
proxy.new_har('capture')

# Login to facebook
driver.get('https://apps.facebook.com/coin-master/?pid=socialfacebook')
driver.find_element_by_id("email").send_keys(facebook_credentials['email'])
driver.find_element_by_id("pass").send_keys(facebook_credentials['password'] + Keys.ENTER)

# Wait until game fully loads to make sure login request has taken place
sleep(100)

# Return all headers from captured requests
for i in range(len(proxy.har['log']['entries'])):
    print(proxy.har['log']['entries'][i]['request']['headers'])   # Always returns "[]"

# Close all dependencies
server.stop()
driver.quit()

1 Ответ

0 голосов
/ 06 августа 2020

Решение

Чтобы захватить заголовки в каждом запросе, мне пришлось заменить proxy.new_har('capture') на proxy.new_har('capture', options={'captureHeaders': True})

Раньше заголовки игнорировались, но флаг captureHeaders заставляет browsermobproxy захватывать их .

...