получение параметра из списка или анализатора HTML с использованием bs4 - PullRequest
Новая
       20

получение параметра из списка или анализатора HTML с использованием bs4

0 голосов
/ 14 ноября 2018

Я пытаюсь получить предлагаемое слово Google, введя неправильно написанное слово:

Ниже мой код: Вход: Johnny walker rd lbl Выход: Johnny walker red label

import requests
import pandas as pd
from bs4 import BeautifulSoup
from pprint import pprint
key = "Johnny walker rd lbl"
query = "https://www.google.com/search?q=" + key
r = requests.get(query)
html_doc = r.text
soup = BeautifulSoup(html_doc, 'html.parser')
#for s in soup.find_all(id="rhs_block"):
 #   pprint(s.text)
find=soup.find_all('script',attrs={'type':'text/javascript'})
mylist = []
for x in find:
    mylist.append(str(x.string))
print(mylist)

Выход: 

['None', "(function(){var eventid='QO7rW5TtM5OYvQT516NY';google.kEI = 
eventid;})();", 'google.ac&&google.ac.c({"agen":true,"cgen":true,
"client":"heirloom-serp","dh":true,"dhqt":true,"ds":"","ffql":"en","fl":true,"host":"google.com","isbh":28,"jsonp":true,
"msgs":{"cibl":"Clear Search","dym":"Did you mean:","lcky":"I\\u0026#39;m Feeling Lucky","lml":"Learn more",
"oskt":"Input tools","psrc":"This search was removed from your \\u003Ca href=\\"/history\\"\\u003EWeb History\\u003C/a\\u003E","psrl":"Remove",
"sbit":"Search by image","srch":"Google Search"},"ovr":{},"pq":"Johnny walker red label","refpd":true,"rfs":[],"sbpl":24,"sbpr":24,"scd":10,"sce":5,"stok":"7UqfdDr4nbKtZNfvytsBW8kPB9E","uhde":false})']

как мне получить только тег "pq" из списка доступных выходных данных. Пожалуйста, помогите.

1 Ответ

0 голосов
/ 14 ноября 2018

используйте регулярное выражение 

import re

....
html_doc = r.text
output = re.search(r'"pq":"([^"]+)', html_doc).group(1)
...