Как я могу поцарапать результаты футбола от flashscore, используя python - PullRequest
1 голос
/ 24 апреля 2020

Веб-утилизация Python

'Я новичок в утилизации. Я хочу очистить результаты Премьер-лиги сезона 2018-19 (расписание, результаты, дата), но я изо всех сил пытаюсь ориентироваться на сайте. все, что я получаю, это пустой список / [Нет]. если у вас есть решение, которым вы можете поделиться, это будет отличной помощью. '

' Вот что я попробовал. '

' ''

import pandas as pd
import requests as uReq
from bs4 import BeautifulSoup

url = uReq.get('https://www.flashscore.com/football/england/premier-league-2018-2019/results/')

soup = BeautifulSoup(url.text, 'html.parser')

divs = soup.find_all('div', attrs={'id': 'live-table'})

Home = []
for div in divs:
    anchor = div.find(class_='event__participant event__participant--home')

    Home.append(anchor)

    print(Home)

'' '

1 Ответ

1 голос
/ 24 апреля 2020

Вы должны будете установить requests_html для моего решения.

Вот как я go расскажу об этом:

from requests_html import AsyncHTMLSession
from collections import defaultdict
import pandas as pd 


url = 'https://www.flashscore.com/football/england/premier-league-2018-2019/results/'

asession = AsyncHTMLSession()

async def get_scores():
    r = await asession.get(url)
    await r.html.arender()
    return r

results = asession.run(get_scores)
results = results[0]

times = results.html.find("div.event__time")
home_teams = results.html.find("div.event__participant.event__participant--home") 
scores = results.html.find("div.event__scores.fontBold")
away_teams = results.html.find("div.event__participant.event__participant--away")
event_part = results.html.find("div.event__part")


dict_res = defaultdict(list)

for ind in range(len(times)):
    dict_res['times'].append(times[ind].text)
    dict_res['home_teams'].append(home_teams[ind].text)
    dict_res['scores'].append(scores[ind].text)
    dict_res['away_teams'].append(away_teams[ind].text)
    dict_res['event_part'].append(event_part[ind].text)

df_res = pd.DataFrame(dict_res)

Это приведет к следующему выводу:

enter image description here

...