Объект ResultSet не имеет атрибута «текст».Вы, вероятно, рассматриваете список предметов как отдельный предмет. - PullRequest
Новая
       76

Объект ResultSet не имеет атрибута «текст».Вы, вероятно, рассматриваете список предметов как отдельный предмет.

0 голосов
/ 03 октября 2018 
        from selenium import webdriver      
        from selenium.common.exceptions import NoSuchElementException
        from selenium.webdriver.common.by import By
        from selenium.webdriver.support.ui import WebDriverWait
        from selenium.webdriver.support import expected_conditions as EC
        import time
        from bs4 import BeautifulSoup


        #browser = webdriver.Firefox()#Chrome('./chromedriver.exe')
        YOUTUBER_HOME_PAGE_URL = "https://www.imdb.com/title/tt6452574/reviews?ref_=tt_ov_rt"
        PATIENCE_TIME = 60
        LOAD_MORE_BUTTON_XPATH = '//*[@id="load-more-trigger"]' 

        driver = webdriver.Chrome(r"C:\Users\Panu\Dropbox\Dr.Gokhan Sir\chromedriver.exe")
        driver.get(YOUTUBER_HOME_PAGE_URL)

        while True:
            try:
                loadMoreButton = driver.find_element_by_xpath('//*[@id="load-more-trigger"]')
                time.sleep(2)
                loadMoreButton.click()
                time.sleep(5)
            except Exception as e:
                print e
                break
        print "Complete"
        time.sleep(10)
        #Selenium hands the page source to Beautiful Soup
        soup_level1=BeautifulSoup(driver.page_source, 'html.parser')

    movie_containers = soup_level1.find_all('div', class_ = 'review-container')
    print(type(movie_containers))
    print(len(movie_containers))
sample_data = movie_containers
#div = sample_data.find_all('div', class_ = 'text show-more__control')
#sample_data.text for user review and titile
reviews = []
user_titles = []
for div in sample_data:
    title = div.div.a.text
    user_titles.append(title)
    #print(div.text)
    review = div.find_all('div', class_ = 'text show-more__control').text
    reviews.append(review)

Я получил ошибку при выполнении кода выше.AttributeError: Объект ResultSet не имеет атрибута «текст».Вы, вероятно, рассматриваете список предметов как отдельный предмет.Вы вызывали find_all (), когда хотели вызвать find ()?

1 Ответ

0 голосов
/ 03 октября 2018

Ваша линия: 

review = div.find_all('div', class_ = 'text show-more__control').text

вызывает проблему.div.find_all вернет все div с этим классом в виде объекта списка.Затем вы вызываете .text для этого объекта списка.Как Python узнает, какой текст вы хотите увидеть?Итерируйте свои результаты с помощью чего-то вроде: 

divs = div.find_all('div', class_ = 'text show-more__control')

for div in divs:
    #inside of this loop you will be accessing each review
    print(div)
    print("") #doing this to print a blank line to "separate" them for you

Затем используйте те, которые вы хотите.

...