Панды - зацикливание и запись в несколько строк

Question

Прямо сейчас цикл в моем коде перезаписывает одну и ту же строку.Как перейти к следующей строке?

желаемый результат: для каждой ссылки, введенной пользователем, данные будут записаны в уникальную строку

from bs4 import BeautifulSoup
import urllib.request
import pandas as pd


def get_bullets(urls):
    urls = urls.split(",")
    for url in urls:
          page = urllib.request.urlopen(url)
          soup = BeautifulSoup(page,'lxml')
          sku = url.split('/')[5]
          content = soup.find('div', class_='js-productHighlights product-highlights c28 fs14 js-close')
          bullets = content.find_all('li', class_='top-section-list-item')        
          bullets_text = '\n'.join([ bullet.text for bullet in bullets ])

          temp_df = pd.DataFrame([[sku, bullets_text]], columns = ['sku','bullets'])
          temp_df.to_csv('book2.csv', index=False)

get_bullets(input('enter urls'))

пользовательский ввод: https://www.bhphotovideo.com/c/product/1473086-REG/canon_3453c001_eos_rebel_sl3_dslr.html,https://www.bhphotovideo.com/c/product/1346734-REG/canon_eos_6d_mark_ii.html

Спасибо!

Answer 1

Вы перезаписываете данные в csv каждого цикла.Возможно, сохранить результат каждого цикла в списке, а затем объединить результаты перед записью на диск?

def get_bullets(urls):
    urls = urls.split(",")
    dfs = []
    for url in urls:
        # do loop stuff
        temp_df = ...
        dfs.append(temp_df)
    df = pd.concat(dfs, ignore_index=True)
    df.to_csv('book2.csv', index=False)