Я пишу код Scrapy, который принимает URL, теги, где мои данные, которые будут очищены, сохраняются из файла CSV. Этот тег, который я назначаю временной переменной, такой как z (имеющей h1), av (имеющей title), a (имеющей td) и т. Д. Когда я использую эту переменную в xpath, она ничего не извлекает из этого тега. Может кто-нибудь мне помочь
import pandas as pd
import requests
from scrapy.http import TextResponse
x=pd.read_csv(r'C:\Users\ndewan\Desktop\pattern-swage.csv', encoding="utf-8")
x=x.replace('<','',regex=True).replace('>','',regex=True)
url=str(x.iloc[0,0])
r = requests.get(url)
response = TextResponse(r.url, body=r.text, encoding='utf-8')
z=x.iloc[0,1]
s=x.iloc[0,2]
an=x.iloc[0,3]
av=x.iloc[0,4]
part=response.xpath('//av//text()').extract()
print(part)
print(url)
print(z)