Я собираюсь почистить веб-сайт dintex.net на английском языке, но не могу найти какой-либо способ конвертировать очищенные данные на английском языке. Я также использовал GoogleTans, но он также показывает ошибку, есть ли другой способ конвертировать эту страницу или данные на английский?
import scrapy
from googletrans import Translator
class DtSpider(scrapy.Spider):
name = 'dt'
start_urls = ['http://www.dintex.net']
def parse(self, response):
urls = response.xpath('//*[@class="listing-btn btn btn-primary btn-block w-100"]/@href').extract()
for url in urls:
url = response.urljoin(url)
yield scrapy.Request(url=url, callback=self.parse_details)
np = response.xpath('//*[@class="page-item"]/a[@rel="next"]/@href').extract_first()
ap = response.urljoin(np)
yield scrapy.Request(url=ap,callback=self.parse)
def parse_details(self,response):
Title = response.xpath('//*[@class="show-info__title"]/text()').extract_first()
Location = response.xpath('//*[@class="show-info__location"]/p/text()').extract_first()
Contact = response.xpath('//*[@class="show-info__contact-details__phone-link"]/text()').extract_first()
Contact = Contact.replace('Whatsapp ','')
Description = response.xpath('//*[@class="show-info__section-text"]/p/text()').extract_first()
Manufacture = response.xpath('//td[contains(text(),"Fabricante")]/following-sibling::td/text()').extract_first()
Model = response.xpath('//td[contains(text(),"Modelo")]/following-sibling::td/text()').extract_first()
Year = response.xpath('//td[contains(text(),"Año")]/following-sibling::td/text()').extract_first()
Condition = response.xpath('//td[contains(text(),"Condición")]/following-sibling::td/text()').extract_first()
img = response.xpath('//*[@class="gallery__item"]/img/@src').extract_first()
thumbs = response.xpath('//img/@lazy-src').extract()
#t = Translator()
#Title = t.translate(Title).text
#Location = t.translate(Location).text
#Contact = t.translate(Contact).text
#Description = t.translate(Description).text
#Manufacture = t.translate(Manufacture).text
#Model = t.translate(Model).text
#Year = t.translate(Year).text
#Condition = t.translate(Condition).text
yield{'Title': Title,
'Location' : Location,
'Contact' : Contact,
'Description' : Description,
'Manufacture' : Manufacture,
'Model' : Model,
'Year' : Year,
'Condition' : Condition,
'Img' : img,
'Thums' : thumbs
}