Текст Scrapy Crawl после <div>

Question

Я хочу сканировать следующий код HTML с помощью Scrapy:

<td class="xyz"> 
   <div>Irrelevant</div>
   I want to get this text! 
</td>

Как мне извлечь этот текст?

response.css('td.xyz::text').extract()

возвращает ''

Answer 1

Даже если дополнительный div существует или нет, вы можете сделать это, чтобы получить нужный текст

response.css('td.xyz::text').extract()[-1]

Answer 2

response.xpath('//td[@class="xyz"]/text()[2]').extract_first()