Scrapy + Xpath + Python: Datapoint нельзя удалить

Question

Я хочу очистить URL-адреса здесь:

Я пробовал это:

response.xpath('//header[@class="geodir-entry-header"]/a/@href').extract()

response.xpath('//div[class="geodir-content "]/header/a/@href').extract()

response.xpath('//div[@class="geodir-content "]/header[@class="geodir-entry-header"]/a/@href').extract()

Все вернули пустой список.

Answer 1

Все, что вам нужно, это просто добавить тег h3, который вы случайно пропустили.

response.xpath('//header[@class="geodir-entry-header"]/h3/a/@href').extract()

и если вы хотите получить только первый URL, добавьте

response.xpath('//header[@class="geodir-entry-header"]/h3/a/@href').extract_first()

или

response.xpath('//header[@class="geodir-entry-header"]/h3/a/@href').extract()[0]

Answer 2

Работает ли у вас

response.xpath('//h3[@class="geodir-entry-title"]/a/@href').extract() или response.xpath('//header[@class="geodir-entry-header"]/h3/a/@href').extract()

?

Похоже, вы только что пропустили тег h3, который содержит теги aтебе нужно.