Scrapy+Xpath+Python：无法抓取数据点

Question

我想在这里抓取网址：

我试过这些：

response.xpath('//header[@class="geodir-entry-header"]/a/@href').extract()

response.xpath('//div[class="geodir-content "]/header/a/@href').extract()

response.xpath('//div[@class="geodir-content "]/header[@class="geodir-entry-header"]/a/@href').extract()

都返回了一个空列表。

Answer 1

做response.xpath('//h3[@class="geodir-entry-title"]/a/@href').extract() 或者 response.xpath('//header[@class="geodir-entry-header"]/h3/a/@href').extract()为你工作？看起来您刚刚错过了h3包含a您需要的标签的标签。

Answer 2

您所需要的只是添加您不小心错过的 h3 标签。response.xpath('//header[@class="geodir-entry-header"]/h3/a/@href').extract()&如果您只想获取第一个网址，请添加response.xpath('//header[@class="geodir-entry-header"]/h3/a/@href').extract_first()或者response.xpath('//header[@class="geodir-entry-header"]/h3/a/@href').extract()[0]