每页最后的条目出现重复?

来源:2-7 spider文件的编写(2)

慕仙2055982

2018-11-05 14:00

请教一下,按照老师的代码,为何抓取后每页最后的条目出现重复?即两个25、50......https://img1.mukewang.com/5bdfdc60000123d209740384.jpg

写回答 关注

2回答

  • qq_过河之卒_0
    2018-11-18 12:38:49

    不用print() 时也会输出一次爬取到的item内容,看看是不是你填充item时print了一下?

  • qq_爱吃猫的老鼠_1
    2018-11-06 14:55:00

    没有吧,你是不是代码有问题

Python最火爬虫框架Scrapy入门与实践

做为爬虫工程师Python Scrapy主流爬虫框架你必须要会!

67418 学习 · 223 问题

查看课程

相似问题