猿问

如何利用scrapy爬取一个网站后将网站中的链接再次爬取

我现在想通过一个网站,先爬取这个网站上的链接,然后爬取这些链接上的信息我现在想的是用一个爬虫把网站的链接存到一个文档上,然后用另一个爬虫对文档上的链接进行读操作,然后进行爬取,有没有什么简单办法
叮当猫咪
浏览 2760回答 2
2回答
随时随地看视频慕课网APP

相关分类

JavaScript
我要回答