scrapy 启动爬虫的时候 爬虫没有定时关掉

我用crontab 启动一个爬虫,但是爬虫没有在2分钟内关掉
现在有个方案就是while 死循环内 
2分钟内正常运行完毕就不管,如果运行的时间超过1小时 就把这个spider 关闭,如何操作

翻阅古今
浏览 866回答 1
1回答

蝴蝶刀刀

建议搜索下扩展中间件。excetions,有关于spider未接收到信号的说明。
打开App,查看更多内容
随时随地看视频慕课网APP

相关分类

Python