请教一个关于puppeteer的问题

用node写了个服务接口,前端发出请求,接受到请求后就去抓取网页,如果有4,5个并发,puppeteer好像是排队打开的,导致请求就卡住了,响应特别慢,请问下这个有什么解决方案没?

繁星淼淼
浏览 484回答 1
1回答

长风秋雁

你可以将爬取网页做成任务制,前端通过请求提交任务(任务保存后,立马返回了),后端依次处理爬取任务。
打开App,查看更多内容
随时随地看视频慕课网APP

相关分类

Node.js