请教下关于爬虫的选择

Question

现在有个需求需要抓取一个网站的文章，包括js,css.html所有文件，然后保存下来变成自己的文章,文章是通过ajax异步加载的。所以想请问下，这种需求，采用哪种方式实现比较好一点,scrapy splash和puppeteer好像原理差不多。除了上面两种还有没其他的框架适合我现在的这个需求的，语言就在node和ptyhon中选,求指教。

Answer 1

文章既然是通过ajax获取的，你为什么不直接用这个接口呢？