在爬一个淘宝店铺的信息时发现会通过jsonp去网站取回数据,url如下:
https://tianziyujushangcheng.taobao.com/i/asynSearch.htm?callback=jsonp152&mid=w-12133771151-0&wid=12133771151&pageNo=2
其他无效参数都被我除去了。
有2个必要参数:一个callback=jsonp152;另一个wid=12133771151.但是这2个参数是怎么得来的呢?
因为我是要爬取大量网站,所以手动从浏览器中提取这2个参数几乎不可能。
在chrome开发者工具中搜索,在其他位置并没有出现这几个参数。也看了发出这个xhr请求的index.js文件,并没有看到相关联的东西。有大神做过吗?分享一下...
相关分类