猿问

请教快速访问网址列表的方案

诚心请教各位一个问题,我在站点里面使用了缓存,只要访问一次带有指定参数的网址后,并且网页里的ajax全部加载完后,就将这些参数作为键值缓存到字典中一天时间,当本天访问带有这些参数的网址时,就直接从缓存中读取数据。但是,现在有很多条网址,需要一个比较快速可行的访问方案,现暂有以下方案:

1.直接使用批处理,但是,使用例如傲游这类多标签浏览器,一次只能打开一百个标签,但是我随便一个网址列表文件就有上千条网址记录

2.编写winform程序,使用webbrowser循环浏览,但是速度太慢了。

请教一下各位,有没有比较好的方案,先谢谢了!


繁星淼淼
浏览 507回答 2
2回答

胡子哥哥

httprequest是不会加载页面中的脚本文件的,当然也不会执行javascript.
随时随地看视频慕课网APP
我要回答