爬虫获取AJax数据问题

Question

想写一个爬取花瓣网图片的爬虫。遇到了Ajax获取数据的问题

图片中的请求的URL，Response的文本类型是json
可当我单独访问这个url的时候却是html

求教，怎么获取json数据

Answer 1

Rerferer是一个常见的用来防止网页被本站之外获取的Header，做爬虫时一定要确保Referer的设置