python3 爬虫为什么服务器总会成功一次然后拒绝一次

Question

正在提交...
---------ok! 提交成功: 第 47 条--------
正在提交...
服务器拒绝了,正在重复....
切换iP中...https://42.232.157.172:23528
正在提交...
---------ok! 提交成功: 第 48 条--------
正在提交...
服务器拒绝了,正在重复....
切换iP中...https://39.81.145.23:39501
正在提交...
---------ok! 提交成功: 第 49 条--------
正在提交...
服务器拒绝了,正在重复....
切换iP中...https://175.4.20.194:25601
正在提交...
---------ok! 提交成功: 第 50 条--------
正在提交...
服务器拒绝了,正在重复....
切换iP中...https://114.230.147.179:21960

正在提交...

https高匿ip,我的流程是这样的,先request.get , 然后执行request.post,结果成功一次,第二次感觉是request.post变成了get请求一样,这是为什么

Answer 1

对方是否有csrf校验，你需要看cookie里面或者get请求时是否有特殊token

Answer 2

看看是不是对同一来源IP的请求频率有限制吧。比如你请求一次之后，sleep几秒之后再请求一次。

Answer 3

我试了一下用自己的ip,不使用代理就不会有这个问题....