从Google结果中刮取数据可以吗？

Question

从Google结果中刮取数据可以吗？

我想从Google获取结果，使用curl来检测潜在的重复内容。谷歌被禁止的风险很高吗？

Answer 1

当你超过一定数量的请求时，谷歌最终会阻止你的IP。

Answer 2

谷歌在世界各地的网站上蓬勃发展.所以如果它是“如此非法”，那么就连谷歌也无法生存。当然，其他答案提到了谷歌减少IP块的方法。另一种避免卡普查的方法可能是在随机的时间刮擦(试试看)。而且，我有一种感觉，如果我们提供新奇的或一些重要的数据处理，那么至少对我来说听起来很好…如果我们只是在复制一个网站。或者在某种程度上阻碍它的业务/品牌.那么它是不好的，应该避免.最重要的是.如果你是一家初创公司，那么没有人会因为没有好处而与你斗争。但是，如果你的整个前提是在你获得资金的情况下，那么你应该想出更复杂的方法.替代API.最终.谷歌还会继续为它的API发布(或降低)字段，所以你现在想要废除的东西可能会出现在新的Google API发布的路线图中。