禁止自己的网站被爬虫爬去?

禁止自己的网站被爬虫爬去?有什么方法啊

开心每一天1111
浏览 1297回答 2
2回答

守着星空守着你

加一个robots.txt文件,内容:User-agent: * Disallow: /
打开App,查看更多内容
随时随地看视频慕课网APP