阅读背景:

搜索引擎对网页抓取

来源:互联网 

一 、有什么办法能防止搜索引擎抓取网站?

第一种:robots.txt方法
站点根目录中有个robots.txt,没有的话可以新建一个上传。 站点根目录中有个robo


你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: