在国内，robots.txt文件，对于用户来说他是个可有可无的东西，也不会有人去看。但对于搜索引擎来讲它却是一个非常强大的东西，它可以说是你网站目录的“看护神”，可以用它来允许和禁止搜索引擎的搜录，下面我们就做一下详细讨论。在国内，robots.txt文件，对于用户来说他是个可有可无的东西，也不会有人去看。但对于搜索
阅读背景：
Asp.Net与SEO – 关注robots.txt
来源：互联网
分享到：
