在国内，网站管理者似乎对robots.txt并没有引起多大重视，应一些朋友之请求，今天想通过这篇文章来简单谈一下robots.txt的写作。在国内，网站管理者似乎对robots.txt并没有引起多大重视，应一些朋友之请求，今天想通过这
阅读背景：
如何使用robots.txt及其详解
来源：互联网
分享到：
