江西SEO优化

网站子目录做robots协议是否有效？

不知道你为什么要在子目录中做robots协议，这个是违背协议的，你做了也没有用，如果有抓取，应该是有链接指向了这个robots文件，但搜索引擎也不会执行这里的规则。

子目录做robots是无效的，你要是在子域名上做robots协议是好用的，因为搜索引擎遵循的是网站的根目录中的robots协议，你是子目录肯定是不好用啦——

不好用吧，如果好用，那不就打破了这个协议吗？搜索引擎来到网站时要先检查网站有没有robots协议，如果没有就正常抓，当在其它目录遇到时，就算会抓取，也不会执行你写的规则。

正常来说，不论是那个搜索引擎都会遵循robots协议，而这个协议是放置在根目录，蜘蛛来到网站会先爬这个文件，而你要在子目录放置协议，我认为搜索引擎不会遵循协议的。

非特殊说明，本文为本站原创（翻译）文章，转载请注明：本文转自：
：http://www.gbsseo.com/wangzhanjianshe/4161.html
想了解更多请点击===>>  
上一篇：网站子目录做robots协议是否有效？
下一篇：百度小程序我的个人网站可不可以做？