网站做robots协议就不会出现在搜索结果中吗？
网站做robots协议就不会出现在搜索结果中吗？
我感觉答主问的问题是全站不希望被抓取吧，好像**，其实你做全站robots协议才能显示出搜索引擎尊不遵守robots协议，反正我所知道的做全站屏蔽的网站都不会被抓取，都是好用的。
楼上说得对，我之前就做了robots协议，但联系我们页面还是被收录了，我还以为是搜索引擎不执行这个协议呢，原来链接也会导致页面被收录。
有时我们做了robots协议，页面仍然会出现在搜索引擎中，大家以为是搜索引擎没有遵守规则，其实大概率并不是，而是我们网站有其他页面链接到了这个页面，而收录的，这就没有办法了。
正常来说，是这样，但也不能说是绝对的，我也见过，搜索引擎没有遵守规则的，因为是小网站也没有什么机密泄露，所以也没在意。
非特殊说明，本文为本站原创（翻译）文章，转载请注明：本文转自：
：http://www.gbsseo.com/wangzhanjianshe/4162.html
想了解更多请点击===>>
下一篇：网站子目录做robots协议是否有效？
网友留言：