摘要
Robots.txt文件要放在网站根目录，否则百度搜索引擎无法抓取，就无法发挥作用。如果你无法控制根目录的robots.txt，可以在网页中使用标识来阻止百度收录，保护你的网站。
正文
Robots.txt文件务必放到网址的网站根目录。
放到根目录的 Robots.txt 文档百度搜索引擎不可以抓取到，因此不容易起一切功效。
例如：
http://网站域名/robots.txt 合理
http://网站域名/bbs/robots.txt 失效
假如你不可以操纵网站根目录的 robots.txt，则你能根据在根目录网页页面中应用标识阻拦网页页面被百度收录。
关注不迷路
扫码下方二维码，关注宇凡盒子公众号，免费获取最新技术内幕！
温馨提示：如果您访问和下载本站资源，表示您已同意只将下载文件用于研究、学习而非其他用途。
评论0