正文

修改robots多久生效介绍

米米素材网V管理员 /2020-12-11 / 阅读

1211

　　百度lee曾在公开场合说过：不同的站点略有不同，但通常在几天内陆续生效。其实我们可以假想下robots生效的过程：

　　1.蜘蛛发现robots文件修改并将信息传回

　　2.分析修改前后的robots文件

　　3.删除不允许被收录的索引数据这个过程中肯能还会存在其他的一些步骤，然而由于每个网站蜘蛛爬的频率和网站的权重不同(网站的重要性)而导致蜘蛛发现robots更改的时间延时或者被处理的优先性不同，最终导致的结果就是robots的生效时间不同。

　　网结语：通过以上分析我们可以得出robots的生效时间并不是一定的，如果你的robots更改后很久都没有生效的话，那么可能就是robots设置错误了

1 本网站名称：米米素材网
2 本站永久网址：https://www.mimisucai.cn
3 本网站的文章部分内容可能来源于网络，仅供大家学习与参考，如有侵权进行删除处理。
4 本站一切资源不代表本站立场，并不代表本站赞同其观点和对其真实性负责。
5 本站一律禁止以任何方式发布或转载任何违法的相关信息，访客发现请向站长举报
6 本站资源大多存储在云盘，如发现链接失效，请联系我们我们会第一时间更新。