找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索
查看: 164|回复: 0

修改robots多久生效介绍

[复制链接]

该用户从未签到

发表于 2016-8-23 13:43:26 | 显示全部楼层 |阅读模式

您需要 登录 才可以下载或查看,没有账号?立即注册

×
  百度lee曾在公开场合说过:不同的站点略有不同,但通常在几天内陆续生效。 其实我们可以假想下robots生效的过程:
         
          1.蜘蛛发现robots文件修改并将信息传回
         
          2.分析修改前后的robots文件
         
          3.删除不允许被收录的索引数据 这个过程中肯能还会存在其他的一些步骤,然而由于每个网站蜘蛛爬的频率和网站的权重不同(网站的重要性)而导致蜘蛛发现robots更改的时间延时或者被处理的优先性不同,最终导致的结果就是robots的生效时间不同。
         
          织梦模板网结语:通过以上分析我们可以得出robots的生效时间并不是一定的,如果你的robots更改后很久都没有生效的话,那么可能就是robots设置错误了
回复

使用道具 举报

网站地图|页面地图|文字地图|Archiver|手机版|小黑屋|找资源 |网站地图

GMT+8, 2024-12-26 13:54

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表