免费提问

robots屏蔽死链接多久生效?

144
提问者 屈思思射手
2018-12-04 18:09 悬赏 0财富值 阅读 676回答 6

昨天检查网站的时候,发现我的网站因为之前调试的时候犯错了导致网站有大量的死链接被百度收录,我现在用robots.txt屏蔽了这些死链接,不知道多久才能生效?

SEO
登录 后发表回答
嗜血之秋
1楼 · 2018-12-04 21:39.采纳回答

你的思路是没有问题的,解决网站死链被收录的问题还是应该按照流程来,步骤如下:


1、发现网站被收录了死链,请用搜索语法查询收录了多少,比如死链是ask.dobunkan.com/q-1111.html,你可以去百度搜索site:ask.dobunkan.com/q-*.html,然后看收录的多不多,如果数量不多就去站长工具后台手工提交,如果收录量很大,请看第二步。


2、收录量很大的情况请使用robots.txt 来屏蔽搜索引擎蜘蛛抓取,以上面的情况为例,在robots.txt 里面加入这样一行,Disallow q-*.html,然后去百度站长工具检测状态是否正常。


3、如果规则正确,请使用百度站长工具更新robots.txt的状态,至此,屏蔽搜索引擎蜘蛛抓取设置完毕。


需要注意的是,搜索引擎对robots.txt的反应速度会有所不同,一般在一周左右更新,时间长的需要等一个月的时间,没事别犯这样的低级错误就行了。


屈思思射手
2楼-- · 2018-12-04 19:27

Robots.txt做出的任何更改需要去搜索引擎提交,24小时生效。


鍾繁
3楼-- · 2018-12-04 20:39

死链的补救措施就是提交死链或者屏蔽死链,主要流程是这样的,在网站根目录下的robots.txt 里面加入屏蔽规则,然后用百度站长工具检测规则是否有效,顺便完成提交,下次快照更新的时候,这些收录的死链就消失了。


freewolf
4楼-- · 2018-12-04 23:00

我之前做过robots.txt ,屏蔽蜘蛛好像过一夜就生效了,当然我只用过一次,我的案例不能代表标准答案。


墨西哥蛋卷
5楼-- · 2018-12-05 20:53

网站权限越高,更新维护的越及时,robots.txt 更新生效的时间越快!如果你网站权限低,历史有不良记录,robots.txt 更新的就很慢。


xxxwww
6楼-- · 2018-12-12 22:44

我的网站更新robots.txt 后24小时刘生效了,因为没有时刻盯着收录,具体是几个小时生效的我也不清楚,只知道是24小时内。


网站简介 | 竞价技巧 | 网站建设 | 原创作品 | 联系我们 |

鄂ICP备17013851号-4|经营许可证:鄂B2-20160818 |互联网药品信息服务资格证: 粤20130124|鄂公网安备:42010601000001|版权登记号:2016SR017186