网址链条»优化知识»文章内容
0
分享到
TOP

关于百度死链处理机制的总结

优化知识 互联网 2022-06-30 14:22:05 92人浏览 0人回复

经过研究发现一个网站死链多少不重要,重要的是当天百度抓取的死链数量,如果当天抓取的死链数量达到一个阈值网站就会受到惩罚,比如降权,收录变慢,收录率变低,甚至停止收录。



曾经有一个站也删除了大量文章,也没事,秒收。因为百度抓取频率是变化的,有时候突然暴涨一倍,两三倍也正常,有一天百度突然抓取频次暴涨一倍,,抓取频次高,那么当天抓取的死链必然多。被百度死链屏蔽过的死链,百度一样还是天天去抓,网站当天就停止收录,第二天抓取又降低,之后收录率大大降低,但也收录,比如偶尔收录一两条,但又有一天,抓取频次再次暴涨一倍,然后好几天停止收录了。


所以一个网站死链数量多少不重要,比如你网站有1万篇文章,其中有9000是死链,也没事,前提是百度抓取频次低,比如一天只抓取极少量,这样死链当天抓取量就不会触发惩罚的阈值。


那么站长如果有大量死链要处理,又不想网站受惩罚怎么办,我认为在站长后台降低百度抓取频次的最高值是一个方法。


第二个方法是,大家分批删除,比如你删除一些内容提交404,等百度屏蔽死链后,你robots屏蔽这个目录,这样百度不会再次抓取,这样逐步处理,这样的目的就是百度当天死链抓取量始终不会触发惩罚的阈值。因为你在不断的robots屏蔽被百度死链屏蔽的目录。理论上这样即使你删除网站90%的内容也不会触发死链惩罚机制。


但问题来了,这样被百度死链屏蔽的页面,做了robots后,百度在后续无法抓取的情况下,还会不会删除这些无效的索引。如果不删除,那么这些无效索引是对网站有害的。百度对死链索引的删除存在不存在一个多次确认的算法,必须多次确认是死链才删除索引,如果有这种算法那么站长这样处理死链的办法就不好

评论列表 共有 0 条评论

暂无评论