经过研究发现一个网站死链多少不重要，重要的是当天百度抓取的死链数量，如果当天抓取的死链数量达到一个阈值网站就会受到惩罚，比如降权，收录变慢，收录率变低，甚至停止收录。
曾经有一个站也删除了大量文章，也没事，秒收。因为百度抓取频率是变化的，有时候突然暴涨一倍，两三倍也正常，有一天百度突然抓取频次暴涨一倍，，抓取频次高，那么当天抓取的死链必然多。被百度死链屏蔽过的死链，百度一样还是天天去抓，网站当天就停止收录，第二天抓取又降低，之后收录率大大降低，但也收录，比如偶尔收录一两条，但又有一天，抓取频次再次暴涨一倍，然后好几天停止收录了。
所以一个网站死链数量多少不重要，比如你网站有1万篇文章，其中有9000是死链，也没事，前提是百度抓取频次低，比如一天只抓取极少量，这样死链当天抓取量就不会触发惩罚的阈值。
那么站长如果有大量死链要处理，又不想网站受惩罚怎么办，我认为在站长后台降低百度抓取频次的最高值是一个方法。
第二个方法是，大家分批删除，比如你删除一些内容提交404，等百度屏蔽死链后，你robots屏蔽这个目录，这样百度不会再次抓取，这样逐步处理，这样的目的就是百度当天死链抓取量始终不会触发惩罚的阈值。因为你在不断的robots屏蔽被百度死链屏蔽的目录。理论上这样即使你删除网站90%的内容也不会触发死链惩罚机制。
但问题来了，这样被百度死链屏蔽的页面，做了robots后，百度在后续无法抓取的情况下，还会不会删除这些无效的索引。如果不删除，那么这些无效索引是对网站有害的。百度对死链索引的删除存在不存在一个多次确认的算法，必须多次确认是死链才删除索引，如果有这种算法那么站长这样处理死链的办法就不好
发表评论 取消回复