如何清理网站的死链

2020-12-19 10:30

死链必须及时清理

发现死链接使用站长工具来检测您的网站上的链接,找到网站存在的死链使用站长工具来找出你的网站有多少死链接


如何清理网站的死链

构建robots.txt来阻止死链

有了死链,我们可以让robots.txt阻止蜘蛛爬行这些页面,并把所有死链放在一个文件夹中

robots.TXT文件可以防止蜘蛛爬行,但你必须再一次添加所有网站开发的链接,这样做也很麻烦。

robots.txt:

User-agenr: *

Disallow: /目录

Disallow: /目录


制作404页面

死链的出现,你不注意的话就发生,如果你不经常注意死链,那么你就会给自己一个网站找一个盾牌,去屏蔽自己。像大家都喜欢站长之家的404页面,非常生动幽默,如果用户看到页面不会


如何清理网站的死链

觉得难受,也会微笑,用户体验会更好,站在搜索引擎的角度,蜘蛛看到404状态码,会继续爬,不会马上跑掉。还不如把死链提交给百度。我们引入了死链提交工具,让百度删除我们的死链,尤其是一些已经被收录进死链的。