死链接必须及时清理
找出死链接使用网站管理员工具来检测网站的链接,找出网站中的死链接。使用网站管理员工具来知道一个网站有多少死链接
建立机器人.txt阻止死链接
有了死链接,我们可以机器人.txt禁止蜘蛛爬行这些网页,建立所有死链接到一个文件夹,并让
机器人.txt是为了防止蜘蛛爬行,但还是一样。所有链接必须添加到网站。
这样做比较麻烦,写作方法机器人.txt:
用户代理:*
不允许:/directory
不允许:/directory
制作404页
一旦你不注意,就会出现死链接。如果你不注意频繁的死链接,那么你必须为你的网站找到一个盾牌,阻止自己。就像站长主页的404页一样,非常生动幽默。如果用户看到这个页面,他不会认为页面不好,会微笑,用户体验会更好。从搜索引擎的角度来看,蜘蛛看到404状态码后,会继续对网站进行爬网,不会马上跑掉。最好向百度提交死链接。我们已经推出了一个死链接提交工具,让百度可以删除我们的死链接,特别是一些已经被收录的死链接。