-
网站中出现死链接,要注意什么事项?
发布时间:2024-12-27 / 热度 543
1、在百度站长工具中提交死链接之前,请确保提交的死链接数据中没有活链接。一旦有一个活动链,它将显示提交失败,无法删除。
2、由于很多网站程序问题,很多无法打开的页面返回码都不是404,这是一个很大的问题。例如,无法打开的页的返回码是301、200、500。如果他们是200,不同的网址将出现在网站上,以获得相同的内容。例如,在我的一个网站上,社区帖子被删除后,返回代码实际上是500。后来,我发现了,立即处理。尝试找出所有错误的URL格式,并将HTTP状态代码设置为404。
3、在找到所有错误的页面后,一定要找到这些页面的URL的相同特性,并将它们与普通页面的特性区分开来。将相应的规则写入robots文件,并禁止spider获取它们。即使你已经在网站管理员工具中提交了死链,建议机器人拦截并抓取它们。
4、机器人只能解决蜘蛛不再抓取此类页面的问题,但不能解决删除包含页面的快照的问题。如果你的网站是黑色的,并且黑色页面被删除,除了被机器人禁止的黑色页面外,这些页面也应该提交到死链。