404页面设置及删除已收录页面的处理方法
之前做过一个网站遇到这样的问题网站改版之后遗留了很多死链接为了让百度不收录这些页面于是设置了404页面但是后来发现这些大量的404页面百度仍然在收录多次向百度提交过死链依然没有改善。有人说这是百度的问题很多人都遇到过这种情况。这样的问题如果属于比较小型的网站可能很难感觉到影响但是一旦网站规模比较大而且死链又比较多就会对网站本身的收录、权重、排名、流量带来影响。
最后在一些朋友的帮助下 404页面的收录问题终于得到解决。这里也说一些题外话如果你的网站遇到了自己暂时不能解决的问题不妨多和别人沟通交流相信会有人能很快的解决你的这些疑难问题。
我们都知道404页面的一些基本规则但是却很少有人重视 即使你发现了这些问题也因为感觉问题不大就没有继续深究下去。不过如果你任由这样的漏洞存在时间长了就会自食其果了所以笔者建议作为站长任何细微的问题都应该有穷追猛打的劲头。这里我将自己对404页面的一些新的认识分享出来也欢迎更多的朋友跟我交流合作。
404页面会不会被收录
关于这个问题看法并不统一有人说404页面不会被收录 404本身就是告诉搜索引擎以及访问者这个页面已经不存在了请绕道或者去其他的页面逛逛。也有一些人认为404页面会被收录。在企赢001可以找到比较专业的说法搜索引擎不会收录404页面但是有例外的情况那就是已经收录过的页面被删除后设置的404百度会收录。这一点跟笔者的网站遇到的情况类似笔者也是通过企赢001的专家才解决了这些问题。
404页面被收录的危害
404页面收录的一个特征就是已经设置了404的页面百度仍然放出来可以检索的到但是快照一直不会更新。
少数的404页面被收录或者你的网站本身就没有多少404页面就不会感觉多有多少危害。而对于哪些成立不久但是发展快速的网站来说庞大的数据之下就必然有大量的死链、错误链接这时候你就不能回避404页面被收录的问题。让我们先来看一下404页面被收录的一些危害
1、页面对搜索引擎来说没有价值
对于搜索引擎来说一个URL就是一个页面一般来说网站的404页面都是一样的设置所以一旦搜索引擎蜘蛛抓取了这些页面就会导致有大量的页面内容相同可想而知搜索引擎会如何对待你的网站。
2、影响其他页面的收录和权重进而影响流量
网站的权重影响蜘蛛的抓取时间和抓取次数所以一个网站能够得到多少蜘蛛的多少次抓取都是相对固定的换句话说蜘蛛在一段时间内抓取你网站的数据是有限的。假设蜘蛛把资源都浪费在这些404页面了那网站中真正有价值的页面的抓取量就变少这些404页面99%的都因为没有价值而不会被收录这样就会影响网站的收录 同时会影响网站的流量。
如果需要删除被收录的页面应该如何处理?
1、页面数量少可以设置成404页面404的页面的状态码必须是404(Not Found) 这样搜索引擎才会认为网页已经失效会将页面从搜索结果中删除。
2、如果被收录的页面数量多考虑到网站权重的问题可以设置成301重定向将权重专递下去不过这一点也需要慎重。
3、你确定这些大量的收录页面需要从收录结果页删除掉可以利用robots. txt文件禁止蜘蛛爬行。
实践中遇到的问题往往比较复杂单纯从网上搜索关键词来找答案一般快速的解决问题正如前面所说的与别人沟通、交流才能解决问题提高自己。
ftlcloud(超云)目前正在搞暑假促销,美国圣何塞数据中心的云服务器低至9元/月,系统盘与数据盘分离,支持Windows和Linux,免费防御CC攻击,自带10Gbps的DDoS防御。FTL-超云服务器的主要特色:稳定、安全、弹性、高性能的云端计算服务,快速部署,并且可根据业务需要扩展计算能力,按需付费,节约成本,提高资源的有效利用率。活动地址:https://www.ftlcloud.com...
无忧云怎么样?无忧云,无忧云是一家成立于2017年的老牌商家旗下的服务器销售品牌,现由深圳市云上无忧网络科技有限公司运营,是正规持证IDC/ISP/IRCS商家,主要销售国内、中国香港、国外服务器产品,线路有腾讯云国外线路、自营香港CN2线路等,都是中国大陆直连线路,非常适合免备案建站业务需求和各种负载较高的项目,同时国内服务器也有多个BGP以及高防节点。一、无忧云官网点击此处进入无忧云官方网站二...
桔子数据(徐州铭联信息科技有限公司)成立于2020年,是国内领先的互联网业务平台服务提供商。公司专注为用户提供低价高性能云计算产品,致力于云计算应用的易用性开发,并引导云计算在国内普及。目前公司研发以及运营云服务基础设施服务平台(IaaS),面向全球客户提供基于云计算的IT解决方案与客户服务,拥有丰富的国内BGP、双线高防、香港等优质的IDC资源。 公司一直秉承”以人为本、客户为尊、永...