网站改版后如何解决404页面抓取错误的问题

发表日期：2015-04-17   资讯来源：佰牛科技   浏览：124

网站改版都是希望网站可以很好的进行优化，但是对于网站改版的不同阶段，搜索引擎会对网站进行不同的要求。一般网站改版后，对网站的优化都会造成一些影响，这个时候，就进行有效地控制，减少改版造成的404页面过多情况。如果搜索引擎对网站的404错误页面抓取过多，就会导致网站有可能被降权，这对以后网站权重的恢复也会造成很大的影响。下面佰牛网络【深圳网站建设】具体的跟大家分析下404页面的解决情况。

1、利用日志分析工具找到404错误抓取页面

想要知道搜索引擎有没有到网站抓取，到网站抓取多少页面，抓取了哪些页面。这时就需要对网站的日志进行分析。对于网站日志的看法比较困难，就可以使用光年日志进行转化。首先利用FTP下载好最近几天的网站LOG日志，当然，想更多的分析，那么多下载一段时间的LOG日志也可以，利用日志分析工具新建任务分析各个阶段的百度蜘蛛抓取情况。

2、利用百度站长死链提交工具进行死链提交

对于404页面同，百度搜索引擎是如何进行理解的呢?事实上，对于404页面。百度搜索引擎认为404状态码代表‘Not Found'，spider更新时会认为该页面已失效，此时呢将在索引库中删除，短期内spider再次发现该url不再会抓取。但是如果通过网站日志就可以发现，对于404页面，百度蜘蛛还是会进行抓取的，这也是为什么网站改版以后，百度蜘蛛还是会对404错误页面进行一些抓取。

3、利用robots.txt和nofollow标签引导蜘蛛抓取

网站存在错误页面时，百度蜘蛛就会抓取 到一部分的错误页面。浪费了蜘蛛抓取资源，而对于网站的正确页面抓取就会减少一部份。这就造成页面的资源丢失。这时站长就需要对百度蜘蛛进行一些引导，让蜘蛛抓取想让他抓的一些页面，对于一些404页面进行robots限制抓取，对于网站中一些不参与排名的链接实行nofollow，引导蜘蛛抓取重要页面。

 

内容标签：
网站改版
seo在线培训
外贸seo优化
深圳网站建设
推荐案例
{ solution_title }
相关资讯

【签约】深圳目路教育官网网站建设项目

目路SEEPATHS专注于为学生家庭提供教育升学的定制服务。团队持续运营超过8年，目前已经发展成为一家以升学结果为导向，多元化道路与学生背景条件相结合的高端专业、实现学生个性化升学规划的服务机构。

日期：2020-09-24    浏览：116

【签约】深圳中浩建设官网建设项目

深圳中浩建设实业有限公司成立于2000年,是一家专业从事沥青路面施工,集工程投资管理,沥青路面,彩色沥青路面,路面养护维修为一体的公司。

日期：2018-07-12    浏览：116

【签约】深圳财阜集团APP开发项目

财阜集团的是一家扎根香港，并专注于为所有客户和会员提供一站式海外资产配置及服务的综合集团。

日期：2019-05-03    浏览：111

【签约】大可智能教育信息网平台网站建设项目

大可智能教育信息网面向全国一线教师和学生，提供高考、留学、考级考试以及 各年级相关备课、迎考的专业资源。

日期：2017-09-20    浏览：111

【签约】深圳活石学院教育平台项目

活石学院，源自香港，提供DSE课程学习，留学权威，服务全球，以及服务香港本地中小幼升学，规划香港及海外大学本科留学，是业内首屈一指的香港教育专家。

日期：2018-11-03    浏览：109

网站长尾关键词优化的六大法宝

长尾关键词，按字面理解就是搜索长度长，有2至3个词组成的词语，而用户有可能会用的这些词进行搜索。那么，对于已经存在的长尾词需要怎么优化呢？接下来分享长尾词优化的六大法宝。

日期：2018-07-05    浏览：163

用户粘性提高才能够保证网站良性发展

网站优化都有很多公司来说都是非常重要的，因为如果你的网站上要是有更多的客户的话，那么势必要在网站优化上下一些功夫，如果网站是比较好的话，那么这种网站它的用户粘性相对来说应该是比较高的，因为用户粘性对于我们建站的人来说是非常的重要的，因为只有用户粘性能够提高的话，才能够保证我们的网站运营中能够良性发展。

日期：2018-07-05    浏览：154

这些网站图片优化小技巧十分受用

图片优化是网站要进行优化的一个十分重要的方面，传统意义上的优化仅仅只是图片要加alt标签或是仅仅压缩。但这样太过粗陋，以下带来详细技巧。

日期：2018-07-05    浏览：122