深圳易捷网络科技财税咨询网-neatmaster518.com 返回首页

网站改版带来的404抓取错误解决实践

信息来源:深圳市易捷网络科技有限公司
信息发布时间:2025/4/4

网站制作中一项重要的工作就是改版,每次改版肯定是往好的方面进行,因为每个阶段的定位不同,我们要网站所表现的企业形象也不同,而且一个好看大气的网站绝对能够在潜在客户心里提升我们公司的地位。但是多数的改版对于我们网站的SEO都会造成一定的影响,这里就需要我们对网站的情况掌握的非常熟悉之后,然后进行有效地控制,减少改版造成的404页面过多情况。

1、利用日志分析工具找到404错误抓取页面

日志分析工具利用最常用的光年日志分析工具就可以了,首先利用FTP下载好最近几天的网站LOG日志,当然,想更多的分析,那么多下载一段时间的LOG日志也可以,利用日志分析工具新建任务分析各个阶段的百度蜘蛛抓取情况,这里主要考虑百度抓取情况,因为建立这个分析工作的前提是快照停滞,收录为 1。这里建议大家分为三个时间段来分析:

A、分析最近一天的LOG日志,可以是今天的,但是最好是昨天的,因为昨天的会比较全,今天的你即使是晚上来分析也会有一部分时间没有统计到。

B、分析改版之后的LOG日志,因为这涉及到百度蜘蛛对于网站改版的一些判断,例如我们可以分析百度蜘蛛什么时候开始判断网站已经改版,或者什么时候已经放弃对于旧站URL的抓取等等。

C、改版前后抓取量的对比,分析改版对于百度蜘蛛的抓取量影响多大。

至于日志分析工作后面的分析工作都是一键式的,具体的分析思路有了之后,我们对照着进行分析,就会找到很多平时我们没有注意到的问题,例如下面出来改版造成的404页面,还有不少的页面也是404错误,我并没有意识到,例如下面的wp-login.php页面就是一个最典型的例子:404错误抓取页面

2、利用百度站长工具中的死链提交工具进行死链提交

百度站长平台LEE团队说:404状态码代表‘NotFound’,spider更新时会认为该页面已失效,此时呢将在索引库中删除,短期内spider再次发现该url不再会抓取。当然,百度的说法只能作参考,因为分析网站日志发现,2个多星期百度蜘蛛还是来抓取这些错误页面,当然,百度对于404错误页面的指导性操作,还是非常有针对性的。百度站长平台对404页面的看法特别是死链提交工具中提交死链sitemap,这一条大家可以根据自身的情况进行死链提交,我这边提交后暂时还没有大的效果,因为大家都知道百度的效果展现周期一般都比较长。

3、利用robots.txt和nofollow标签引导蜘蛛抓取

404错误页面一个最大的坏处就是给蜘蛛带来一些错误的抓取,浪费了蜘蛛抓取资源,举个例子,首先我们要达成这样的一个共识:任何一个网站的蜘蛛抓取访问资源都是有限的,小网站自然要少很多,而大网站就要多很多,要想蜘蛛抓取率更高,抓取的更合理,那么一些错误的链接造成的404错误量就要尽可能的减少。

相关行业资讯

1、网站域名被劫持的原因分析,以及应对方法
2、百度竞价推广账户如何合理建立和优化
3、网站建设过程中必不可少的要素
4、最新提升用户体验5要点
5、实战网络推广,必备的八大策划手段
6、针对百度做网站优化这七步很关键
7、建设高质量网站的技术有哪些?
8、网站建设怎样做可以得到蜘蛛的喜爱
9、企业网站制作要多做网站的伪原创文章
10、互联网产品设计的几个策略
11、如何使得权重不会降低
12、什么样的文章标题更吸引客户
13、如何利用企业邮箱高效处理邮件来提高工作效率
14、网站优化中如何提升蜘蛛抓取频率呢
15、2021年网站设计中的四个误区
16、网站制作想要成功必须要避免的几个误区
17、纪念馆网站建设发展的三个阶段
18、站内优化时如何控制网站关键词密度
19、房地产网站制作的原则有哪些
20、让他们回来:为重复访问而进行优化
21、 搜狗搜索近期发展及优化需要注意的事项_网站运营_深圳网络公司
22、建立网站一定要搞清楚这些问题
23、企业网站设计制作风格流行趋势
24、网站排名不稳定的原因是什么
25、如何增强企业网站制作效果两手抓两手都要硬
26、专业优秀的网页设计有那五个要求
27、网站设计首页四大关键点
28、怎样做网站可以达到最优的效果呢
29、网站制作最常见的一些问题
30、解析网站优化中H标签正确使用技巧
31、网站建设费用都有哪些不同
32、企业网络品牌推广中有哪些常见的误区
33、企业网站营销有哪些营销方式
34、企业网站做推广优化要先学会网站分析
35、养成习惯保证百度快照天天更新
36、网站的导航应该如何做设计布局
37、选、放、做、调关键词优化4部曲
38、搜索引擎对新站的收录标准有哪些
39、如何寻找及选择万州网站建设公司
40、企业制作网站需要关注哪些核心要素呢
41、对于网站优化之中文url我有话说
42、 网站内容优化应该这样来做才是真正的王道
43、做推广优化应该优先考虑哪些问题
44、网站建设中怎么选择服务器
45、做好网站结构易于网站优化与用户体验
46、网站建设公司应该提前做好的几件事
47、深圳网站制作最好的公司是哪一家
48、在SEO培训市场上有不同的观点。我们该相信谁
49、搜索引擎优化之关键字布局策略
50、企业建网站注重个性化设计,主题鲜明
深圳市易捷网络科技有限公司版权所有    粤ICP备2022153140号