我们公司有个网站,是8年前做的,不论是视觉设计效果还是网站功能配置都已经无法满足公司的发展需要了。逼不得已,对网站进行全面改版,而旧网站中的内容仅保留约30%左右,而且至少占到40%的网页地址也发生了变化。更要命的是网站之前是没有备案的,现在需要改为企业名义备案。而广东备案要求在备案期间网站必须关闭,也给网站改版造成了一定的困难。笔者为了测试网站改版对搜索引擎的影响,特地把整个过程以实例方式全部记录下来,在此次网站改版中获得了非常多的数据、经验和教训,希望能帮到一些急需要网站改版的朋友。
5-15 开始重新备案,网站关闭。
5-16 百度抓取错误页增多。
5-21 百度抓取错误页达到新高,共36页。
5-22 网站备案成功,上传新网站,开始进行纯原创文章上传,每天三篇,分别安排在早中晚。
5-23 百度抓取错误页成几何倍增,达64页,继续按例上传原创文章。百度的抓取频次压力程直线上升,从改版前的33上最终上升到5-27的133,这说明百度发现了网站大范围的地址更改和页面内容的更改,于是加大了对网站的审查力度。这个时候,有心理准备了,迎接百度的大降权吧。
5-24 百度抓取错误页持续上升,达98页,继续按例上传原创文章。
5-25 百度抓取错误页达117页,继续按例上传原创文章。百度快照更新。
5-26 百度抓取错误页达最高值158页,百度索引量开始慢慢减少为264页。继续按例上传原创文章。
5-27 工程师开始分析原因,由于网站改版幅极大,仅保留了文章最多的数据表及连接不变。考虑到由于其它页的地址和内容皆发生变化,于是对服务器做了URL类404错误页处理。同时将之前旧站中权重较高的页做了301永久重定向。同时,百度索引量进一步减少到247页,我们意识到,暴风雨就要来了。继续按例上传原创文章。
5-28 由于前一天做了301永久重定向,错误页有了明显改善,减少到84页,但是最大的隐患由于SEO工程师的失误(之前做的301重定向并未返回301状态码,这是很致命的),危险正在酝酿中。果然不出所料,百度索引量从前一天的247页锐减到69页,伴随而来的是大量的降权,几个关键词之前排名前十,现在已经被推出百名以外,问题越来越严重了。继续按例上传原创文章,同时发现部分原创文章已被收录。为了安全,向百度提交了改版请求,也不知道做法是否正确(后来证明是正确的,至少可以告诉百度网站是因为改版才这样,并不是出了什么大问题),或许是心虚,希望百度明白网页的波动是因为公司需要正在改版,并不是其它不可原谅的异常。下面是百度提交改版请求的说明:
使用说明
在您提交改版范围前,请确保您的网站已设置好301跳转,以及在站长平台已验证新旧网站的权限
此工具主要是针对百度网页库中的新旧链接的处理,并不包含前端搜索结果页面的处理,原则上网页库处理完毕后一个月左右,前端效果会有明显改善,具体可参考百度索引量工具对比分析
5-29 首页已经不见了,说明网站里发生了严重的问题。同时发现错误页减少到0,一看到这个数字,就有莫名的恐慌。因为这不可能,网站里40%以上的链接都已经不是以前的链接了,怎么可能是0,于是进一步分析。通过HTTP状态查询,之前的错误链接返回的都是200码,我滴个神啊,意识到危险即将降临了。赶紧进行测试,在程序中增加了404代码推送,通过HTTP状态再次查询,正确返回了404码。
下午时分,首页出现了,但未回复到改版前的水平,排名仍然在百名以外,说明权重仍然被降。这么大幅度的改版,降权是意料之中、在所难免的,这个倒是一点也不意外,关键在于如何快速扭转这个状态。错误页也降到35页,嗯,看来301和404处理的效果开始显现了,这个应该是正常的范围,毕竟改版幅度很大。索引量又回升到179页,这说明百度已经开始对新网站中的新网页进行收录了。抓取压力开始回降为118,有两个可能,第一,百度开始慢慢接受新网站,从大量抓取新页转向正常有顺抓取;第二,对网站更多内容失去了兴趣;这个难以判断,需要接着观察。特别地发现,网站部分关键词仍然强劲,更惊奇的是,连新收录的页面也获得了较好的排名。如果首页权重恢复的话,相信排名会更好,可怜现在首页还被降权中,痛苦…。总之,这些都是一个好消息,心中暗喜。原创的高质量文章持续地上传着,同时进一步完善网站程序和功能,坐等明天的情况。
5-30 上午百度快照达354页,说明百度正在大量收录网站的新内容页。然而,首页仍处于降权状态。但相对于29号的32位已回升到21位,说明首页权重随着网站慢慢趋向正常而慢慢回升。
下午查看索引量减少到176页,较昨天减少了3页,可能是百度在收录新网站页面的同时也在删除旧网站的失效页面。
晚上查看快照更新到5-27,为什么不不是当天?这显然还是不那么正常。不过,快照增加了,达384页,首页权重终于恢复第一!但排名仍未恢复,这个不值得高兴,这种波动很正常。抓取压力进一步降到87,看来,网站得加强内容更新频率。百度抓取异常记录再度回到0,看上去对旧的无法打开的链接已经失去信心了,赶紧的,给我把那些打不开的旧链接索引给我删除了吧。
5-31 索引上升到182页,404错误页保持0。搜索几个关键词已经能看到排名了,不过很靠后,说明权重未恢复完成。快照减少为365页,百度持续删除旧网站失效链接,但新上传的文章链接开始加速抓取。
6-1 索引上升到246页,快照上升到394页,并发现一个有趣的情况,新收录的内页文章排名都很好。404页持续保持0,说明已基本稳定。抓取压力回升到102,这个应该跟这几天连续写的几十篇纯原创高质量文章有关。
6-2 抓取压力保持102,404页保持0,快照达411页。今天更新了12篇纯原创文章,估计明天新页会有大量增加,但旧页仍然会持续删除。
下面谈谈这几天来其它各大搜索引擎的情况:
360搜索在经历3天大低谷后强势回升,相应关键词均排名在第一页,随着网站更新幅度加大,还会获得进一步提升,略过不讲。
在本次改版后,由于首页标题、关键司和描述改动太大,GOOGLE自动采用了DMOZ目录的名称,标题被强制修改成了“艺琼网络”,后通过<meta>标签的处理,请求各大搜索引擎用网站本身的真实内容。估计需要一段时间后才会生效,生效后前端展示应该会有明显提升。但GOOGLE收录非常正常,新文章几乎每天都有收录,这个势头很好。
搜狗也太不给力了,一直不肯收录更多内容。看来,狗狗还在生我的气呢~
必应,太强势了,一夜之间收录300多页,首页的标题之前变成了域名,现在回复正常。大量重要关键词均在前5位,必应虽然不是本次的主角,但在百度漫长的等待中来点小兴奋,正好给我打打气。
6-3 抓取压力保持102,404页保持0,索引回落到204页,快照减少到392页。权重仍处于未恢复状态。
6-4 抓取压力大幅度降到21,404页增加了4个,都是以前不用的地址。索引上升到206页,快照回落到283个(什么情况?如果快速的回落很怪异。)
6-19 近半个月没接着写了跟踪情况了,考虑到中间可能只会有较小的落差,所以就没写了。在这半个月时间里,每天至少上传3篇纯原创高质量的文章,从没中断过。所有新写的文章几乎都是当天就收录了,并且都获得了非常好的排名。可惜的是,首页权重一直都没有恢复过来,元气大伤啊。不过,新网站在除百度外的其它搜索引擎里表面都十分优秀,快照几乎每天更新,各主要关键词排名也非常的好,算是比较满意的结果了。
这半个月里发生了许多事情,针对网站进一步做了优化,比如增加文章内链,比如增加友情链接。收录和索引都在缓慢地增加。网站中的死链逐步被百度剔除干净,这个越早越好,以免影响新网站的竞争力。随着网站新网页收录逐步稳定,百度抓取压力也回落到一个相对正常的的水平。下面统计一下当前的真实数据。
百度收录508页,索引322页,抓取压力32,抓取错误0。快照一直停在2014-05-27,不过,今天最大的喜讯是之前提交的改版显示“已完成”,历时22天,这意味快照很快就会得到更新,网站前端表现也将在未来一个月逐步回升并重新获得竞争优势。仍然不可懈怠,未来一个月继续持续每天至少3篇纯原创。如果此次大规模改版在百度中的表现不低于改版前,那么,目的也就达到了。这次改版完全是迫不得已,旧网站还是8年前做的,各种视觉效果和技术都无法满足现在的需要了。
6-27 网站权重部分恢复,但并没有完全恢复,所有关键词都有极大提升。与改版前已相差无几。但首页仍然没有更新,如果不出意外,首页将在未来不久更新,届时网站的前端表现将有更大的提升。随之而来的是网站全面进行正常状态,并保持持续的快照更新。一个多月啊,终于等到了这一天。让我们继续期待百度权重的再一次提升吧。下面是网站今天的SEO数据。
百度收录527页,索引316页,404错误0页,BR1,快照2014-05-27。各关键词排名基本恢复,但未恢复完全。首页未即时更新。
谷歌收录533页,索引367页,404错误,PR0,首页被强行改成“艺琼网络”,无排名,无流量,估计得等谷歌下次更新时收录、权重、排名才会恢复。
360收录502页,索引461页,404错误0页,快照。2014-06-26。快照隔天更新,每天都有收录,各关键词排名保持良好。
Bing收录189页,各主要关键词排名在第1-3页,非常好,只是收录太少了,期待Bing的大更新。
搜狗收录83页,索引83页,主要关键词未获好排名,部分长尾关键词排名佳。搜狗更新太慢了,揪心。
7-4 内流满面,首页快照终于更新了,百度收录达614页,百度索引达383页。最主要的一个关键词排名第一位,另外还有4个次要的关键词排名在第二页和第三页。满满的收获啊,而且发展空间巨大。未来一个月要着重优化其它几个关键词,争取都做到第一页。
7-5 网站权重几乎全部恢复,已经有2个最重要的关键词排名第一了,而且还有近10个关键词排名在第1-3页。不过,隐隐感觉网站还有很大的提升空间,主要是感觉权重还没有100%恢复,也就百分之八九十的样子。百度收录现在很勤快了,3天更新一次快照,许多新上传的文章排名表现非常好。下一阶段需要优化其它的关键词了,本次改版到这里也就差不多完成了。
本次改版基本结束并获得成功。总共历时一个半月。通过本次改版,获得了一些经验教训,也探索了一些新的网站优化方法和技巧:
1、 改版前应做好十成准备,九成都不行。把各种可能的因素都考虑进去以减少网站改版造成的影响。
2、 尽量保留旧网站的内容。
3、 尽量减少地址变更。当然,大范围改版无法避免地删除一些旧网页,一定要做好404页,注意测试404页是否正确返回404代码。不仅可以引导蜘蛛继续抓取,还能获得更好的用户体验。
4、 改版前考虑新旧内容替换,如果涉及地址变更,一定要做好301永久重定向,切记做好后一定要测试是否正确返回301码,不然后果严重。
5、 既然改版,那就把服务器也一并优化,开启GZIP压缩,提高网站打开速度,提高百度蜘蛛抓取效率。
6、 坚持网站原创内容更新,特别是改版恢复期间,杜绝抄袭内容。保持一个数量,每天更新。
7、 保持良好的心态,等,一定要等,改版期间排名下降是正常现象。百度官方说明是,改版更新完成后一个月后前端展示会获得改观。