之前做SEO关注的不多,后来听过专门的培训后,感觉分析网站日志,能够更加深刻的理解网站,从而使SEO的效果更好。
认识网站日志:也叫服务器日志,通常情况是log 文件或log文件夹,在网站服务器的根目录下。表现形式:xxx.log
打开该文件,分析可以得出每天搜索引擎蜘蛛的抓取状态, 网站404页面如何处理的。搜索蜘蛛名可以在文件中找到:
Baidu蜘蛛:Baiduspider;
Google蜘蛛:Googlebot
网站日志中有一些异常情况,值得我们注意:
1、首页抓取次数过多
2、301错误过多
3、404错误过多
4、某一类页面未被抓取
通过分析历史数据,对比它们。如果有以上的问题,需要及时处理。