光年seo日志分析系统的拆分工具，可以很方便地进行自定义日志分析。针对百度Spider的分析，就把日志中username为BaiduSpider的记录全部提取出来进行分析。还可以对拆分出来的百度spider抓取日志进行再次拆分，比如拆分出SPIDERTJGC 得到 404状态码的抓取记录或者Spider对基本类URL的抓取记录等。这样多次拆分就可以分析出整个SPIDER对网站的抓取情况，以获取是否有不需要收录的内容被 Spider抓取，是否有自己没有发现的死链接被 Spider发现，Spider对最新内容是否都有抓取，Spider对自己主推的栏目抓取是不正常，以及Spider对网站、目录或指定页面的抓取频率等数据。还可以针对状态码进行更详细的分析，比如304是不是返回过多，以配合分析网站各类页面的快照更新情况等。
同此此工具还可以对日志生成分析报表，SEO日志分析系统生成的日志分析报表，这里是重庆小潘博客针对百度SPIDER抓取记录进行分析生成的报表，此工具也可以直接对整个日志文件进行分析，同时得出用户和SPIEDER 对网站的访问情况。如果不愿自己苦兮兮地打开日志逐行分析，并且对日志分析结果的要求也不高，就可以使用此工具来辅助分析，在这个报表中也可以分析出不少问题。需要注意的是，光年工具给出的日志分析报表中Spider对网站的抓取次数，应该不是搜索引擎对网站真正的抓取次数，而是工具默认为在30分钟内没有继续抓取就算作离开了，即算作完成一次抓取。
更多的分享请关注重庆seo博客：www.hkxiaopan.com
