技能 | 通过简单的Excel分析网站日志数据-CDA数据分析师官网

技能 | 通过简单的Excel分析网站日志数据

2016-05-23

昨天在一个QQ交流群里看到有一个新手发问，如何去简单的分析网站日志，清楚知道网站的一个数据抓取情况，哪些目录抓取较好，有哪些IP段蜘蛛抓取等。

一个网站要发展的更快，走的更远，它离不开日常的一个数据分析，就如携程旅行网页搜索营销部孙波在《首届百度站长交流会》上所言，其利用数据模型对频道改版后，网页索引量从原来的十几万，上升到今年的500多万的索引量。由此可见，数据分析的重要性。

说到每日的网站日志分析，在这里强调下，我需要用到两个工具：Excel和光年日志分析工具。可能也有朋友在对网站的日志分析时，需要另外用到一个工具WebLogExplorer。

其实在网站日志分析中，最需要用到的工具就是Excel（07版Excel或10版Excel），在这里，简单跟大家交流一下我的一点经验。

网站体抓取情况统计：

借助光年日志分析工具，获取各个搜索引擎的蜘蛛总抓取量、蜘蛛总停留时间、蜘蛛来访次数（本人由于只做百度优化，就说说百度蜘蛛抓取情况），如下图1：

把这上面的数据做成Excel即可，如下图2：

平均停留时间=总停留时间/访问次数，计算公式：=C2/B2enter键

平均抓取量=总抓取量/访问次数，计算公式：=D2/B2enter键

单页面抓取时间==停留时间*3600/总抓取量计算公式：=D2/C2enter键

蜘蛛状态码统计：

借助Excel表格，打开日志（最直接的办法，就是它日志拖到Excel表格里），然后再统计蜘蛛状态码，如下图3：

通过Excel表格下的“数据”功能下的筛选，下面就可以对蜘蛛状态码进行统计了，具体的统计操作如下图4：

点击IP段下拉框，找到文本筛选，选择自定义筛选。

通过图3，可以看出，蜘蛛抓取的状态码200特征是HTTP/1.1"200，以此类推：状态码500是HTTP/1.1"500、状态码404是HTTP/1.1"404、状态码302是HTTP/1.1"302…..下面就可以筛选出各个蜘蛛状态码，如下图：

如上图5，选择包含关系，即可以统计出百度蜘蛛200状态码的抓取量，其他以此类推。

蜘蛛IP段统计：

如上图，把状态码换成IP段就可以，如：HTTP/1.1"200换成202.108.251.33

目录抓取统计：

如上图，把状态码换成相应目录名就可以，如：HTTP/1.1"200换成/tagssearchList/

总结一下：

如何通过简单的Excel分析网站日志数据，就介绍到这里。不知道身为seo的你平常有没有分析网站日志呢。反正我平常都分析这个东东的。自认对网站的日志进行分析是很有必要的。至于分析的这些数据，有什么作用，如何通过这些数据查到网站的不足之处，然后列出调整方案，有步骤的去调整网站的结构，相信有很多人已经写过了，我在这里，就不再多说了。

数据分析特征

数据分析咨询请扫描二维码

上一篇图论在大数据分析中的作用！

下一篇CDA认证再升一档！与国家共同推进大数据人才培养标准教育事业！

技能 | 通过简单的Excel分析网站日志数据

考试指南

报考指南

热门栏目