ITeye博客

如何快速统计RoR网站的访问量

robbin · 2007-07-03 13:46 · Ruby · Markdown

统计网站的访问量有很多专业的第三方工具,例如Google Analytics,提供强大,而且详细的统计功能。当然,也许不是每个人都需要这么复杂而且操作麻烦的工具,如果你只是需要大概了解一下网站的访问量和访问URL的比例,那么让我们看看最简单最容易的统计工具:Unix Shell。

一个RoR网站的访问纪录,Web Server(Apache or lighttpd)会记录所有的访问请求,包括动态请求和静态请求,但大量图片,JS,CSS的请求对我们没有太大的统计价值,因此web server的日志参考价值就不大。

RoR会记录所有动态请求日志到log/production.log里面,我们要做的就是让RoR进行日志交换,每天产生一个新的日志文件。很简单,修改config/environment.rb


RAILS_DEFAULT_LOGGER = Logger.new("#{RAILS_ROOT}/log/#{RAILS_ENV}.log", "daily")

那么每天就会产生一个诸如production.log.20070702这样的日志文件。

一、统计每日动态请求处理总数

cat production.log.20070702|grep "200 OK"|wc -l 

打印日志文件,挑选正确处理的请求行,统计行数,一条shell命令就搞定了网站处理的动态请求数量。虽然动态请求数量不等于网站访问量,但是可以作为一个重要的参考指标。

二、统计URL的访问频度

网站管理员都很希望知道哪些频道受欢迎被访问的频繁,哪些URL格外受到关注,不必寻求专业的网站流量统计系统,一条shell命令就搞定了:

cat production.log.20070702 |grep "200 OK" | awk '{print $17}'|sort|uniq -c | sort -r -n > stat.log

打印日志文件,挑选正确处理请求行,把第17列即URL那一列挑出来,排序,统计唯一URL出现的次数,按照URL次数倒序输出到stat.log文件里面,让我们看看stat.log是什么:


  10096 [http://www.iteye.com/]
   3590 [http://www.iteye.com/forums/index]
   3446 [http://www.iteye.com/forums/board/java]
   3300 [http://www.iteye.com/index/rss_index_topics]
   2477 [http://www.iteye.com/forums/board/life]
   1605 [http://www.iteye.com/forums/board/ajax]
   .........

网站首页被访问了10096次,论坛频道首页被访问了3590次,......

是不是很爽?我们用一条shell命令可以做简单的网站访问统计系统了。那么用Java做的系统,能不能这样统计呢?其实照样可以。你可以在tomcat的配置文件里面设置输出详细的日志信息,然后照样用shell命令搞定。

评论(10)

  1. #10 楼 · wsapan · 2008-07-02 11:04

    harryempire writes:

    简单实用的好办法

    我的处女贴 关注javaeye,好多年了

  2. #9 楼 · msnvip · 2007-11-12 13:21

    正准备做这块呢 学习ing....

  3. #8 楼 · robbin · 2007-07-19 17:24

    一个RoR网站的访问纪录,Web Server(Apache or lighttpd)会记录所有的访问请求,包括动态请求和静态请求,但大量图片,JS,CSS的请求对我们没有太大的统计价值,因此web server的日志参考价值就不大。

  4. #7 楼 · mmwy · 2007-07-19 16:44

    robbin前面用着lighttpd之类的,再装个cronolog,然后在配置里面写 accesslog.filename = |xxxx/cronolog-1.6.2/sbin/cronolog /xxx/access_%Y%m%d.log" 就可以轮循日志,没必要用ruby来生成日志吧?

  5. #6 楼 · Suninny · 2007-07-19 10:58

    有个rails plugin叫sitealizer

  6. #5 楼 · harryempire · 2007-07-19 07:50

    简单实用的好办法

  7. #4 楼 · wtb · 2007-07-12 16:27

    这些日志处理最强的工具就是shell下的awk,awk是个很好学的工具,编程语法类似C,处理速度极快,能力极强。据说很多windows系统管理员都用它来做日志分析。

  8. #3 楼 · 花花公子 · 2007-07-08 23:13

    grep是不用搭配cat打开文件的,shell编程确实很神奇

  9. #2 楼 · geszJava · 2007-07-06 18:09

    我喜欢这篇.

  10. #1 楼 · shallwelin · 2007-07-03 19:45

    robbin的文章可以归纳为一个系列了, 其中, 我比较喜欢有关部署的, 流量监测的, 很是受益.

评论功能维护中,当前仅展示历史评论。