一行代码了解网站被访问最多的URL
来源:互联网 发布:自学游戏编程 编辑:程序博客网 时间:2024/05/21 01:55
转自:http://sesame.iteye.com/blog/1678326
有需求想分析下网站的被访问的TOP 10 URL是哪些,想到了apache 的cookie日志中有记录,在日志目录的cookie_log.*文件中,打开一个确实存在:
- 112.113.241.58 - - - [09/Sep/2012:00:01:08 +0800] "GET /dd.abc.com/favicon.ico HTTP/1.1" 200 1406 154 "-" "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1) QQBrowser/6.0"
不过对每一个列对应的含义不是很清楚,看了下httpd.conf,
- LogFormat "%h %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\"" combined
- LogFormat "%h %l %u %t \"%r\" %>s %b" common
查了下apache的配置文档,了解了对应的含义。
写了一行shell脚本:
- cat cookie_log.0 | awk '{ print $8 }' | sed s/?.*//g |sort | uniq -c | sort -n -r |head -n 10
(uniq这个命令默认只删除紧挨的重复行,所以需要先sort下,再uniq)
得到以下结果,(具体网址用手动替换成*了)
- 2713 /172.22.14.109/ok.htm
- 2387 /*/order/orderList.htm
- 1009 /*/favicon.ico
- 990 /*/index.htm
- 854 /*/wide/jhs/wlTrace.htm
- 851 /*/aita/css/aita-main.css
- 780 /*/order/orderDetail.htm
- 715 /*/storage/stockInList.json
- 519 /*/determine/deduce.json
- 496 /*/order/channelOrderListLimit.json
0 0
- 一行代码了解网站被访问最多的URL
- URL访问网站的整个过程
- URL访问网站的网络传输全过程
- 网站的访问统计代码
- Spark模拟实现某网站用户浏览次数最多的url统计
- 用进程跟踪来了解网站的访问情况
- (错误)405 "很抱歉,由于您访问的URL有可能对网站造成安全威胁,您的访问被阻断。"
- Android访问网站URL的资源以及有关WebView开发
- 海量日志数据__怎么在海量数据中找出重复次数最多的一个;提取出某日访问网站次数最多的那个IP;提取出某日访问网站次数最多的前n个IP
- 网站提示上次访问时间的代码
- js统计网站访问次数的代码
- 【代码】统计网站的访问次数
- 网站访问统计代码
- 一行代码的神奇!
- 一行的代码
- scala的一行代码
- JAVA代码中访问URL
- 网站基本访问情况监控,全面了解网站访问情况~
- hibernate fetch
- 文件搜索指令 locate
- Laravel -- laravel环境的安装
- 【Qt开发】qt中涉及到空格包含路径的解决办法
- 点滴记录——Ubuntu 14.04中安装Sublime Text 3并使用SublimeClang插件
- 一行代码了解网站被访问最多的URL
- java根据关键字列出文件夹下的文件
- 最近点计算
- 31. Next Permutation
- HDU 5492 Find a path(DP)
- 从零开始写C# MVC框架之--- 设计用户、菜单、组织机构、角色等表
- uva 10214 Trees in a wood 两个区间内的互素数对
- hdu 4218 IMBA?
- Java线程的生命周期