系统运行日志基础数据分析
来源：互联网 发布：开源淘宝客 导入 编辑：程序博客网 时间：2024/04/27 20:42
系统运行日志基础数据分析
总括
***************************************************************************************2014.02.25总PV：420W个;总UV：5.1W人;独立IP：12W个;(平均每人请求82次；平均每个IP请求35次；)(截止用户总数723112，即日活7.05%)(当天新用户39751，注册20309，激活16551，激活率81.50%，平均每分钟11.5人激活，每秒0.19人)平均每小时PV：17W个（按24小时算）;平均每秒PV：146个（按8小时算）;平均每秒PV：97个（按80%流量,40%时间算）;单秒最高：09:36:35 -> 336个09:52:58 -> 329个10:28:16 -> 317个早8点~9点PV最高：26W(平均每秒73个);***************************************************************************************1. 全天24小时，每秒请求数，前50名:
**[root@web SysLogs]# cat info.log.2014-02-25 | awk '{a[$2]++} END {for(b in a) print b"\t"a[b]}' | sort -n -k 2 -r | head -50** 09:36:35 33609:52:58 32910:28:16 31709:00:06 31510:17:50 30509:40:18 29809:36:20 28309:50:13 27710:00:16 27309:52:45 27309:39:52 26810:37:42 26710:30:41 26609:59:28 26609:58:16 26409:34:38 26410:03:00 26309:58:41 26309:10:26 26210:29:35 26009:58:11 26010:24:10 25810:26:23 25608:59:36 25610:17:55 25409:52:18 25410:19:16 25309:39:25 25209:54:39 25109:43:58 25109:32:29 25110:22:03 24910:27:25 24809:54:46 24809:35:12 24823:06:06 24709:39:09 24709:46:37 24610:49:42 24509:49:29 24509:39:48 24509:35:43 24508:02:13 24510:02:32 24409:57:58 24409:57:12 24409:54:32 24409:31:43 24410:33:50 24310:24:06 24309:45:35 24309:40:06 24310:39:33 24209:53:22 24208:55:14 24010:41:05 23909:30:55 23909:38:18 23809:33:48 23809:18:34 23710:42:11 23610:40:04 23610:17:31 23510:30:13 23410:24:57 23409:54:20 23409:32:13 23409:27:49 23410:29:27 23310:02:09 23309:56:50 23309:52:08 2332. 全天24小时，单秒最高请求数(09:36:35最高336个请求)，查看该时间内请求URL排名:
**[root@web SysLogs]# cat info.log.2014-02-25 | grep "09:36:35" | awk '{a[$15]++} END {for(b in a) print b"\t"a[b]}' | sort -n -k 2 -r**http://api.xxxx.com/user/getPushKey.do 83http://api.xxxx.com/contacts/findUserContact.do 28http://api.xxxx.com/user/requestList.do 22http://api.xxxx.com/contacts/download.do 18http://api.xxxx.com/user/saveGPS.do 13http://api.xxxx.com/user/requestProgress.do 12http://api.xxxx.com/news/systemSDRExtension.do 12http://api.xxxx.com/contacts/add2Contacts.do 12http://api.xxxx.com/user/visitorNum.do 9http://api.xxxx.com/user/signInByThirdPart.do 9http://api.xxxx.com/user/InduRecommend.do 9http://api.xxxx.com/user/signUp.do 8http://api.xxxx.com/user/signIn.do 8http://api.xxxx.com/contacts/upload.do 7http://api.xxxx.com/news/friendCastNew.do 6http://api.xxxx.com/message/sendMessage.do 6http://api.xxxx.com/message/readMessageDetail.do 6http://api.xxxx.com/user/vCodeResend.do 5http://api.xxxx.com/message/listForUnRead.do 43.查看8点时间段，每秒请求数，前50名:
**[root@web SysLogs]# cat info.log.2014-02-25 | grep "2014-02-25 08:" | awk '{a[$2]++} END {for(b in a) print b"\t"a[b]}' | sort -n -k 2 -r | head -50** 08:59:36 25608:02:13 24508:55:14 24008:43:55 23308:27:14 23108:23:25 23108:34:18 22708:51:38 21708:23:17 21608:41:11 21308:31:08 21308:55:04 21008:12:47 20308:58:24 20208:41:17 20208:40:57 20208:27:30 20208:34:05 20108:19:44 20008:51:57 19808:54:50 19708:48:55 19708:51:50 19608:59:03 19408:56:09 19308:55:20 19308:41:05 19308:19:51 19108:55:47 19008:57:03 18908:54:26 18908:27:22 18908:48:48 18808:34:11 18708:54:56 18608:46:26 18608:57:16 18508:57:22 18408:56:34 18108:56:16 18108:31:00 18008:55:40 17808:02:27 17808:57:57 17608:55:33 17608:44:11 17608:58:09 17308:54:15 17308:44:00 17208:43:11 1724.查看8点时间段，被请求连接URL，前50名:
[root@web SysLogs]# cat info.log.2014-02-25 | grep "2014-02-25 08:" | awk '{a[$15]++} END {for(b in a) print b"\t"a[b]}' | sort -n -k 2 -r | head -50http://api.xxxx.com/contacts/upload.do 42051http://api.xxxx.com/user/getPushKey.do 32500http://api.xxxx.com/contacts/findUserContact.do 19979http://api.xxxx.com/user/requestList.do 14990http://api.xxxx.com/contacts/download.do 14888http://api.xxxx.com/user/InduRecommend.do 13884http://api.xxxx.com/news/systemSDRExtension.do 10201http://api.xxxx.com/user/signUp.do 9209http://api.xxxx.com/news/friendCastNew.do 8613http://api.xxxx.com/user/visitorNum.do 8027http://api.xxxx.com/contacts/add2Contacts.do 7630http://api.xxxx.com/user/signIn.do 6037http://api.xxxx.com/message/readMessageDetail.do 5837http://api.xxxx.com/user/saveGPS.do 5455http://api.xxxx.com/user/uidGenerate.do 4952http://api.xxxx.com/user/requestProgress.do 4681http://api.xxxx.com/message/sendMessage.do 3953http://api.xxxx.com/user/accountVerify.do 3800http://api.xxxx.com/user/signInByThirdPart.do 2819http://api.xxxx.com/user/vCodeResend.do 2532http://api.xxxx.com/user/privacySetting.do 2136http://api.xxxx.com/user/locationBased.do 2128http://api.xxxx.com/comment/list.do 1980http://api.xxxx.com/user/socialToken.do?method=batch 1859http://api.xxxx.com/sdr/detail.do 1855http://api.xxxx.com/user/userBind.do 1810http://api.xxxx.com/message/listForUnRead.do 1505http://api.xxxx.com/product/listAll.do 1447http://api.xxxx.com/user/updateUserProfile.do 1294http://api.xxxx.com/message/sys.do 920http://api.xxxx.com/user/industryBased.do 914http://api.xxxx.com/user/search.do 789http://api.xxxx.com/product/industryCount.do 786http://api.xxxx.com/user/visitor.do 626http://api.xxxx.com/user/accessToken.do 624http://api.xxxx.com/message/historyList.do 571http://api.xxxx.com/user/updateSDRInfo.do 568http://api.xxxx.com/user/sdrSearch.do 497http://api.xxxx.com/news/praise.do 466http://api.xxxx.com/group/topicList.do 466http://api.xxxx.com/news/userDynamicCast.do 448http://api.xxxx.com/comment/receive.do 362http://api.xxxx.com/group/basicInfo.do?method=groupPage 358http://api.xxxx.com/user/updateUserWorks.do 302http://api.xxxx.com/news/addFriendNewsList.do 290 0 0
- 系统运行日志基础数据分析
- 系统日志数据分析
- monkey运行日志基础分析
- 大数据Hive-日志分析系统流程
- rsyslog+loganalyzer系统日志分析系统(基础搭建)
- RHEL 5基础篇—分析系统日志
- 5个日志数据：让你轻松分析系统性能
- 针对Ubuntu系统日志的数据挖掘及分析处理
- 创业公司做数据分析（四）ELK日志系统
- 建造适于业务分析的日志数据系统
- 创业公司做数据分析（四）ELK日志系统
- Android应用程序框架层和系统运行库层日志系统源代码分析
- Android应用程序框架层和系统运行库层日志系统源代码分析
- Android应用程序框架层和系统运行库层日志系统源代码分析
- Android应用程序框架层和系统运行库层日志系统源代码分析
- Android应用程序框架层和系统运行库层日志系统源代码分析
- Android应用程序框架层和系统运行库层日志系统源代码分析
- Android应用程序框架层和系统运行库层日志系统源代码分析
- 欢迎使用CSDN-markdown编辑器
- lvs、haproxy、nginx 负载均衡的比较分析
- jdbc连接数据库使用sid和service_name的区别
- 技巧: 使用truss、strace或ltrace诊断软件的"疑难杂症"
- ReactiveCocoa框架菜鸟入门（四）——信号（Signal）详解
- 系统运行日志基础数据分析
- 利用JAXB实现xml和bean之间的转换（一）
- B. Vanya and Food Processor
- ssh 免密码登陆
- Think PHP(TP)框架的基本使用 (二)
- 反编译
- 开发异常问题总结一
- 独家分享——大牛教你如何学习Web前端开发
- 开源项目工具库篇
