有关nginx日志分析的一点记录
来源:互联网 发布:java 整形转string 编辑:程序博客网 时间:2024/06/06 05:35
由于网站需要进行防止内容抓取,就要对各大引擎的user-agent进行判断,自己搜索了一下
各大搜索引擎的User-agent
google (Googlebot)baidu (Baiduspider)
soso (Sosospider)
sogou (Sogou web spider)
yahoo (Yahoo! Slurp China)
bing (bingbot)
nginx日志格式:
默认格式:
log_format combined '$remote_addr - $remote_user [$time_local] '
'"$request" $status $body_bytes_sent '
'"$http_referer" "$http_user_agent"';
远程地址 远程用户 时间 请求方式及文件 状态 发送字节 发送者(应该是表明从哪个页面发送过来的) 搜索引擎别名及浏览器的一些信息
- 有关nginx日志分析的一点记录
- 关于nginx的一点记录
- 有关程序日志的一点想法
- nginx的日志分析
- 有关加密与解密的一点记录
- 有关v$asm_attribute视图的一点记录
- 有关虚继承的一点分析
- 做游戏修改器的一点记录,有关大航海家3
- Nginx正确记录post日志的方法
- NGINX不记录某些日志的配置
- nginx日志记录post的参数
- nginx日志记录切割
- 使用 awstats 分析 Nginx 的访问日志
- 使用 awstats 分析 Nginx 的访问日志
- 使用 awstats 分析 Nginx 的访问日志
- 使用AWStats分析Nginx的访问日志
- 使用awstat分析Nginx的访问日志
- nginx安全日志分析脚本的编写
- Socket API简介二(tcp的状态/TCP的四次挥手/TCP和UDP的基本特性)
- 如何学好C语言
- Drawable资源(翻译)
- 程序员犯的非技术错误(Top 5)
- Java集合类
- 有关nginx日志分析的一点记录
- 程设作业:MyString类
- java中常见类型的转换
- POJ 3680
- 开发人员必学的5门课程
- COCOS2D坐标系统的一些说明
- CG Independent Study PCL learn PCL 01 what is it?
- 查看当前人的前面还有几人 SQL
- 时钟芯片DS1302可靠起振的方法