nginx根据日志清除缓存脚本

最近要管理一个新网站www.nehosoft.com，线上前端nginx服务用来做后端图片服务的缓存代理服务器，但后端图片服务器在对用户上传的图片进行处理以后，有时会出现图片无法显示等问题，当出现这种情况的时候，该图片，我们就不希望被nginx缓存，如果被缓存，则要被清除。
　　分别用两种不同的脚本方案来解决：
　　1.通过过滤日志中状态码正常（即200）及图片大小小于100字节的url路径去查找缓存路径，进而清除缓存，脚本如下：
　　#!/bin/bash
　　cache_path=/home/nginx/proxy_cache_dir
　　logfile=/home/nginx/logs/access.log
　　datetime=`date +%d/%b/%Y`
　　logdir=/home/nginx/logs
　　#查找出所有当天nginx日志中状态码为200，大小小于100字节且被缓存命中的url，并将其保存至url.list
　　grep "$datetime" $logfile | awk '{if($9 == 200 && $10 < 100 && $NF ~ "HIT") print $7}' | sort -n | uniq > url.list
　　for i in `cat url.list`
　　do
　　#根据nginx日志中过滤的url查找缓存目录，对缓存中的url作处理后，保存到cache.list文件中
　　grep -a -r "$i" $cache_path| strings |grep "KEY: " | awk -F'KEY: ' '{print "http://"$2;}' | grep [a-zA-Z0-9]$ > cache.list
　　#再次对url进行处理
　　sed -i "s#1img.looklook.cn/#1img.looklook.cn:7086/purge/#" cache.list
　　#清除缓存
　　for url in `cat cache_list.txt`
　　do
　　curl "$url" | tee -a $logdir/purgelog/$(date +%y%m%d).log
　　done
　　done
　　2.将nginx日志复制为一个副本，然后通过新的nginx日志跟副本的比较，对变化的一部分直接做awk处理
　　#!/bin/bash
　　F=/home/nginx/logs/access.log
　　O=/home/nginx/logs/old.log
　　if [ ! -f $O ]
　　then
　　cp $F $O
　　exit 3
　　fi
　　diff $F $O | \
　　awk '{if($10 ==200 && $11< 100 && $NF ~ "HIT") print "http://1img.looklook.cn:7086/purge"$8}' | sort | uniq | \
　　awk '{system("curl \""$1"\"|tee -a /home/nginx/logs/purgelog/$(date +%y%m%d).log")}'
　　cat $F > $O