如何使用Nginx作缓存服务器及删除其缓存文件

a-->nginx.confuser www www;worker_processes 8;error_log /data/logs/nginx_error.log crit;pid    /usr/local/nginx/nginx.pid;worker_rlimit_nofile 204800;events{ use epoll; worker_connections 204800;}http{  include    mime.types;  #apk 文件类型  #default_type application/vnd.android.package-archive;  default_type application/octet-stream;  charset utf-8;  server_names_hash_bucket_size 128;  client_header_buffer_size 2k;  large_client_header_buffers 4 4k;  client_max_body_size 8m;  sendfile on;  tcp_nopush   on;  keepalive_timeout 60;  open_file_cache max=204800 inactive=20s;  open_file_cache_min_uses 1;  open_file_cache_valid 30s;  tcp_nodelay on;  client_body_buffer_size 512k;    #跟后端服务器连接的超时时间_发起握手等候响应超时时间  proxy_connect_timeout 600;  #连接成功后_等候后端服务器响应的时间_其实已经进入后端的排队之中等候处理  proxy_read_timeout 600;  #后端服务器数据回传时间_就是在规定时间内后端服务器必须传完所有数据  proxy_send_timeout 600;  #代理请求缓存区_这个缓存区间会保存用户的头信息以供nginx进行规则处理_一般只要能保存下头信息即可  proxy_buffer_size 16k;  #同上 告诉nginx保存单个用的几个buffer最大用多大空间  proxy_buffers 4 64k;  #如果系统很忙的时候可以申请更大的proxy_buffers 官方推荐*2  proxy_busy_buffers_size 128k;  #proxy缓存临时文件的大小  proxy_temp_file_write_size 128k;  gzip on;  gzip_proxied expired no-cache no-store private auth;  gzip_min_length 1k;  gzip_buffers   4 16k;  gzip_http_version 1.1;  gzip_comp_level 3;  gzip_types    text/plain application/x-javascript text/css application/xml;  gzip_disable "msie [1-6].";  gzip_vary on;  #log_format access '$remote_addr - $remote_user [$time_local] '  #          '"$request" $status $body_bytes_sent '  #          '"$http_referer" "$http_user_agent" '  #          '$host $request_time $http_x_forwarded_for';  #access_log /data/logs/http.a.log;  #error_log /data/logs/http.e.log;  include vhosts/cache.peiqiang.net.conf;}upstream source_site {  server 192.168.1.1:80 weight=7 max_fails=2 fail_timeout=30s;  server 192.168.1.2:80 weight=4 max_fails=2 fail_timeout=30s;}b-->cache.peiqiang.net.conf#用于指定本地目录来缓冲较大的代理请求proxy_temp_path /data/soft/temp;#设置web缓存区名为cache_one,内存缓存空间大小为12000m，自动清除超过15天没有被访问过的缓存数据，硬盘缓存空间大小200gproxy_cache_path /data/soft/cache levels=1:2 keys_zone=cache_one:12000m inactive=15d max_size=200g;server {   listen 80;   server_name cache.peiqiang.net;   access_log /data/logs/a.log;   error_log  /data/logs/e.log notice;   # php scripts is not allowed within this site!   location ~* .(php|php5|jsp|asp|aspx)$ {     deny all;   }   location / {     proxy_next_upstream http_500 http_502 http_503 http_504 error timeout invalid_header;     proxy_cache cache_one;     proxy_cache_valid 200 304 12h;     proxy_cache_key $uri$is_args$args;     #反向代理，访问后端内容源服务器     proxy_set_header host $host;     proxy_set_header x-forwarded-for $remote_addr;     proxy_pass http://source_site;   }   location ~* .*.(apk)$ {     error_page 302 404 = @fallback;     #如果后端的服务器返回500、502、503、504执行超时等错误、自动将请求转发到upstream负载均衡池中的另一台服务器，实现故障转移     proxy_next_upstream http_500 http_502 http_503 http_504 error timeout invalid_header;     #使用web缓存区cache_one     proxy_cache cache_one;     #对不同的http状态码缓存设置不同的缓存时间     proxy_cache_valid 200 304 12h;     #设置web缓存的key值，nginx根据key值md5哈希存储缓存，这里根据"域名、uri、参数"组合成key     proxy_cache_key $uri$is_args$args;     #反向代理，访问后端内容源服务器     proxy_set_header host $host;     proxy_set_header x-forwarded-for $remote_addr;     proxy_pass http://source_site;     expires 1d;   }   location @fallback {     rewrite ^ $scheme://apke.peiqiang.net$uri redirect;     expires -1;   }}

c-->/etc/rc.local#!/bin/sh## this script will be executed *after* all the other init scripts.# you can put your own initialization stuff in here if you don't# want to do the full sys v style init stuff.touch /var/lock/subsys/localulimit -hsn 65535/usr/local/nginx/sbin/nginx

#!/bin/bash#date: 2013-06-27#auther: budong########################################################说明：#  1.本脚本用于清除nginx缓存文件#  2.查看你的nginx是根据什么作为key来hash的，我的设置是 proxy_cache_key $uri$is_args$args;#  因此nginx会根据$uri$is_args$args作为key进行hash，因此可以模拟nginx对一个key进行再#  hash找到相应的文件路径，删除（具体可随意找个缓存文件 more 一下看看)#  3.缓存设置 proxy_cache_path /data/mumayi/cache levels=1:2 keys_zone=cache_one:6000m inactive=15d max_size=200g;#  根据相应的配置，请做相应修改测试#  4.uri格式请按照同级目录下rm_apk_list.txt中填写#####################################################while read -r linedo  md5uri=`echo -n $line | md5sum | awk '{ print $1 }'`  filepath=`echo "$md5uri" | awk '{print "/data/mumayi/cache/"substr($0,length($0),1)"/"substr($0,length($0)-2,2)"/"$0}'`  rm -rf $filepathdone < /root/sbin/rm_apk_list.txtb python版#!/usr/local/python2.7/bin/python2.7# -*- coding:utf8 -*-#date: 2013-06-26#name: budong'''说明：  1.本脚本用于清除nginx缓存文件  2.查看你的nginx是根据什么作为key来hash的，我的设置是 proxy_cache_key $uri$is_args$args;  因此nginx会根据$uri$is_args$args作为key进行hash，因此可以模拟nginx对一个key进行再  hash找到相应的文件路径，删除（具体可随意找个缓存文件 more 一下看看)  3.缓存设置 proxy_cache_path /data/mumayi/cache levels=1:2 keys_zone=cache_one:6000m inactive=15d max_size=200g;  根据相应的配置，请做相应修改测试  4.uri格式请按照同级目录下rm_apk_list.txt中填写'''import osimport systry:  from hashlib import md5except:  from md5 import md5reload( sys )sys.setdefaultencoding('utf-8')project_root = os.path.dirname(os.path.abspath(__file__))uri_file = ''.join([project_root,'/rm_apk_list.txt'])def nginx_purge(uri):  m = md5()  m.update("%s" % uri)  md5uri=m.hexdigest()  md5uri_len=len(md5uri)  dir1=md5uri[md5uri_len-1:]  dir2=md5uri[md5uri_len-3:md5uri_len-1]  file_path=("/data/mumayi/cache/%s/%s/%s" % (dir1, dir2, md5uri))  if os.path.exists(file_path):    os.remove(file_path)with open("%s" % uri_file,'r') as uri_file:  for line in uri_file:    line = line.rstrip()    nginx_purge(line)

[root@budong ~]# cat /root/sbin/rm_apk_list.txt /2013/08/15/38/382272/shuazanzhushou_v1.8.16_mumayi_95a91.apk

[root@budong ~]# more /data/mumayi/cache/0/00/db9327b60a6b3c164516117f90d9d000

key: /2013/10/23/43/432816/dinuochongwudinopets_v1.1.1_mumayi_0b399.apkhttp/1.1 200 okserver: nginx/1.2.6date: sun, 15 dec 2013 19:51:22 gmtcontent-type: application/vnd.android.package-archivecontent-length: 37466293connection: closelast-modified: wed, 23 oct 2013 06:15:06 gmtexpires: wed, 18 dec 2013 17:35:07 gmtcache-control: max-age=604800accept-ranges: bytes