详解NGINX如何统计网站的PV、UV、独立IP

Nginx: PV、UV、独立IP

做网站的都知道，平常经常要查询下网站PV、UV等网站的访问数据，当然如果网站做了CDN的话，nginx本地的日志就没什么意义了，下面就对nginx网站的日志访问数据做下统计；

概念：

先声明下环境，此次运行的nginx版本1.7，后端Tomcat运行的是动态交互程序（需进行用户认证，如果是静态页面则抓不到cache值，$http_cookie是空值），就是这样；

nginx日志文件配置

http {  include    mime.types;  default_type application/octet-stream;  log_format main '$remote_addr - [$time_local] "$request" '            ' - $status "User_Cookie:$guid" '; #User_Cookie为日志显示字符，$guid为变量，具体内容在下面定义，也可在日志格式里写入$http_cookie 显示完整的cookie内容<br>  sendfile    on;  keepalive_timeout 65;    upstream backserver {    ip_hash;    server 1.1.2.2:8080;    server 1.1.2.3:8080;}server {    listen    80;    server_name localhost;    #if ( $http_cookie ~* "(.*)$") 匹配所有内容    if ( $http_cookie ~* "CSID=([A-Z0-9]*)"){        set $guid $1;    }  #只匹配CSID字符信息，此处为正则表达式<br>    access_log logs/host.access.log main;     location ~* ^(.*)$ {       #limit_req zone=allips burst=1 nodelay;        proxy_pass http://backserver;       proxy_set_header Host $host;       proxy_set_header X-Real-IP $remote_addr;       proxy_set_header REMOTE-HOST $remote_addr;       proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;       client_max_body_size 8m;       }    error_page  500 502 503 504 /50x.html;    location = /50x.html {      root  html;    }} 

注：$http_cookie这个里面的值是一个一个cookie的值，中间以“;”分隔

日志输出格式

192.168.40.2 - [02/Nov/2016:15:44:35 +0800]  "GET /wcm/app/main/refresh.jsp?r=1478072325778 HTTP/1.1"  - 200 "User_Cookie:7F00000122A5597C46607B1C0A7EC016"
192.168.40.2 - [02/Nov/2016:15:44:35 +0800]  "GET /webpic/W0201611/W020161102/W020161102566715167404.jpg HTTP/1.1"  - 200 "User_Cookie:7F00000122A5597C46607B1C0A7EC016"
119.255.31.109 - [02/Nov/2016:15:44:36 +0800]  "GET /wcm/app/main/refresh.jsp?r=1478072510132 HTTP/1.1"  - 200 "User_Cookie:7F000001237921BE9237838AEC65704D"
119.255.31.109 - [02/Nov/2016:15:44:36 +0800]  "GET /wcm/app/message/message_query_service.jsp?READFLAG=0&MSGTYPES=1%2C2%2C3 HTTP/1.1"  - 200 "User_Cookie:7F000001237921BE9237838AEC65704D"