【Web 集群实战】08_Nginx 访问日志（access_log)

Web集群实战

1. Nginx 访问日志介绍

• Nginx 软件会把每个用户访问网站的日志信息记录到指定的日志文件里，供网站提供者分析用户的浏览行为等，此功能由 ngx_http_log_module 模块负责。对应的官方地址为：http://nginx.org/en/docs/http/ngx_http_log_module.html

2. 访问日志参数

• 控制日志的参数

- Nginx 日志变量

参考链接：https://www.cnblogs.com/wajika/p/6426270.html

3. 访问日志配置

• 编辑主配置文件 nginx.conf，配置日志的格式，如下：

[root@ylt001 conf]# sed -n '21,23 s/#//gp' nginx.conf.default
    log_format  main  '$remote_addr - $remote_user [$time_local] "$request" $status $body_bytes_sent "$http_referer" "$http_user_agent" "$http_x_forwarded_for"';

• 把上述内容放到 nginx.conf 的 http 标签的首部，如下：

worker_processes 1;
error_log   logs/error.log;
events {
    worker_connections 1024;
}
http {
    include         mime.types;
    default_type    application/octet-stream;
    log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" "$http_x_forwarded_for"';
    sendfile        on;
    keepalived_timeout 65;
include extra/www.conf;
include extra/bbs.conf;
include extra/blog.conf;
include extra/statu.conf;
}

• 然后在每个虚拟主机里进行配置，使其使用上述格式记录用户访问日志。

[root@ylt001 conf]# cat extra/www.conf
#www virtualhost by ylt
server {
    listen       80;
    server_name  www.yangyangyang.org yangyangyang.org;
    location / {
        root   html/www;
        index  index.html index.htm;
    }
}

• 检查语法，重新加载配置

[root@ylt001 conf]# ../sbin/nginx
[root@ylt001 conf]# ../sbin/nginx -s reload

• 用浏览器模拟用户访问生成日志，在服务器上查看日志结果

[root@ylt001 conf]# curl www.yangyangyang.org
www.yangyangyang.org
[root@ylt001 conf]# ll ../logs/access_www.log
-rw-r--r-- 1 root root 3595 Sep 19 14:47 ../logs/access_www.log
[root@ylt001 conf]# tail -1 ../logs/access_www.log

• 使用谷歌浏览器模拟用户访问生成日志

[root@ylt001 conf]# tail -1 ../logs/access_www.log

4. Nginx 访问日志轮询切割

• 按天切割的脚本文件如下：

[root@ylt001 conf]# cat /server/script/cut_nginx_log.sh
#!/bin/sh
Dateformat=`date +%Y%m%d`
Basedir="/application/nginx"
Nginxlogdir="$Basedir/logs"
Logname="access_www"
[ -d $Nginxlogdir ] && cd $Nginxlogdir || exit 1
[ -f ${Logname}.log ] || exit 1
/bin/mv ${Logname}.log ${Dateformat}_${Logname}.log
$Basedir/sbin/nginx -s reload

注：脚本实现切割 Nginx 日志的思想为将正在写入的 Nginx 日志（access_www.log）改名为带日期的格式文件（20180919_access_www.log），然后平滑重新加载 Nginx，生成新的 Nginx 日志（access_www.log）。

• 通过定时任务实现每天 00 点整定时执行 /server/script/cut_nginx_log.sh 切割日志

[root@ylt001 logs]# cat >>/var/spool/cron/root <<EOF
>#cut nginx access log by ylt001
>00 00 * * * /bin/sh /server/script/cut_nginx_log.sh >/dev/null 2>&1
>EOF

• 最终的日志切割效果如下

[root@ylt001 ~]# cd /application/nginx/logs
[root@ylt001 logs]# ll
[root@ylt001 ~]# /bin/sh /server/script/cut_nginx_log.sh
[root@ylt001 ~]# cd /application/nginx/logs
[root@ylt001 logs]# ll
total 56
-rw-r--r-- 1 root root  4417 Sep 19 15:58 20180919_access_www.log
-rw-r--r-- 1 root root   105 Sep 19 15:30 access_bbs.log
-rw-r--r-- 1 root root   189 Sep 19 14:46 access_blog.log
-rw-r--r-- 1 root root 15520 Sep 18 21:38 access.log
-rw-r--r-- 1 root root     0 Sep 19 16:26 access_www.log
-rw-r--r-- 1 root root 17912 Sep 19 16:26 error.log