在linux系统中，如果应用程序产生了日志，就需要考虑日志的切割操作，例如根据固定的文件大小或者按日期进行切割。在编译nginx1.9.0、mysql5.7.7rc和php7后，这些服务都会产生日志，特别是nginx进程会根据nginx.conf配置文件将每条访问记录写入到access.log中。如果所有的日志都记录在同一个文件中，长时间下来会影响系统的效率。
本文介绍了如何在Linux下使用Shell脚本进行Nginx日志的切割，该脚本支持按天切割、自定义保留天数以及记录脚本执行过程和耗时。使用时需配置好应用的日志目录（Source_Log_Dir变量）和日志备份目录（Backup_Dirs变量），并通过Crontab定时任务执行该脚本。
下面是Nginx日志切割脚本nginx_log_backup.sh的具体内容，该脚本主要用于备份Nginx日志。其他如MySQL和PHP等Linux应用可以通过修改脚本中对应的日志路径来使用。该脚本已同步到博客在GitHub上创建的LNMP配置项目中，地址为：https://www.php.cn/link/27810d8aed732a494b7c10f1aaabcc8e。
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99100101
|
\#!/bin/bash# 备份Linux应用如nginx、php、mysql等的日志文件。# Crontab使用方法：00 01 * * * /mydata/backups/bak_list/nginx_log_backup.sh >/dev/null 2>&1# (c) 2015 vfhky https://typecodes.com/linux/applogsbackup.html# https://www.php.cn/link/27810d8aed732a494b7c10f1aaabcc8e/blob/master/nginx_log_backup.sh# 基础命令。TARCMD="tar -zcf"MVCMD="mv -f"FINDCMD="find"# 保留天数。NUMDAYS=40# 要备份的日志路径。可以设置为nginx日志路径、mysql日志路径等。Source_Log_Dir=/var/log/nginx# 设置要备份的日志文件类型，根据日志文件的后缀名设置。Source_Log_Files=`ls ${Source_Log_Dir}/*.log`# 设置备份路径。Backup_Dirs=${Source_Log_Dir}# 前一天的日期格式：例如20150505Previous_Date=`date -d "-1 days" +%Y%m%d`# 目标备份目录。Backup_Dir=${Backup_Dirs}/${Previous_Date}# 此Shell脚本自动生成的日志路径。Shell_Log=${Backup_Dir}/process.log# 运行命令函数。function ERROR() { echo >/dev/null && echo "`date +%H:%M:%S:%N` $@" >> ${Shell_Log} exit 1}function NOTICE() { echo >/dev/null && echo "`date +%H:%M:%S:%N` $@" >> ${Shell_Log}}function RUNCMD() { echo $@ >> ${Shell_Log} eval $@}# 检查用户输入的保留天数。通常可以删除下面的代码。if [[ ! $NUMDAYS =~ ^[0-9]+$ ]]; then ERROR "无效的保留天数$NUMDAYS!"elif [ "$NUMDAYS" -eq "0" ]; then ERROR "保留天数必须大于零!"fi# 锁定权限。umask 077# 创建备份日志目录和Shell日志。mkdir -p $Backup_Dirtouch $Shell_LogNOTICE "1开始备份。"NOTICE "2开始使用tar命令压缩日志文件。"RUNCMD "cd ${Source_Log_Dir} && ${TARCMD} ${Previous_Date}.tar.gz *.log"RC=$?if [ $RC -gt 0 ]; then ERROR "创建备份包失败！"fiNOTICE "3开始移动压缩文件到备份目录。"RUNCMD "${MVCMD} ${Previous_Date}.tar.gz ${Backup_Dir}/"RC=$?if [ $RC -gt 0 ]; then ERROR "移动压缩文件失败！"fiNOTICE "4开始清空每个日志文件。"for file in ${Source_Log_Files}do RUNCMD ">$file" RC=$? if [ $RC -gt 0 ]; then ERROR "清空每个日志文件失败！" fidoneNOTICE "5删除超过$NUMDAYS天的旧文件夹。"# ls ${Source_Log_Dir} | grep '^[0-9]{8}$' | xargs rm -rfRUNCMD "$FINDCMD ${Source_Log_Dir} -type d -name '[0-9]*[0-9]' -mtime +$NUMDAYS | xargs rm -rf"NOTICE "6备份结束。"exit 0
|
