Shell自动化实践：日志管理的极简闭环

#!/bin/bash
# 脚本名称：log_auto_clean.sh
# 功能：日志自动校验、归档、过期删除，全程无人工干预
# 版本：1.0  适配：CentOS 7+/Ubuntu 18+/Debian 10+
# 日期：2026-02-09  依赖：tar、find、touch、mkdir（系统自带）

# 核心配置参数（按需修改）
LOG_DIR="/var/log/app"          # 日志源目录
ARCHIVE_DIR="/data/log_archive" # 归档目录（建议独立磁盘）
ARCHIVE_DAYS=7                  # 日志归档阈值（天）
DELETE_DAYS=30                  # 归档删除阈值（天）
SCRIPT_LOG="/var/log/log_auto_clean_script.log" # 脚本执行日志

# 日志输出函数（带时间戳、级别）
log_info() {
    local msg="$1"
    echo "[$(date +'%Y-%m-%d %H:%M:%S')] [INFO] $msg" >> "$SCRIPT_LOG"
}

log_error() {
    local msg="$1"
    echo "[$(date +'%Y-%m-%d %H:%M:%S')] [ERROR] $msg" >> "$SCRIPT_LOG"
    exit 1 # 非0退出，便于告警捕获
}

# 目录校验与初始化（前置检查）
check_dir() {
    if [ ! -d "$LOG_DIR" ]; then
        log_error "日志源目录 $LOG_DIR 不存在，请检查配置！"
    fi
    if [ ! -d "$ARCHIVE_DIR" ]; then
        log_info "创建归档目录 $ARCHIVE_DIR ..."
        mkdir -p "$ARCHIVE_DIR" || log_error "创建归档目录失败！"
    fi
    local script_log_dir=$(dirname "$SCRIPT_LOG")
    if [ ! -w "$script_log_dir" ]; then
        log_error "脚本日志目录无写入权限！"
    fi
}

# 日志归档（核心功能）
archive_log() {
    log_info "开始归档 $ARCHIVE_DAYS 天前的.log日志"
    find "$LOG_DIR" -type f -mtime +"$ARCHIVE_DAYS" -name "*.log" | while read -r log_file; do
        if [ -f "$log_file" ]; then
            archive_file="$ARCHIVE_DIR/$(basename "$log_file")_$(date +'%Y%m%d').tar.gz"
            tar -zcf "$archive_file" "$log_file" || log_error "压缩 $log_file 失败！"
            log_info "归档成功：$log_file -> $archive_file"
            # 可选：归档后删除原日志（取消注释启用）
            # rm -f "$log_file" && log_info "已删除原日志：$log_file"
        fi
    done
    local log_count=$(find "$LOG_DIR" -type f -mtime +"$ARCHIVE_DAYS" -name "*.log" | wc -l)
    [ "$log_count" -eq 0 ] && log_info "无符合条件日志，归档跳过"
}

# 过期归档删除（核心功能）
delete_archive() {
    log_info "开始删除 $DELETE_DAYS 天前的.tar.gz归档"
    find "$ARCHIVE_DIR" -type f -mtime +"$DELETE_DAYS" -name "*.tar.gz" -exec rm -f {} \;
    log_info "过期归档删除完成"
}

# 主执行流程
main() {
    touch "$SCRIPT_LOG" || log_error "创建脚本日志失败！"
    log_info "========== 日志自动清理归档脚本（1.0）开始执行 =========="
    check_dir
    archive_log
    delete_archive
    log_info "========== 脚本执行完成，全程无异常 ==========\n"
}

# 启动脚本
main

# 1. 创建脚本目录
mkdir -p /usr/local/shell
# 2. 创建脚本并复制完整代码
vim /usr/local/shell/log_auto_clean.sh
# 3. 添加可执行权限
chmod +x /usr/local/shell/log_auto_clean.sh

# 手动执行脚本
/usr/local/shell/log_auto_clean.sh
# 查看执行日志，确认正常
tail -f /var/log/log_auto_clean_script.log

# 编辑crontab任务
crontab -e
# 添加：每天凌晨2点执行（负载最低）
0 2 * * * /usr/local/shell/log_auto_clean.sh > /dev/null 2>&1
# 重启crontab生效（CentOS/Ubuntu分别执行）
systemctl restart crond  # CentOS
systemctl restart cron   # Ubuntu/Debian

# 查看近期执行记录
tail -n 10 /var/log/log_auto_clean_script.log
# 检查crontab服务状态
systemctl status crond  # CentOS
systemctl status cron   # Ubuntu/Debian

LOG_DIRS=("/var/log/nginx" "/usr/local/tomcat/logs" "/var/log/mysql")
# archive_log函数中循环遍历数组，其余逻辑不变

# 添加-size +100M（仅归档大于100MB日志）
find "$LOG_DIR" -type f -mtime +"$ARCHIVE_DAYS" -name "*.log" -size +100M | while read -r log_file;

ALERT_EMAIL="ops@example.com"  # 运维邮箱
log_error() {
    local msg="$1"
    echo "[$(date +'%Y-%m-%d %H:%M:%S')] [ERROR] $msg" >> "$SCRIPT_LOG"
    echo "$msg" | mail -s "【告警】脚本执行失败" "$ALERT_EMAIL"
    exit 1
}

tar -zcf "$archive_file" "$log_file" || log_error "压缩失败！"
# 新增校验
if ! tar -tf "$archive_file" > /dev/null 2>&1; then
    log_error "归档包 $archive_file 损坏！"
fi