日志备份如何定期执行

本文目录导读：

1. 核心思路：日志轮转（Rotation） + 定期备份
2. 关键注意事项

日志备份的定期执行通常依赖于操作系统自带的调度工具（如 Linux 的 cron 或 Windows 的“任务计划程序”）结合日志轮转工具（如 logrotate）来实现,以下是针对不同环境的详细方案：

核心思路：日志轮转（Rotation） + 定期备份

不仅仅是“复制”，通常需要先切割（轮转）再备份,以防文件被占用且清理旧日志。

使用 logrotate（Linux 最推荐）

logrotate 是 Linux 下管理日志文件的标准工具，可以自动完成压缩、删除旧日志、创建新日志文件、通知进程重载等操作。

典型配置（/etc/logrotate.d/myapp）：

/var/log/myapp/*.log {
    daily                     # 每天执行一次轮转
    rotate 30                 # 保留最近30份日志
    compress                  # 轮转后压缩（生成.gz）
    delaycompress             # 延迟一次压缩，避免和正在写入的进程冲突
    missingok                 # 如果日志不存在，不报错
    notifempty                # 如果日志为空，不轮转
    dateext                   # 用日期作为轮转文件后缀（如 access.log-2025-01-27）
    sharedscripts             # 所有日志匹配后执行一次脚本
    postrotate
        # 通知应用重新打开日志文件（如 Nginx、Apache）
        systemctl reload myapp.service 2>/dev/null || true
        # 这里是触发备份的命令（如复制到远程备份目录）
        cp /var/log/myapp/myapp.log-* /backup/logs/ 2>/dev/null
    endscript
}

• 自动执行：系统每天会运行 cron 脚本 /etc/cron.daily/logrotate,因此无需额外配置定时任务。
• 手动测试：sudo logrotate -vf /etc/logrotate.d/myapp

使用 cron + 自定义备份脚本（灵活但需手动管理）

如果日志生成方式特殊（如单一大日志文件）或需要更复杂的备份逻辑（如异地、增量备份），可以编写 Shell 脚本并用 cron 调度。

备份脚本示例（/usr/local/bin/backup_logs.sh）：

#!/bin/bash
LOG_DIR="/var/log/myapp"
BACKUP_DIR="/backup/logs/$(date +%Y%m%d)"
RETENTION_DAYS=60
# 创建备份目录
mkdir -p "$BACKUP_DIR"
# 轮转文件：将当前日志重命名为带时间戳的文件，并创建新空文件
for log_file in "$LOG_DIR"/*.log; do
    if [ -f "$log_file" ]; then
        mv "$log_file" "${BACKUP_DIR}/$(basename $log_file)-$(date +%Y%m%d%H%M%S)"
        touch "$log_file"                      # 创建新空日志文件
    fi
done
# 压缩备份目录中的旧日志
gzip "$BACKUP_DIR"/*.log-* &
# 通知应用重载（如 Java 应用需发送 USR1 信号）
pkill -USR1 -f "myapp" || true
# 删除超过60天的旧备份（保留天数）
find /backup/logs/ -type d -mtime +$RETENTION_DAYS -exec rm -rf {} \; 2>/dev/null
# 可选：上传至远程服务器（使用 rsync / scp）
# rsync -avz --delete /backup/logs/ user@remote:/remote/backup/

设置 cron：

crontab -e
# 添加以下行（每天凌晨2点执行）
0 2 * * * /usr/local/bin/backup_logs.sh >> /var/log/backup_logs_cron.log 2>&1

Windows 系统（任务计划程序 + PowerShell 脚本）

PowerShell 备份脚本（C:\Scripts\Backup-Logs.ps1）：

$source = "C:\Logs\MyApp"
$backupRoot = "D:\Backup\Logs"
$timestamp = Get-Date -Format "yyyyMMddHHmmss"
$backupDir = Join-Path $backupRoot (Get-Date -Format "yyyyMM")
$logFile = Join-Path $backupDir "backup.log"
# 创建按月备份文件夹
New-Item -ItemType Directory -Force -Path $backupDir
# 轮转并备份（复制当前日志后清空）
Get-ChildItem -Path $source -Filter "*.log" | ForEach-Object {
    $destName = "$($_.BaseName)-$timestamp$($_.Extension)"
    $destPath = Join-Path $backupDir $destName
    Copy-Item $_.FullName -Destination $destPath
    Clear-Content $_.FullName                 # 清空原日志（应用需能继续写入）
    Write-Output "$(Get-Date) : Backed up $($_.Name) to $destPath" >> $logFile
}
# 压缩备份（使用7-Zip）
& "C:\Program Files\7-Zip\7z.exe" a -tzip "$backupDir\$timestamp.zip" $backupDir\*$timestamp*.log
Remove-Item $backupDir\*$timestamp*.log
# 删除30天前的备份（可选）
Get-ChildItem $backupRoot -Recurse -Directory | Where-Object { $_.LastWriteTime -lt (Get-Date).AddDays(-30) } | Remove-Item -Recurse -Force

设置任务计划程序：

1. 打开“任务计划程序” -> 创建基本任务。
2. 触发器：每天，开始时间（如 03:00）。
3. 操作：启动程序，程序填 powershell.exe，参数填 -ExecutionPolicy Bypass -File "C:\Scripts\Backup-Logs.ps1"。
4. 勾选“不管用户是否登录都要运行”。

使用 ELK / EFK 等集中式日志系统（企业级）

如果日志量大且需要保留长期历史，建议接入分布式日志系统（如 Elasticsearch + Logstash, Fluentd, Graylog）：

• Filebeat 采集日志并发送到 Elasticsearch。
• Logstash 配置日期索引（如 logstash-%{+YYYY.MM.dd}）。
• Elasticsearch 通过 Index Lifecycle Management (ILM) 策略自动管理生命周期：
  • 0-30天：热节点。
  • 30-90天：温节点（降低副本）。
  • 90-365天：冷节点（只读）。
  • 365天+：删除。
• 备份到对象存储：使用快照功能（snapshot）每天将索引备份到 S3、NFS 等。

关键注意事项

1. 开发/测试环境：使用 logrotate 配合 cron 即可。
2. 生产传统应用：logrotate + 定期复制压缩到备份目录,保留60天。
3. 微服务/容器化：容器日志通常通过 Docker 的 json-file 驱动自动轮转，或使用 Fluentd 直接发送到对象存储。
4. 合规性要求高：使用集中式日志系统（ELK）配合快照备份到异地不可变存储（如 S3 Object Lock）。

示例：快速设置每日备份到 NAS：

# 每天凌晨3点将 /var/log/myapp/ 下的.gz文件同步到NAS
0 3 * * * rsync -avz --remove-source-files /var/log/myapp/*.gz /mnt/nas/backup_logs/

根据实际环境选择最适合的方案即可。