用 Bash Script 自動清理伺服器舊日誌

用 Bash Script 自動清理伺服器舊日誌,慳返成百 GB 空間 你部伺服器行咗幾個月,突然有一日收到警報:「disk usage 95%」。入去睇嚇,發現成堆日誌檔堆到一地都係,最舊嗰啲仲要係半年前嘅嘢,根本冇人睇過。 今次同大家講嚇點樣用一個簡單嘅 Bash script,自動清理過期日誌、壓縮大檔、仲要識得留返近期檔案唔好誤刪。成個過程零成本,唔使裝任何第三方工具。 點解要管理日誌? ...

用 Bash Script 自動清理伺服器舊日誌,慳返成百 GB 空間

你部伺服器行咗幾個月,突然有一日收到警報:「disk usage 95%」。入去睇嚇,發現成堆日誌檔堆到一地都係,最舊嗰啲仲要係半年前嘅嘢,根本冇人睇過。

今次同大家講嚇點樣用一個簡單嘅 Bash script,自動清理過期日誌、壓縮大檔、仲要識得留返近期檔案唔好誤刪。成個過程零成本,唔使裝任何第三方工具。

點解要管理日誌?

日誌(log)本身係好嘢,出事嘅時候靠佢揾線索。但問題係,大部分日誌寫完就冇人理,純粹喺度食位。常見幾個災難源頭:

– Web server(Nginx / Apache)嘅 access log,高流量網站一日可以寫幾 GB
– 應用程式 唔識做 log rotation,一個檔無限增大
– 資料庫(MySQL / PostgreSQL)嘅 slow query log、binlog 堆積
– Docker 容器日誌冇設上限,`json.log` 越嚟越肥

與其每次手動 `rm`,不如寫個 script 定時行,等系統自己打理。

Step 1:認清邊啲日誌可以清

清之前一定要諗清楚:呢個檔出事嗰陣用唔用得返?

安全做法係分三類:

1. 即時刪除 — 超過 30 日嘅壓縮日誌(`.gz`、`.log.1` 呢啲)
2. 壓縮保留 — 7 至 30 日內嘅原始日誌,壓成 gzip 慳位但留底
3. 永不觸碰 — 近 7 日嘅日誌,因為排錯通常都係睇最近幾日

Step 2:寫個清理 script

下面係一個完整例子,用 `find` 做主力:

#!/bin/bash

log_cleanup.sh - 自動清理 + 壓縮舊日誌

LOG_DIR="/var/log/myapp" RETENTION_DAYS=30 # 超過呢個日數就刪 COMPRESS_DAYS=7 # 超過呢個日數就壓縮 echo "==> 開始清理日誌:$(date)"

1) 刪除超過 30 日嘅壓縮檔(.gz / .1 / .2 等)

find "$LOG_DIR" -type f \( -name "*.gz" -o -name "*.log.*" \) \ -mtime +$RETENTION_DAYS -delete

2) 壓縮 7 日以上、30 日以內嘅原始 .log

find "$LOG_DIR" -type f -name "*.log" -mtime +$COMPRESS_DAYS \ ! -name "*.gz" -exec gzip -9 {} \;

3) 清空超大但仲活躍嘅日誌(保留最後 10000 行)

for f in "$LOG_DIR"/access.log "$LOG_DIR"/error.log; do if [ -f "$f" ]; then tail -n 10000 "$f" > "$f.tmp" && mv "$f.tmp" "$f" fi done echo "==> 完成,剩餘空間:" df -h "$LOG_DIR" | tail -1

關鍵位逐個解釋:

– `-mtime +30` 代表「修改時間超過 30 日」,係刪舊檔嘅鐵則
– `! -name “*.gz”` 防止將已經壓縮過嘅檔再壓一次
– `tail -n 10000` 用嚟「截尾」活躍日誌,唔會因為檔太大而失控,又保住最近記錄

Step 3:加 logrotate(更標準嘅做法)

其實 Linux 本身有個工具叫 `logrotate`,比手寫 script 更靠譜。整一個 config:

# /etc/logrotate.d/myapp
/var/log/myapp/*.log {
    daily
    rotate 14
    compress
    delaycompress
    missingok
    notifempty
    create 640 myuser mygroup
    maxsize 500M
}

呢個 config 意思係:每日轉一次,保留 14 份,壓縮但延遲一日先壓(等個 app 寫完),超過 500MB 就即刻轉。

建議:優先揀 `logrotate`,因為佢處理咗好多邊界情況(檔案鎖、signal 通知等)。手寫 script 就當係 logrotate 管唔到嘅地方先出動。

Step 4:定時執行

將 script 放入 cron,每日凌晨三點行一次:

# crontab -e
0 3 * * * /usr/local/bin/log_cleanup.sh >> /var/log/cleanup.log 2>&1

幾個容易中伏嘅位

1. 唔好 `rm` 錯 directory — 永遠用 `find … -type f`,唔好用 `rm -rf “$LOG_DIR/*”` 呢類高危寫法
2. 先測試再上線 — 將 `-delete` 換成 `-print` 行一次,睇嚇會刪啲乜
3. 應用程式要配合 — 如果你個 app 死咬住個 file handle 唔放,`mv` 咗之後佢仲係寫緊舊 inode,記得要用 logrotate 嘅 `copytruncate` 或 send signal

總結

管理日誌講到底就係三個字:留、壓、刪。近期嘅留低,中期嘅壓縮,過期嘅刪走。用 `logrotate` 加一個輕量 cron job,就可以令部機長期保持健康,唔使再半夜俾 disk full 警報嘈醒。

🔗 參考資料:NVD NIST 漏洞資料庫

下次如果見到伺服器空間緊張,唔好即刻諗住加 hard disk,先睇嚇啲日誌有冇得清 —— 分分鐘慳返你成百 GB。

#server #IT教學 #安全 #技術分享 #Linux

用 Bash Script 自動清理伺服器舊日誌 - 文章重點速覽 infographic