diff --git a/ops/scripts/cleanup_stale_snapshots.py b/ops/scripts/cleanup_stale_snapshots.py new file mode 100755 index 0000000..619d174 --- /dev/null +++ b/ops/scripts/cleanup_stale_snapshots.py @@ -0,0 +1,100 @@ +#!/usr/bin/env python3 +# ============================================================ +# cleanup_stale_snapshots.sh — уборка следов обновлений +# ============================================================ +# Зачем: 14.10.2026 выяснилось, что система обновлений снимала снимок +# контейнера перед обновлением и НИКОГДА его не удаляла. Так накопились +# снимки на 14 ГБ, пул томов дошёл до 80,65%, и создание новых томов +# прекратилось. Резервные копии при этом падали две недели. +# +# Сама причина устранена — исполнитель теперь удаляет снимок за собой. +# Но если он упадёт между началом и уборкой, снимок останется навсегда, +# и никто этого не заметит. Этот скрипт — страховка. +# +# Что удаляет: +# * снимки контейнеров с именами pre-update-* и pre-compose-* старше N суток; +# * остановленные контейнеры Docker с именами *-old-<дата> старше N суток. +# +# Запуск по расписанию: ежедневно. Порог возраста: CLEANUP_MAX_AGE_DAYS. +# ============================================================ +import os +import re +import subprocess +import sys +from datetime import datetime + +MAX_AGE_DAYS = int(os.getenv("CLEANUP_MAX_AGE_DAYS", "3")) +SNAP_RE = re.compile(r"^(pre-update|pre-compose)-(\d{8})-(\d{6})$") +CONT_RE = re.compile(r"-old-(\d{8})-(\d{6})$") + + +def run(cmd, timeout=60): + try: + return subprocess.run(cmd, capture_output=True, text=True, + timeout=timeout).stdout + except Exception: + return "" + + +def age_days(stamp): + """Возраст по метке вида 20261014-163407.""" + try: + when = datetime.strptime(stamp, "%Y%m%d-%H%M%S") + except ValueError: + return None + return (datetime.now() - when).days + + +def guests(): + out = run(["pct", "list"]) + for line in out.splitlines()[1:]: + parts = line.split() + if parts: + yield parts[0] + + +def main(): + removed_snap = 0 + removed_cont = 0 + + for cid in guests(): + # --- снимки от обновлений --- + listing = run(["pct", "listsnapshot", cid]) + for match in SNAP_RE.finditer(listing): + name = match.group(0) + days = age_days(f"{match.group(2)}-{match.group(3)}") + if days is None or days < MAX_AGE_DAYS: + continue + if run(["pct", "delsnapshot", cid, name]): + print(f"CT {cid}: удалён снимок {name} (возраст {days} дн.)") + removed_snap += 1 + + # --- остановленные старые контейнеры --- + state = run(["pct", "status", cid]).strip() + if "running" not in state: + continue + containers = run(["pct", "exec", cid, "--", "docker", "ps", "-a", + "--format", "{{.Names}}|{{.State}}"]) + for line in containers.splitlines(): + if "|" not in line: + continue + name, cstate = line.split("|", 1) + if cstate.strip() == "running": + continue + match = CONT_RE.search(name) + if not match: + continue + days = age_days(f"{match.group(1)}-{match.group(2)}") + if days is None or days < MAX_AGE_DAYS: + continue + run(["pct", "exec", cid, "--", "docker", "rm", name]) + print(f"CT {cid}: удалён старый контейнер {name} (возраст {days} дн.)") + removed_cont += 1 + + print(f"[{datetime.now().isoformat()}] убрано снимков: {removed_snap}, " + f"контейнеров: {removed_cont}") + return 0 + + +if __name__ == "__main__": + sys.exit(main())