Files
buryan-infra/ops/maintenance/cleanup-old-containers.sh
root 739d61869b Пул освобождён на 35 ГБ (TRIM), добавлено зеркало образов, найден CT 111
без интернета

ГЛАВНОЕ ОТКРЫТИЕ: тонкий пул был заполнен на 80,5%, снимки не создавались,
обновления стояли. Оказалось — место не «занято данными», а ЗАВИСЛО:
LVM не знает об удалённых внутри контейнеров файлах, пока ей не передадут
TRIM.
После pct fstrim по всем контейнерам: пул 80,47% -> 70,29%, около 35 ГБ
освободилось. Где висело больше всего: CT 113 — 93,3 ГБ, CT 155 — 43 ГБ,
CT 105 — 13,7 ГБ, CT 115 — 11,7 ГБ (тот самый openclaw).
Поставлен в расписание: еженедельно, /etc/cron.d/buryan-trim. Без этого
пул снова забьётся невидимым мусором.

ЗЕРКАЛО РЕЕСТРА: скачивание образов из дома нестабильно (Docker Hub то
отвечает, то висит по таймауту). Во все 26 контейнеров добавлено зеркало
mirror.gcr.io (официальное зеркало Docker Hub). Docker сначала пробует
основной реестр, зеркало — только при недоступности. CT 108 заработал.

ЦЕНА МОЕЙ ОШИБКИ В ДИАГНОСТИКЕ: я решил, что адреса 100.51.15.102 и
100.60.105.131 — это Tailscale. Проверил через 1.1.1.1 — те же адреса,
это собственный CDN Docker Hub. Догадку отбросил, причину нашёл дальше.

CT 111 БЕЗ ИНТЕРНЕТА. Из контейнера доступны все хосты локальной сети,
кроме шлюза 192.168.1.1. Проверено и исключено: маршруты, ARP, политики
маршрутизации, правила по IP/MAC/интерфейсу на хосте, firewall Proxmox
(отключён), цепочки Tailscale (мостовой трафик минует iptables), второй
адрес на том же интерфейсе (тоже нет связи) — значит дело не в адресе.
Вывод: блокирует роутер, а роутер по решению владельца не трогаем.
Документ с вариантами решения: docs/CT111-NO-INTERNET.md
2026-10-17 16:02:14 +03:00

97 lines
4.9 KiB
Bash
Executable File

#!/bin/bash
# ============================================================
# cleanup-old-containers.sh — убираю остатки от обновлений
# ============================================================
# ЗАДАЧА 1.12. После обновлений 14.10 остались контейнеры с именами
# вида *-old-20261014-*. Часть из них:
# * в состоянии Exited — просто мусор;
# * в состоянии Restarting — ПЕТЛЯ перезапуска, жрёт ресурсы и пишет
# журналы (нашёл navidrome-old, который крутится вхолостую).
#
# ВАЖНОЕ ПРАВИЛО: удаляю ТОЛЬКО Exited и Restarting. Контейнеры в
# состоянии Up не трогаю, даже если имя содержит «old»: в CT 115
# openclaw-old — ЭТО РАБОТАЮЩИЙ экземпляр (основной падает, а старый
# работает). Удали его — и сервис пропадёт.
#
# Данные не затрагиваются: удаление контейнера не удаляет тома и папки.
# ============================================================
set -uo pipefail
echo "=== 1. ЧТО ЕСТЬ (все *-old-* контейнеры) ==="
printf ' %-6s %-38s %s\n' "CT" "контейнер" "состояние"
echo " ----------------------------------------------------------------------"
TOTAL=0
for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}'); do
has=$(pct exec "$ct" -- bash -c 'command -v docker >/dev/null 2>&1 && echo да' 2>/dev/null | tr -d '\r')
[ "$has" = "да" ] || continue
pct exec "$ct" -- bash -c 'docker ps -a --format "{{.Names}}|{{.Status}}" 2>/dev/null | grep -- "-old-" | head -8' 2>/dev/null \
| tr -d '\r' | while IFS='|' read -r name status; do
[ -z "$name" ] && continue
printf ' %-6s %-38s %s\n' "$ct" "$name" "$status"
done
n=$(pct exec "$ct" -- bash -c 'docker ps -a --format "{{.Names}}" 2>/dev/null | grep -c -- "-old-"' 2>/dev/null | tr -d '\r')
TOTAL=$((TOTAL + ${n:-0}))
done
echo " ----------------------------------------------------------------------"
echo " всего остатков: $TOTAL"
echo
echo "=== 2. УБИРАЮ ТОЛЬКО EXITED И RESTARTING ==="
REMOVED=0
KEPT=0
for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}'); do
has=$(pct exec "$ct" -- bash -c 'command -v docker >/dev/null 2>&1 && echo да' 2>/dev/null | tr -d '\r')
[ "$has" = "да" ] || continue
# беру имена и состояния
list=$(pct exec "$ct" -- bash -c 'docker ps -a --format "{{.Names}}|{{.State}}" 2>/dev/null | grep -- "-old-"' 2>/dev/null | tr -d '\r')
[ -z "$list" ] && continue
echo "$list" | while IFS='|' read -r name state; do
[ -z "$name" ] && continue
case "$state" in
exited|restarting|created|dead)
pct exec "$ct" -- bash -c "docker rm -f '$name' >/dev/null 2>&1 && echo ' CT $ct: удалён $name ($state)'" 2>/dev/null | sed 's/^/ /'
;;
running)
echo " CT $ct: ОСТАВЛЕН $name (работает — не трогаю)" | sed 's/^/ /'
;;
*)
echo " CT $ct: $name в состоянии '$state' — не трогаю" | sed 's/^/ /'
;;
esac
done
done
echo
echo "=== 3. ЧТО ОСТАЛОСЬ ==="
for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}'); do
has=$(pct exec "$ct" -- bash -c 'command -v docker >/dev/null 2>&1 && echo да' 2>/dev/null | tr -d '\r')
[ "$has" = "да" ] || continue
pct exec "$ct" -- bash -c 'docker ps -a --format "{{.Names}}|{{.Status}}" 2>/dev/null | grep -- "-old-" | head -4' 2>/dev/null \
| tr -d '\r' | while IFS='|' read -r name status; do
[ -z "$name" ] && continue
printf ' %-6s %-38s %s\n' "$ct" "$name" "$status"
done
done
echo
echo "=== 4. ПЕТЛЯ ПЕРЕЗАПУСКА ОСТАЛАСЬ ГДЕ-ТО? ==="
found=0
for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}'); do
has=$(pct exec "$ct" -- bash -c 'command -v docker >/dev/null 2>&1 && echo да' 2>/dev/null | tr -d '\r')
[ "$has" = "да" ] || continue
bad=$(pct exec "$ct" -- bash -c 'docker ps -a --format "{{.Names}}|{{.Status}}" 2>/dev/null | grep -iE "restarting"' 2>/dev/null | tr -d '\r')
if [ -n "$bad" ]; then
echo " CT $ct:"; echo "$bad" | sed 's/^/ /'; found=$((found+1))
fi
done
[ "$found" -eq 0 ] && echo " петель перезапуска нет"
echo
echo "=== 5. СЛУЖБЫ ЖИВЫ (выборочно) ==="
for ct in 108 115 116 125 140; do
n=$(pct exec "$ct" -- bash -c 'docker ps -q 2>/dev/null | wc -l' 2>/dev/null | tr -d '\r')
echo " CT $ct: запущено контейнеров ${n:-?}"
done