Files
buryan-infra/ops/hub-core/lxc_verify.sh
T
buryan-agent 6d843b0c60 Проверка восстановления контейнера + контроль заполненности хранилищ
lxc_verify.sh (воскресенье 05:00): берёт самый маленький свежий архив,
разворачивает в свободный CT, запускает без сети, проверяет hostname и ОС,
удаляет тестовый контейнер.

Проверено: архив 555M развернулся за 4 с, контейнер поднялся (Ubuntu 22.04,
hostname headscale-lxc), затем удалён.

Найдено: thin pool local-lvm заполнен на 82% — восстановление туда не
проходит, поэтому тест использует хранилище local. Кандидат на очистку —
снапшот vm-115 на 25 ГБ от 14.10 (не удалял, это точка отката).

В сверку добавлен контроль хранилищ: 80% и выше — проблема с уведомлением.
Сразу поймала local-lvm 82%.
2026-10-19 20:38:00 +03:00

80 lines
3.1 KiB
Bash
Executable File
Raw Blame History

This file contains ambiguous Unicode characters
This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.
#!/bin/bash
# ============================================================
# ПРОВЕРКА ВОССТАНОВЛЕНИЯ КОНТЕЙНЕРА
# Берём самый маленький свежий архив, разворачиваем в свободный ID,
# запускаем без сети, проверяем что система жива, удаляем.
# ============================================================
set -uo pipefail
ARCHIVE=$(ls -1S /mnt/backups/dump/vzdump-lxc-*.tar.zst 2>/dev/null | tail -1)
[ -z "$ARCHIVE" ] && { echo "нет архивов"; exit 1; }
TEST_ID=""
for id in 130 131 132; do
pct status "$id" >/dev/null 2>&1 || { TEST_ID=$id; break; }
done
[ -z "$TEST_ID" ] && { echo "нет свободного ID"; exit 1; }
echo "=== ПЛАН ==="
echo " архив: $(basename "$ARCHIVE") ($(du -h "$ARCHIVE" | cut -f1))"
echo " целевой CT: $TEST_ID"
echo " хранилище: local (диск), сеть выключена"
echo
echo "=== 1. ВОССТАНОВЛЕНИЕ ==="
START=$(date +%s)
pct restore "$TEST_ID" "$ARCHIVE" --storage local --rootfs local:4 --unprivileged 1 \
--net0 name=eth0,bridge=vmbr0,link_down=1 2>&1 | tail -3 | sed 's/^/ /'
CODE=${PIPESTATUS[0]}
TOOK=$(( $(date +%s) - START ))
echo " время: ${TOOK} с (код $CODE)"
if [ "$CODE" -ne 0 ]; then
echo "ИТОГ: восстановление не удалось"
pct destroy "$TEST_ID" --purge >/dev/null 2>&1
exit 1
fi
echo
echo "=== 2. ЗАПУСК ==="
pct start "$TEST_ID" 2>&1 | tail -2 | sed 's/^/ /'
sleep 20
STATUS=$(pct status "$TEST_ID" 2>/dev/null | awk '{print $2}')
echo " статус: $STATUS"
echo
echo "=== 3. ПРОВЕРКА ВНУТРИ ==="
HOST=$(pct exec "$TEST_ID" -- hostname 2>/dev/null | tr -d '\r')
OS=$(pct exec "$TEST_ID" -- bash -c "grep PRETTY_NAME /etc/os-release 2>/dev/null | cut -d= -f2" 2>/dev/null | tr -d '"' | tr -d '\r')
FILES=$(pct exec "$TEST_ID" -- bash -c "ls /etc | wc -l" 2>/dev/null | tr -d '\r')
echo " hostname: ${HOST:-не прочитался}"
echo " система: ${OS:-не прочиталась}"
echo " файлов в /etc: ${FILES:-?}"
OK=1
[ "$STATUS" = "running" ] || OK=0
[ -n "$HOST" ] || OK=0
echo
echo "=== 4. УБОРКА ==="
pct stop "$TEST_ID" >/dev/null 2>&1
pct destroy "$TEST_ID" --purge >/dev/null 2>&1
pct status "$TEST_ID" >/dev/null 2>&1 && echo " контейнер не удалился" || echo " тестовый контейнер удалён"
echo
if [ "$OK" -eq 1 ]; then
echo "ИТОГ: контейнер восстанавливается и запускается"
TYPE=backup.done
else
echo "ИТОГ: есть проблемы"
TYPE=backup.failed
fi
DETAIL="$(basename "$ARCHIVE") | ${TOOK} с | ${OS:-неизвестно}"
BODY=$(printf '{"source":"lxc-verify","type":"%s","entity":{"kind":"бэкап","key":"lxc","title":"Контейнеры"},"payload":{"detail":"%s"}}' \
"$TYPE" "$DETAIL")
curl -s -o /dev/null --max-time 15 -X POST -H 'Content-Type: application/json' \
-d "$BODY" http://127.0.0.1:9120/event 2>/dev/null
exit $((1 - OK))