lxc_verify.sh (воскресенье 05:00): берёт самый маленький свежий архив, разворачивает в свободный CT, запускает без сети, проверяет hostname и ОС, удаляет тестовый контейнер. Проверено: архив 555M развернулся за 4 с, контейнер поднялся (Ubuntu 22.04, hostname headscale-lxc), затем удалён. Найдено: thin pool local-lvm заполнен на 82% — восстановление туда не проходит, поэтому тест использует хранилище local. Кандидат на очистку — снапшот vm-115 на 25 ГБ от 14.10 (не удалял, это точка отката). В сверку добавлен контроль хранилищ: 80% и выше — проблема с уведомлением. Сразу поймала local-lvm 82%.
80 lines
3.1 KiB
Bash
Executable File
80 lines
3.1 KiB
Bash
Executable File
#!/bin/bash
|
||
# ============================================================
|
||
# ПРОВЕРКА ВОССТАНОВЛЕНИЯ КОНТЕЙНЕРА
|
||
# Берём самый маленький свежий архив, разворачиваем в свободный ID,
|
||
# запускаем без сети, проверяем что система жива, удаляем.
|
||
# ============================================================
|
||
set -uo pipefail
|
||
|
||
ARCHIVE=$(ls -1S /mnt/backups/dump/vzdump-lxc-*.tar.zst 2>/dev/null | tail -1)
|
||
[ -z "$ARCHIVE" ] && { echo "нет архивов"; exit 1; }
|
||
|
||
TEST_ID=""
|
||
for id in 130 131 132; do
|
||
pct status "$id" >/dev/null 2>&1 || { TEST_ID=$id; break; }
|
||
done
|
||
[ -z "$TEST_ID" ] && { echo "нет свободного ID"; exit 1; }
|
||
|
||
echo "=== ПЛАН ==="
|
||
echo " архив: $(basename "$ARCHIVE") ($(du -h "$ARCHIVE" | cut -f1))"
|
||
echo " целевой CT: $TEST_ID"
|
||
echo " хранилище: local (диск), сеть выключена"
|
||
|
||
echo
|
||
echo "=== 1. ВОССТАНОВЛЕНИЕ ==="
|
||
START=$(date +%s)
|
||
pct restore "$TEST_ID" "$ARCHIVE" --storage local --rootfs local:4 --unprivileged 1 \
|
||
--net0 name=eth0,bridge=vmbr0,link_down=1 2>&1 | tail -3 | sed 's/^/ /'
|
||
CODE=${PIPESTATUS[0]}
|
||
TOOK=$(( $(date +%s) - START ))
|
||
echo " время: ${TOOK} с (код $CODE)"
|
||
|
||
if [ "$CODE" -ne 0 ]; then
|
||
echo "ИТОГ: восстановление не удалось"
|
||
pct destroy "$TEST_ID" --purge >/dev/null 2>&1
|
||
exit 1
|
||
fi
|
||
|
||
echo
|
||
echo "=== 2. ЗАПУСК ==="
|
||
pct start "$TEST_ID" 2>&1 | tail -2 | sed 's/^/ /'
|
||
sleep 20
|
||
STATUS=$(pct status "$TEST_ID" 2>/dev/null | awk '{print $2}')
|
||
echo " статус: $STATUS"
|
||
|
||
echo
|
||
echo "=== 3. ПРОВЕРКА ВНУТРИ ==="
|
||
HOST=$(pct exec "$TEST_ID" -- hostname 2>/dev/null | tr -d '\r')
|
||
OS=$(pct exec "$TEST_ID" -- bash -c "grep PRETTY_NAME /etc/os-release 2>/dev/null | cut -d= -f2" 2>/dev/null | tr -d '"' | tr -d '\r')
|
||
FILES=$(pct exec "$TEST_ID" -- bash -c "ls /etc | wc -l" 2>/dev/null | tr -d '\r')
|
||
echo " hostname: ${HOST:-не прочитался}"
|
||
echo " система: ${OS:-не прочиталась}"
|
||
echo " файлов в /etc: ${FILES:-?}"
|
||
|
||
OK=1
|
||
[ "$STATUS" = "running" ] || OK=0
|
||
[ -n "$HOST" ] || OK=0
|
||
|
||
echo
|
||
echo "=== 4. УБОРКА ==="
|
||
pct stop "$TEST_ID" >/dev/null 2>&1
|
||
pct destroy "$TEST_ID" --purge >/dev/null 2>&1
|
||
pct status "$TEST_ID" >/dev/null 2>&1 && echo " контейнер не удалился" || echo " тестовый контейнер удалён"
|
||
|
||
echo
|
||
if [ "$OK" -eq 1 ]; then
|
||
echo "ИТОГ: контейнер восстанавливается и запускается"
|
||
TYPE=backup.done
|
||
else
|
||
echo "ИТОГ: есть проблемы"
|
||
TYPE=backup.failed
|
||
fi
|
||
|
||
DETAIL="$(basename "$ARCHIVE") | ${TOOK} с | ${OS:-неизвестно}"
|
||
BODY=$(printf '{"source":"lxc-verify","type":"%s","entity":{"kind":"бэкап","key":"lxc","title":"Контейнеры"},"payload":{"detail":"%s"}}' \
|
||
"$TYPE" "$DETAIL")
|
||
curl -s -o /dev/null --max-time 15 -X POST -H 'Content-Type: application/json' \
|
||
-d "$BODY" http://127.0.0.1:9120/event 2>/dev/null
|
||
|
||
exit $((1 - OK))
|