bots_verify.sh разворачивает архив ботов во временный каталог, проверяет целостность sqlite-индекса, наличие журнала диалогов и входящих, затем отправляет backup.done/backup.failed в ядро. Расписание 03:05. Сторож расписаний дополнен двумя проверками (PG и боты). docs/BACKUPS-STATUS.md — таблица: что бэкапится, когда, куда и что из этого проверено на восстановление. Отдельно отмечено непроверенное: LXC-контейнеры, vzdump, офсайт важного. Проверено: архив ботов распаковался (4 файла), индекс ok, журнал и входящие на месте, событие backup.done записано.
77 lines
2.5 KiB
Bash
Executable File
77 lines
2.5 KiB
Bash
Executable File
#!/bin/bash
|
|
# Проверка бэкапа данных ботов: разворачиваем архив и проверяем содержимое
|
|
set -uo pipefail
|
|
|
|
SRC=/mnt/backups/hub-bots
|
|
TMP=/tmp/bots-restore-$$
|
|
LATEST=$(ls -1t "$SRC"/hub-bots-*.tar.gz 2>/dev/null | head -1)
|
|
|
|
if [ -z "$LATEST" ]; then
|
|
echo "нет архивов в $SRC"
|
|
exit 1
|
|
fi
|
|
|
|
echo "архив: $(basename "$LATEST") ($(du -h "$LATEST" | cut -f1))"
|
|
mkdir -p "$TMP"
|
|
|
|
if ! tar xzf "$LATEST" -C "$TMP" 2>/dev/null; then
|
|
echo "ОШИБКА: архив не распаковывается"
|
|
rm -rf "$TMP"
|
|
exit 1
|
|
fi
|
|
|
|
FILES=$(find "$TMP" -type f | wc -l)
|
|
echo "файлов в архиве: $FILES"
|
|
|
|
# индекс ботов — sqlite, проверяем целостность
|
|
INDEX=$(find "$TMP" -name 'index.db' | head -1)
|
|
INDEX_INFO="нет индекса"
|
|
if [ -n "$INDEX" ]; then
|
|
CHECK=$(python3 - "$INDEX" <<'PY'
|
|
import sqlite3, sys
|
|
try:
|
|
c = sqlite3.connect(sys.argv[1])
|
|
ok = c.execute("pragma integrity_check").fetchone()[0]
|
|
try:
|
|
n = c.execute("select count(*) from items").fetchone()[0]
|
|
except Exception:
|
|
n = "?"
|
|
print(f"{ok} | документов: {n}")
|
|
except Exception as e:
|
|
print(f"ошибка: {e}")
|
|
PY
|
|
)
|
|
INDEX_INFO="$CHECK"
|
|
fi
|
|
echo "индекс: $INDEX_INFO"
|
|
|
|
# журналы и входящие
|
|
DIALOG=$(find "$TMP" -name 'dialog.jsonl' | head -1)
|
|
INBOX=$(find "$TMP" -name '*.jsonl' -path '*inbox*' | head -1)
|
|
echo "журнал диалогов: $([ -n "$DIALOG" ] && echo "есть ($(wc -l < "$DIALOG") строк)" || echo "нет")"
|
|
echo "входящие: $([ -n "$INBOX" ] && echo "есть" || echo "нет")"
|
|
|
|
# итог
|
|
OK=1
|
|
[ "$FILES" -lt 1 ] && OK=0
|
|
echo "$INDEX_INFO" | grep -q '^ok' || [ "$INDEX_INFO" = "нет индекса" ] || OK=0
|
|
|
|
rm -rf "$TMP"
|
|
|
|
if [ "$OK" -eq 1 ]; then
|
|
echo "ИТОГ: восстановление в порядке"
|
|
TYPE=backup.done
|
|
TITLE="Бэкап данных ботов в порядке"
|
|
else
|
|
echo "ИТОГ: есть проблемы"
|
|
TYPE=backup.failed
|
|
TITLE="Проблема в бэкапе данных ботов"
|
|
fi
|
|
|
|
BODY=$(printf '{"source":"bots-verify","type":"%s","entity":{"kind":"бэкап","key":"bots","title":"Данные ботов"},"payload":{"detail":"%s | файлов %s | индекс: %s"}}' \
|
|
"$TYPE" "$(basename "$LATEST")" "$FILES" "$INDEX_INFO")
|
|
curl -s -o /dev/null --max-time 15 -X POST -H 'Content-Type: application/json' \
|
|
-d "$BODY" http://127.0.0.1:9120/event 2>/dev/null
|
|
|
|
exit $((1 - OK))
|