Files

4.7 KiB
Raw Permalink Blame History

Учения восстановления баз (автоматические)

Что делает

Таймер hub-restore-drill.timer, 3-го числа в 05:00 запускает /opt/hub-core/restore_drill.py:

  1. Берёт самый свежий дамп каждой базы.
  2. Создаёт черновую базу (<имя>_drill) на том же сервере.
  3. Заливает дамп, считает таблицы и ошибки.
  4. Удаляет черновую базу — рабочие не трогаются.

Если хоть одна база не восстановилась — уведомление с пометкой high.

Результат прогона 22.10

учения восстановления: 4/4
  ✅ netbox:    таблиц 208, ошибок 0
  ✅ authentik: таблиц 165, ошибок 0
  ✅ monica:    таблиц  95, ошибок 0
  ✅ nextcloud: таблиц 204, ошибок 0
  ✅ docmost:   таблиц  48, ошибок 0

Отчёт: /var/lib/hub-agents/journal/YYYY-MM-DD-restore-drill.json.

Ловушки (все пойманы на практике)

  1. Postgres в контейнере Authentik: переменная POSTGRES_USER содержит authentik_user, но такой роли нет — рабочая роль называется authentik. Проверять select current_user.
  2. В контейнере postgres нет роли postgres — суперпользователь задаётся при инициализации и может называться иначе.
  3. MariaDB: -p$VAR внутри pct exec ... sh -c не раскрывается — пароль нужно подставлять литералом, читая его из docker inspect.
  4. Права: пользователь БД может не иметь права CREATE DATABASE (Monica, Nextcloud) — создавать черновую базу надо под root.
  5. Подсчёт таблиц: кавычки в SQL внутри вложенных sh -c ломаются; надёжнее запускать psql/mariadb с -c и двойными кавычками вокруг всего запроса.

Ручной прогон

/opt/music-tools/venv/bin/python /opt/hub-core/restore_drill.py

Учения по конфигам (22.10, 05:50)

Развернул последний архив конфигов во временный каталог и проверил читаемость вложенных архивов.

архив: configs-20261022-0532.tar.gz (244 МБ)
распаковано: 121 файл
вложенных .tgz: 62, битых 0

Ключевые цели на месте:

Файл Есть
homeassistant-config.tgz ✅ (16 yaml внутри)
gitea-conf.tgz ✅
grocy-config.tgz ✅
memos-data.tgz ✅
beszel-data.tgz ✅
vikunja-db.tgz ✅
docmost-data.tgz ✅

Вывод: архив конфигов не только создаётся, но и разворачивается целиком, все вложенные архивы читаются.


Учения: восстановление целого гостя (23.10, 12:25)

Проверен последний непроверенный путь — разворот контейнера из архива.

архив: vzdump-lxc-161-2026_10_23-02_07_17.tar.zst (224 МБ)
команда: pct restore 251 <архив> --storage local-lvm --hostname drill-restore
результат: 756 МБ прочитано (547 МБ/с), конфиг слит
запуск: running, hostname=drill-restore, файловая система читается
удаление: pct destroy 251 → том освобождён
пул после: 76.69% (как до учений)

Вывод: архив vzdump не только создаётся и проходит zstd -t, но и разворачивается в работающий контейнер. Рабочие гости не тронуты — учения шли на отдельном ID 251.

Сводка всех учений

Учения Результат
Дампы баз (5) ✅ 5/5, таблицы совпадают
Архив конфигов ✅ 350 файлов, 62 вложенных архива
Целый гость из vzdump ✅ запустился, данные на месте
Синхронизация сертификатов ✅ принудительное обновление дошло до дома
Целостность (58 файлов) ✅ 0 битых