Files
buryan-infra/ops/backup/RESTORE-DRILL.md
T

2.3 KiB
Raw Blame History

Учения восстановления баз (автоматические)

Что делает

Таймер hub-restore-drill.timer, 3-го числа в 05:00 запускает /opt/hub-core/restore_drill.py:

  1. Берёт самый свежий дамп каждой базы.
  2. Создаёт черновую базу (<имя>_drill) на том же сервере.
  3. Заливает дамп, считает таблицы и ошибки.
  4. Удаляет черновую базу — рабочие не трогаются.

Если хоть одна база не восстановилась — уведомление с пометкой high.

Результат прогона 22.10

учения восстановления: 4/4
  ✅ netbox:    таблиц 208, ошибок 0
  ✅ authentik: таблиц 165, ошибок 0
  ✅ monica:    таблиц  95, ошибок 0
  ✅ nextcloud: таблиц 204, ошибок 0

Отчёт: /var/lib/hub-agents/journal/YYYY-MM-DD-restore-drill.json.

Ловушки (все пойманы на практике)

  1. Postgres в контейнере Authentik: переменная POSTGRES_USER содержит authentik_user, но такой роли нет — рабочая роль называется authentik. Проверять select current_user.
  2. В контейнере postgres нет роли postgres — суперпользователь задаётся при инициализации и может называться иначе.
  3. MariaDB: -p$VAR внутри pct exec ... sh -c не раскрывается — пароль нужно подставлять литералом, читая его из docker inspect.
  4. Права: пользователь БД может не иметь права CREATE DATABASE (Monica, Nextcloud) — создавать черновую базу надо под root.
  5. Подсчёт таблиц: кавычки в SQL внутри вложенных sh -c ломаются; надёжнее запускать psql/mariadb с -c и двойными кавычками вокруг всего запроса.

Ручной прогон

/opt/music-tools/venv/bin/python /opt/hub-core/restore_drill.py