105 lines
4.7 KiB
Markdown
105 lines
4.7 KiB
Markdown
# Учения восстановления баз (автоматические)
|
||
|
||
## Что делает
|
||
|
||
Таймер **`hub-restore-drill.timer`, 3-го числа в 05:00** запускает
|
||
`/opt/hub-core/restore_drill.py`:
|
||
|
||
1. Берёт самый свежий дамп каждой базы.
|
||
2. Создаёт **черновую** базу (`<имя>_drill`) на том же сервере.
|
||
3. Заливает дамп, считает таблицы и ошибки.
|
||
4. Удаляет черновую базу — рабочие не трогаются.
|
||
|
||
Если хоть одна база не восстановилась — уведомление с пометкой `high`.
|
||
|
||
## Результат прогона 22.10
|
||
|
||
```
|
||
учения восстановления: 4/4
|
||
✅ netbox: таблиц 208, ошибок 0
|
||
✅ authentik: таблиц 165, ошибок 0
|
||
✅ monica: таблиц 95, ошибок 0
|
||
✅ nextcloud: таблиц 204, ошибок 0
|
||
✅ docmost: таблиц 48, ошибок 0
|
||
```
|
||
|
||
Отчёт: `/var/lib/hub-agents/journal/YYYY-MM-DD-restore-drill.json`.
|
||
|
||
## Ловушки (все пойманы на практике)
|
||
|
||
1. **Postgres в контейнере Authentik:** переменная `POSTGRES_USER`
|
||
содержит `authentik_user`, но **такой роли нет** — рабочая роль
|
||
называется `authentik`. Проверять `select current_user`.
|
||
2. **В контейнере `postgres` нет роли `postgres`** — суперпользователь
|
||
задаётся при инициализации и может называться иначе.
|
||
3. **MariaDB: `-p$VAR` внутри `pct exec ... sh -c` не раскрывается** —
|
||
пароль нужно подставлять литералом, читая его из `docker inspect`.
|
||
4. **Права:** пользователь БД может не иметь права `CREATE DATABASE`
|
||
(Monica, Nextcloud) — создавать черновую базу надо под root.
|
||
5. **Подсчёт таблиц**: кавычки в SQL внутри вложенных `sh -c`
|
||
ломаются; надёжнее запускать `psql/mariadb` с `-c` и двойными
|
||
кавычками вокруг всего запроса.
|
||
|
||
## Ручной прогон
|
||
|
||
```bash
|
||
/opt/music-tools/venv/bin/python /opt/hub-core/restore_drill.py
|
||
```
|
||
|
||
---
|
||
|
||
## Учения по конфигам (22.10, 05:50)
|
||
|
||
Развернул последний архив конфигов во временный каталог и проверил
|
||
читаемость вложенных архивов.
|
||
|
||
```
|
||
архив: configs-20261022-0532.tar.gz (244 МБ)
|
||
распаковано: 121 файл
|
||
вложенных .tgz: 62, битых 0
|
||
```
|
||
|
||
Ключевые цели на месте:
|
||
|
||
| Файл | Есть |
|
||
|---|---|
|
||
| homeassistant-config.tgz | ✅ (16 yaml внутри) |
|
||
| gitea-conf.tgz | ✅ |
|
||
| grocy-config.tgz | ✅ |
|
||
| memos-data.tgz | ✅ |
|
||
| beszel-data.tgz | ✅ |
|
||
| vikunja-db.tgz | ✅ |
|
||
| docmost-data.tgz | ✅ |
|
||
|
||
**Вывод**: архив конфигов не только создаётся, но и разворачивается
|
||
целиком, все вложенные архивы читаются.
|
||
|
||
---
|
||
|
||
## Учения: восстановление целого гостя (23.10, 12:25)
|
||
|
||
Проверен последний непроверенный путь — разворот **контейнера** из архива.
|
||
|
||
```
|
||
архив: vzdump-lxc-161-2026_10_23-02_07_17.tar.zst (224 МБ)
|
||
команда: pct restore 251 <архив> --storage local-lvm --hostname drill-restore
|
||
результат: 756 МБ прочитано (547 МБ/с), конфиг слит
|
||
запуск: running, hostname=drill-restore, файловая система читается
|
||
удаление: pct destroy 251 → том освобождён
|
||
пул после: 76.69% (как до учений)
|
||
```
|
||
|
||
**Вывод**: архив vzdump не только создаётся и проходит `zstd -t`,
|
||
но и разворачивается в работающий контейнер. Рабочие гости не тронуты —
|
||
учения шли на отдельном ID 251.
|
||
|
||
## Сводка всех учений
|
||
|
||
| Учения | Результат |
|
||
|---|---|
|
||
| Дампы баз (5) | ✅ 5/5, таблицы совпадают |
|
||
| Архив конфигов | ✅ 350 файлов, 62 вложенных архива |
|
||
| Целый гость из vzdump | ✅ запустился, данные на месте |
|
||
| Синхронизация сертификатов | ✅ принудительное обновление дошло до дома |
|
||
| Целостность (58 файлов) | ✅ 0 битых |
|