[A-65] Карта бэкапов: offsite проверен, новые цели, ловушка пула

This commit is contained in:
buryan-agent committed 2026-10-23 12:17:38 +03:00
1 parent 16b907ca14
commit af73453d6f
1 file changed
+33 -21
+33 -21
View File
@@ -1,32 +1,44 @@
# Бэкапы: что есть и что проверено
Дата: 19.10.2026.
Обновлено: 23.10.2026, 12:20.
| Бэкап | Когда | Куда | Проверка восстановления |
## Карта бэкапов
| Что | Когда | Куда | Проверено |
|---|---|---|---|
| PostgreSQL (все базы) | 02:00 | `/mnt/backups/postgresql` | **есть** — сверка таблиц с живой базой (02:40) |
| База ядра `hub_core` | 02:30 | `/mnt/backups/hub-core` | **есть** — разворот в тестовую базу, 68 карточек |
| Данные ботов | 02:45 | `/mnt/backups/hub-bots` | **есть** — распаковка, целостность индекса (03:05) |
| Matrix: база, файлы, конфиг | 03:00 | `/root/matrix-backups` (существовал до спринта) | **есть** — разворот в тестовую базу (03:20) |
| Matrix: офсайт | 03:20 | VPS `/var/backups/matrix` | копия проверяется наличием на VPS |
| LXC-контейнеры | 01:00 | по расписанию `lxc-backup.sh` | не проверялось |
| vzdump | 06:30 | ротация `vzdump-rotate.sh` | не проверялось |
| Офсайт важного | 04:00 | `/mnt/backups/offsite-important` | не проверялось |
| **Образы гостей** (vzdump) | 02:00 ежедневно | `/mnt/backups/dump` (33 архива, 60 ГБ) | ✅ догон 24 гостей, целостность 0 битых |
| Тяжёлые гости (104, 115, 160) | вс 03:00 | там же | — |
| **Конфиги сервисов** | 03:45 | `/mnt/backups/configs` (128 файлов, 248 МБ) | ✅ распаковка 350 файлов |
| **Хостовые конфиги** | 03:45 | там же: `host/host-nginx` (94), `host/host-pve`, `host/host-systemd` (51) | ✅ в архиве |
| **Дампы баз** | 03:15 | `/mnt/backups/db` (5 баз) | ✅ учения 5/5 |
| PostgreSQL все базы | 02:00 | `/mnt/backups/postgresql` | ✅ (ранее) |
| hub_core | 02:30 | `/mnt/backups/hub-core` | ✅ (ранее) |
| Боты | 02:45 | `/mnt/backups/hub-bots` | ✅ (ранее) |
| Matrix | 03:00 | `/root/matrix-backups` | ✅ (ранее) |
| **Конфиги VPS** | 04:20 | `/mnt/backups/vps` (212 nginx + 51 renewal) | ✅ содержимое проверено |
| **Offsite (restic)** | 04:00 | `sftp:root@100.64.0.2:/backup/restic-repo` | ✅ 33 снапшота, 69.5 ГБ |
## Как устроены уведомления
## Проверки, которые работают автоматически
Результат каждой проверки уходит событием в ядро:
| Когда | Что |
|---|---|
| 01:45 | pre-prune: удаление старых архивов + `pct fstrim` по всем CT |
| вс 04:30 | чистка CT: висячие образы Docker, журналы, fstrim |
| вс 05:30 | целостность: `zstd -t`, `gzip -t`, `tar -tzf` (58 файлов) |
| 08:00 | ночная проверка: 11 пунктов (свежесть, пул, сертификаты…) |
| 3-го 05:00 | учения: разворот дампов 5 баз в черновые базы |
| 04:10 | синхронизация сертификатов VPS → дом, перезагрузка nginx |
* `backup.done` — бэкап на месте и восстанавливается;
* `backup.failed` — есть проблема.
## Главная ловушка (стоила двух ночей)
Дальше маршрутизация отправляет это боту Инфраструктура. Плюс сторож
расписаний следит, что сами проверки не перестали запускаться.
**Удаление файлов внутри LXC не освобождает место в тонком пуле.**
Без `pct fstrim` пул растёт монотонно; при 81% vzdump перестаёт
создавать снапшоты и бэкап делает только часть гостей.
Лечение: `pct fstrim` по всем CT (вернул 58 ГБ) + ежедневный fstrim
в pre-prune + недельная чистка.
## Что осталось непроверенным
* LXC-контейнеры (vzdump/lxc-backup) — восстановление не тестировалось;
* офсайт важного — только наличие файлов.
Это следующие кандидаты: проверка восстановления контейнера в отдельный
CT — самая дорогая по времени, но и самая ценная.
- Восстановление **целого гостя** из vzdump (не только дампов баз).
- Восстановление конфигов VPS на чистый сервер.
- Offsite: проверено наличие снапшотов, но не пробное восстановление.