5.7 KiB
Версия 1 — ход работ
Начат 16.10.2026. Порядок: сервисы (v1) → сеть → сервисы (v2).
✅ Задача 1. Проверка восстановления копий
Что нашли
1 октября 2026, 16:42:
❌ FAILED: PostgreSQL restore (syntax check)
❌ Kuma notified: DOWN
→ уведомление ушло, реакции НЕ БЫЛО. Две недели.
Причина: PostgreSQL сменил формат дампа:
было: -- Database: имя_базы
стало: \connect имя_базы
Что сделали
| Что | Состояние |
|---|---|
Новый образец \connect |
✅ исправлено |
| Настоящее восстановление 3 баз | ✅ реализовано |
| Сравнение через системный каталог | ✅ исправлено |
| Повтор тревоги до подтверждения | ✅ проверено в Matrix и Telegram |
| Расписание месяц → неделя | ✅ |
| Убран из расписания | ⚠️ извлечение даёт 0 таблиц |
Почему убран: ложная тревога хуже отсутствия проверки. Она приучает не реагировать — именно так потерялось уведомление от 1 октября.
Что проверено и цело
GITEA таблиц 117 ✅ 5 репозиториев ✅ 352 задачи ✅
VAULTWARDEN таблиц 29 ✅ 2 пользователя ✅ 12 паролей ✅
MATRIX таблиц 176 ✅ 20 пользователей ✅ 30 комнат ✅
СЛУЖБЫ Gitea 200 · Vaultwarden 200 · Matrix 200 · Element 200
✅ Задача 2. Аудит резервного копирования
Находки
| Находка | Суть |
|---|---|
| «Дубли» = ссылка | /var/lib/vz/dump -> /mnt/backups/dump. Удаление снесло бы все копии |
| Причина остановки | Тонкий пул переподписан: 1,18 ТБ обещано при 476 ГБ |
immich-backup.sh падает |
Но дублирует основную копию — не потеря |
| Фотографии Immich | Последняя копия 26 дней назад |
| Контейнеры | Копии только у 3 из 29 |
Что защищено
✅ Все 40 баз — ежедневно, 02:00
✅ Файлы Matrix — ежедневно, 03:00
✅ CT 115, 110, 201 — свежие копии
🔴 23 контейнера — копий нет (базы покрыты)
🔴 Фотографии Immich — 26 дней
✅ Задача 3. Тонкий пул
Что нашли
31 снимок держали 503 ГБ виртуально.
Это снимки от работы 14–15 октября (миграция баз):
snap_vm-113 (100 ГБ) — при том, что CT 113 занимает 5,94%
5 × snap_vm-109 по 40 ГБ = 200 ГБ
7 × snap_vm-140 по 10 ГБ = 70 ГБ
и так далее
Каждый снимок «стоит» столько же, сколько весь том целиком. Из-за этого обещание достигло 1,18 ТБ, и копирование встало.
Что сделали
Снимков: 31 → 9 (оставлен ОДИН на контейнер)
Держат: 503 ГБ → 225 ГБ
Освобождено: 278 ГБ
Копирование вернули для 11 контейнеров:
ежедневно: 108 (n8n), 140 (Gitea), 155 (Matrix), 115
раз в 2 дня: 110, 114 (Authentik), 109 (пароли)
еженедельно: 105 (документы), 113, 139, 201
Оставленные снимки — это страховка «до всех изменений». Промежуточные дубли убраны: все изменения проверены и работают.
Проверено
Пробная копия CT 140: 953 МБ за 35 секунд ✅
Службы: Vaultwarden 200 · Gitea 200 · Matrix 200
Authentik 302 · Grafana 302 · Sonarr 200
Все 14 служб по внутренним адресам ✅
Следующие задачи
4. Защитить фотографии Immich ← главная дыра в данных
5. Починить извлечение копий ← вернуть проверку в расписание
6. Настроить отправку наружу ← фотографии на VPS
7. Единый вход для 21 службы ← самая большая возможность
8. Журналы в одном месте (Loki)
9. Проверки по смыслу
10. Секреты в хранилище
Уроки этапа
-
Проверять перед удалением. «Дубли» оказались ссылкой. Один
statспас бы от потери всех копий. -
Смотреть, ПОЧЕМУ остановилось. Копии не «сломались» — их остановил переподписанный пул.
-
При расхождении — проверять проверку. Я трижды винил данные, а ошибалась проверка (пути, права, формат).
-
Ложная тревога хуже отсутствия проверки. Она приучает не реагировать.
-
Снимок стоит как весь том. 31 снимок = 503 ГБ обещания.