diff --git a/ops/scripts/V1-PROGRESS.md b/ops/scripts/V1-PROGRESS.md new file mode 100644 index 0000000..b27f721 --- /dev/null +++ b/ops/scripts/V1-PROGRESS.md @@ -0,0 +1,146 @@ +# Версия 1 — ход работ + +Начат 16.10.2026. Порядок: сервисы (v1) → сеть → сервисы (v2). + +--- + +## ✅ Задача 1. Проверка восстановления копий + +### Что нашли + +``` +1 октября 2026, 16:42: + ❌ FAILED: PostgreSQL restore (syntax check) + ❌ Kuma notified: DOWN + → уведомление ушло, реакции НЕ БЫЛО. Две недели. +``` + +**Причина:** PostgreSQL сменил формат дампа: +``` +было: -- Database: имя_базы +стало: \connect имя_базы +``` + +### Что сделали + +| Что | Состояние | +|---|---| +| Новый образец `\connect` | ✅ исправлено | +| Настоящее восстановление 3 баз | ✅ реализовано | +| Сравнение через системный каталог | ✅ исправлено | +| Повтор тревоги до подтверждения | ✅ проверено в Matrix и Telegram | +| Расписание месяц → неделя | ✅ | +| **Убран из расписания** | ⚠️ извлечение даёт 0 таблиц | + +**Почему убран:** ложная тревога хуже отсутствия проверки. +Она приучает не реагировать — именно так потерялось +уведомление от 1 октября. + +### Что проверено и цело + +``` +GITEA таблиц 117 ✅ 5 репозиториев ✅ 352 задачи ✅ +VAULTWARDEN таблиц 29 ✅ 2 пользователя ✅ 12 паролей ✅ +MATRIX таблиц 176 ✅ 20 пользователей ✅ 30 комнат ✅ +СЛУЖБЫ Gitea 200 · Vaultwarden 200 · Matrix 200 · Element 200 +``` + +--- + +## ✅ Задача 2. Аудит резервного копирования + +### Находки + +| Находка | Суть | +|---|---| +| «Дубли» = ссылка | `/var/lib/vz/dump -> /mnt/backups/dump`. **Удаление снесло бы все копии** | +| Причина остановки | Тонкий пул переподписан: 1,18 ТБ обещано при 476 ГБ | +| `immich-backup.sh` падает | Но дублирует основную копию — не потеря | +| **Фотографии Immich** | **Последняя копия 26 дней назад** | +| Контейнеры | Копии только у 3 из 29 | + +### Что защищено + +``` +✅ Все 40 баз — ежедневно, 02:00 +✅ Файлы Matrix — ежедневно, 03:00 +✅ CT 115, 110, 201 — свежие копии +🔴 23 контейнера — копий нет (базы покрыты) +🔴 Фотографии Immich — 26 дней +``` + +--- + +## ✅ Задача 3. Тонкий пул + +### Что нашли + +``` +31 снимок держали 503 ГБ виртуально. + +Это снимки от работы 14–15 октября (миграция баз): + snap_vm-113 (100 ГБ) — при том, что CT 113 занимает 5,94% + 5 × snap_vm-109 по 40 ГБ = 200 ГБ + 7 × snap_vm-140 по 10 ГБ = 70 ГБ + и так далее +``` + +Каждый снимок «стоит» столько же, сколько весь том целиком. +Из-за этого обещание достигло 1,18 ТБ, и копирование встало. + +### Что сделали + +``` +Снимков: 31 → 9 (оставлен ОДИН на контейнер) +Держат: 503 ГБ → 225 ГБ +Освобождено: 278 ГБ + +Копирование вернули для 11 контейнеров: + ежедневно: 108 (n8n), 140 (Gitea), 155 (Matrix), 115 + раз в 2 дня: 110, 114 (Authentik), 109 (пароли) + еженедельно: 105 (документы), 113, 139, 201 +``` + +**Оставленные снимки — это страховка «до всех изменений».** +Промежуточные дубли убраны: все изменения проверены и работают. + +### Проверено + +``` +Пробная копия CT 140: 953 МБ за 35 секунд ✅ +Службы: Vaultwarden 200 · Gitea 200 · Matrix 200 + Authentik 302 · Grafana 302 · Sonarr 200 +Все 14 служб по внутренним адресам ✅ +``` + +--- + +## Следующие задачи + +``` +4. Защитить фотографии Immich ← главная дыра в данных +5. Починить извлечение копий ← вернуть проверку в расписание +6. Настроить отправку наружу ← фотографии на VPS +7. Единый вход для 21 службы ← самая большая возможность +8. Журналы в одном месте (Loki) +9. Проверки по смыслу +10. Секреты в хранилище +``` + +--- + +## Уроки этапа + +1. **Проверять перед удалением.** «Дубли» оказались ссылкой. + Один `stat` спас бы от потери всех копий. + +2. **Смотреть, ПОЧЕМУ остановилось.** Копии не «сломались» — + их остановил переподписанный пул. + +3. **При расхождении — проверять проверку.** Я трижды винил + данные, а ошибалась проверка (пути, права, формат). + +4. **Ложная тревога хуже отсутствия проверки.** Она приучает + не реагировать. + +5. **Снимок стоит как весь том.** 31 снимок = 503 ГБ обещания.