147 lines
5.7 KiB
Markdown
147 lines
5.7 KiB
Markdown
# Версия 1 — ход работ
|
||
|
||
Начат 16.10.2026. Порядок: сервисы (v1) → сеть → сервисы (v2).
|
||
|
||
---
|
||
|
||
## ✅ Задача 1. Проверка восстановления копий
|
||
|
||
### Что нашли
|
||
|
||
```
|
||
1 октября 2026, 16:42:
|
||
❌ FAILED: PostgreSQL restore (syntax check)
|
||
❌ Kuma notified: DOWN
|
||
→ уведомление ушло, реакции НЕ БЫЛО. Две недели.
|
||
```
|
||
|
||
**Причина:** PostgreSQL сменил формат дампа:
|
||
```
|
||
было: -- Database: имя_базы
|
||
стало: \connect имя_базы
|
||
```
|
||
|
||
### Что сделали
|
||
|
||
| Что | Состояние |
|
||
|---|---|
|
||
| Новый образец `\connect` | ✅ исправлено |
|
||
| Настоящее восстановление 3 баз | ✅ реализовано |
|
||
| Сравнение через системный каталог | ✅ исправлено |
|
||
| Повтор тревоги до подтверждения | ✅ проверено в Matrix и Telegram |
|
||
| Расписание месяц → неделя | ✅ |
|
||
| **Убран из расписания** | ⚠️ извлечение даёт 0 таблиц |
|
||
|
||
**Почему убран:** ложная тревога хуже отсутствия проверки.
|
||
Она приучает не реагировать — именно так потерялось
|
||
уведомление от 1 октября.
|
||
|
||
### Что проверено и цело
|
||
|
||
```
|
||
GITEA таблиц 117 ✅ 5 репозиториев ✅ 352 задачи ✅
|
||
VAULTWARDEN таблиц 29 ✅ 2 пользователя ✅ 12 паролей ✅
|
||
MATRIX таблиц 176 ✅ 20 пользователей ✅ 30 комнат ✅
|
||
СЛУЖБЫ Gitea 200 · Vaultwarden 200 · Matrix 200 · Element 200
|
||
```
|
||
|
||
---
|
||
|
||
## ✅ Задача 2. Аудит резервного копирования
|
||
|
||
### Находки
|
||
|
||
| Находка | Суть |
|
||
|---|---|
|
||
| «Дубли» = ссылка | `/var/lib/vz/dump -> /mnt/backups/dump`. **Удаление снесло бы все копии** |
|
||
| Причина остановки | Тонкий пул переподписан: 1,18 ТБ обещано при 476 ГБ |
|
||
| `immich-backup.sh` падает | Но дублирует основную копию — не потеря |
|
||
| **Фотографии Immich** | **Последняя копия 26 дней назад** |
|
||
| Контейнеры | Копии только у 3 из 29 |
|
||
|
||
### Что защищено
|
||
|
||
```
|
||
✅ Все 40 баз — ежедневно, 02:00
|
||
✅ Файлы Matrix — ежедневно, 03:00
|
||
✅ CT 115, 110, 201 — свежие копии
|
||
🔴 23 контейнера — копий нет (базы покрыты)
|
||
🔴 Фотографии Immich — 26 дней
|
||
```
|
||
|
||
---
|
||
|
||
## ✅ Задача 3. Тонкий пул
|
||
|
||
### Что нашли
|
||
|
||
```
|
||
31 снимок держали 503 ГБ виртуально.
|
||
|
||
Это снимки от работы 14–15 октября (миграция баз):
|
||
snap_vm-113 (100 ГБ) — при том, что CT 113 занимает 5,94%
|
||
5 × snap_vm-109 по 40 ГБ = 200 ГБ
|
||
7 × snap_vm-140 по 10 ГБ = 70 ГБ
|
||
и так далее
|
||
```
|
||
|
||
Каждый снимок «стоит» столько же, сколько весь том целиком.
|
||
Из-за этого обещание достигло 1,18 ТБ, и копирование встало.
|
||
|
||
### Что сделали
|
||
|
||
```
|
||
Снимков: 31 → 9 (оставлен ОДИН на контейнер)
|
||
Держат: 503 ГБ → 225 ГБ
|
||
Освобождено: 278 ГБ
|
||
|
||
Копирование вернули для 11 контейнеров:
|
||
ежедневно: 108 (n8n), 140 (Gitea), 155 (Matrix), 115
|
||
раз в 2 дня: 110, 114 (Authentik), 109 (пароли)
|
||
еженедельно: 105 (документы), 113, 139, 201
|
||
```
|
||
|
||
**Оставленные снимки — это страховка «до всех изменений».**
|
||
Промежуточные дубли убраны: все изменения проверены и работают.
|
||
|
||
### Проверено
|
||
|
||
```
|
||
Пробная копия CT 140: 953 МБ за 35 секунд ✅
|
||
Службы: Vaultwarden 200 · Gitea 200 · Matrix 200
|
||
Authentik 302 · Grafana 302 · Sonarr 200
|
||
Все 14 служб по внутренним адресам ✅
|
||
```
|
||
|
||
---
|
||
|
||
## Следующие задачи
|
||
|
||
```
|
||
4. Защитить фотографии Immich ← главная дыра в данных
|
||
5. Починить извлечение копий ← вернуть проверку в расписание
|
||
6. Настроить отправку наружу ← фотографии на VPS
|
||
7. Единый вход для 21 службы ← самая большая возможность
|
||
8. Журналы в одном месте (Loki)
|
||
9. Проверки по смыслу
|
||
10. Секреты в хранилище
|
||
```
|
||
|
||
---
|
||
|
||
## Уроки этапа
|
||
|
||
1. **Проверять перед удалением.** «Дубли» оказались ссылкой.
|
||
Один `stat` спас бы от потери всех копий.
|
||
|
||
2. **Смотреть, ПОЧЕМУ остановилось.** Копии не «сломались» —
|
||
их остановил переподписанный пул.
|
||
|
||
3. **При расхождении — проверять проверку.** Я трижды винил
|
||
данные, а ошибалась проверка (пути, права, формат).
|
||
|
||
4. **Ложная тревога хуже отсутствия проверки.** Она приучает
|
||
не реагировать.
|
||
|
||
5. **Снимок стоит как весь том.** 31 снимок = 503 ГБ обещания.
|