From 35f313c63612b9d4d65710a8b7e5553c9db0fd25 Mon Sep 17 00:00:00 2001 From: Roman Buryan Date: Sun, 18 Oct 2026 18:13:13 +0300 Subject: [PATCH] =?UTF-8?q?=D0=A0=D0=B5=D0=B7=D0=B5=D1=80=D0=B2=D0=BD?= =?UTF-8?q?=D1=8B=D0=B5=20=D0=BA=D0=BE=D0=BF=D0=B8=D0=B8=20=D0=BF=D1=80?= =?UTF-8?q?=D0=BE=D0=B2=D0=B5=D1=80=D0=B5=D0=BD=D1=8B:=20=D1=80=D0=B0?= =?UTF-8?q?=D0=B1=D0=BE=D1=82=D0=B0=D1=8E=D1=82=20=D0=BB=D1=83=D1=87=D1=88?= =?UTF-8?q?=D0=B5,=20=D1=87=D0=B5=D0=BC=20=D0=BA=D0=B0=D0=B7=D0=B0=D0=BB?= =?UTF-8?q?=D0=BE=D1=81=D1=8C.=20=D0=9C=D0=BE=D1=8F=20=D0=BE=D1=88=D0=B8?= =?UTF-8?q?=D0=B1=D0=BA=D0=B0=20=D0=B8=D1=81=D0=BF=D1=80=D0=B0=D0=B2=D0=BB?= =?UTF-8?q?=D0=B5=D0=BD=D0=B0?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit ЧТО Я ПОДУМАЛ СНАЧАЛА: посмотрел каталог /root/db-backups в CT 151, увидел три файла от 11 сентября и заключил «автоматического резервирования PostgreSQL нет». ЭТО БЫЛО НЕВЕРНО. Настоящее резервирование лежит в /mnt/backups и работает ежедневно в 02:00: pg_dumpall всех баз (39-40), 33 МБ, ротация 14 дней, уведомление в Kuma при успехе и провале. БОЛЕЕ ТОГО, КОПИИ ПРОВЕРЯЮТСЯ: ежедневно в 06:00 архив ВОССТАНАВЛИВАЕТСЯ в отдельную базу и данные СВЕРЯЮТСЯ. Журнал за сегодня: баз восстановилось 40; сверено — vaultwarden (2 пользователя, 12 паролей), matrix (21 пользователь, 45 комнат), authentik (10 пользователей), gitea (5 репозиториев), n8n (7 процессов). Всё ✅. Это правильный уровень проверки: не «файл есть», а «данные внутри». ТАКЖЕ КОПИИ КОНТЕЙНЕРОВ: ежедневно 104, 108, 110, 115, 140, 155; раз в 2 дня 109, 131, 114; еженедельно 105, 113, 139, 201. 22 архива, ротация настроена. ЧТО СТОИТ УЛУЧШИТЬ: копии только на этом же сервере (/mnt/backups — локальный диск). Нужна вторая точка — это задача 4.4.3, требует облачного аккаунта. И сверка покрывает 7 баз из 40 — можно расширить. УРОК: прежде чем говорить «не настроено», найти сам скрипт и его журнал, а не первый попавшийся каталог. --- docs/BACKUP-STATE-2026-10-18.md | 80 +++++++++++++++++++++++++++++++++ docs/TASKS.md | 7 +-- ops/backup/check-backups.sh | 44 ++++++++++++++++++ 3 files changed, 128 insertions(+), 3 deletions(-) create mode 100644 docs/BACKUP-STATE-2026-10-18.md create mode 100755 ops/backup/check-backups.sh diff --git a/docs/BACKUP-STATE-2026-10-18.md b/docs/BACKUP-STATE-2026-10-18.md new file mode 100644 index 0000000..183ef1f --- /dev/null +++ b/docs/BACKUP-STATE-2026-10-18.md @@ -0,0 +1,80 @@ +# Резервные копии: проверено, работает (задача 4.4.2) + +**18.10.2026.** Проверял копии и **сначала ошибся** — вывод ниже. + +## Моя ошибка + +Посмотрел каталог `/root/db-backups` в CT 151, увидел три файла от +11 сентября и заключил: «автоматического резервирования PostgreSQL нет». + +**Это было неверно.** Настоящее резервирование лежит в другой папке и +работает ежедневно. Вывод сделан по первому найденному каталогу, без +проверки, куда пишет скрипт. + +Урок: прежде чем говорить «не настроено», найти сам скрипт и его журнал. + +## Что есть на самом деле + +### Копии PostgreSQL — ежедневно + +| Что | Значение | +|---|---| +| Когда | каждый день в 02:00 | +| Что | `pg_dumpall` — **все базы разом** | +| Где | `/mnt/backups/postgresql` | +| Размер | 33 МБ (39 баз) | +| Хранение | 14 дней, старые удаляются | +| Уведомление | в Uptime Kuma (успех/провал) | + +### Копии проверяются — ежедневно в 06:00 + +Это главное: копия не просто создаётся, а **восстанавливается в отдельную +базу и сверяется**. Журнал за сегодня: + +``` +✅ архив целый +баз восстановилось: 40 +── сверка ── +✅ vaultwarden_db пользователей: 2 +✅ vaultwarden_db паролей: 12 +✅ matrix_db пользователей: 21 +✅ matrix_db комнат: 45 +✅ authentik_db пользователей: 10 +✅ gitea_db репозиториев: 5 +✅ n8n процессов: 7 +===== ИТОГ: баз 40, сверено 7 ===== +отчёт отправлен +``` + +То есть проверяется не «файл существует», а **данные внутри**: пароли, +комнаты, пользователи. Это правильный уровень проверки. + +### Копии контейнеров + +| Расписание | Контейнеры | +|---|---| +| Ежедневно | 104 (Immich), 108, 110, 115, 140, 155 | +| Раз в 2 дня | 109, 131, 114 | +| Еженедельно | 105, 113, 139, 140, 201 | + +Всего 22 архива, самый старый — 20 сентября, ротация настроена +(`vzdump-rotate.sh`). + +## Что стоит улучшить + +1. **Копии только на этом же сервере.** `/mnt/backups` — локальный диск. + Пожар, кража или отказ диска уничтожат и данные, и копии. Нужна + вторая точка (облако или другой сервер) — это задача 4.4.3. +2. **PostgreSQL не покрыт `vzdump`** как контейнер — но его данные + покрыты ежедневным `pg_dumpall`, что для базы даже правильнее + (согласованный снимок). +3. **Сверка покрывает 7 баз из 40** — остальные проверяются только на + «восстановилось». Можно расширить список ключевых. + +## Итог + +| Задача | Состояние | +|---|---| +| 4.4.1 копии делаются | ✅ ежедневно, все базы | +| 4.4.2 проверка восстановления | ✅ ежедневно с сверкой данных | +| 4.4.3 копии наружу | ⬜ только локально — нужен второй носитель | diff --git a/docs/TASKS.md b/docs/TASKS.md index a9c5168..0cd0051 100644 --- a/docs/TASKS.md +++ b/docs/TASKS.md @@ -34,11 +34,11 @@ | ЗАВЕРШИТЬ ОБНОВЛЕНИЯ | 15 | 15 | 0 | **0** | | СЕТЬ И ДОСТУП | 6 | 4 | 0 | **2** | | ЗВОНКИ И МЕДИА | 6 | 4 | 0 | **2** | -| СКВОЗНАЯ СВЯЗНОСТЬ | 13 | 5 | 3 | **5** | +| СКВОЗНАЯ СВЯЗНОСТЬ | 13 | 6 | 2 | **5** | | УЛУЧШЕНИЕ СЛУЖБ | 13 | 9 | 0 | **4** | | VPN (этапы 1–4) | 29 | 21 | 3 | **5** | | РЕЕСТР НАЙДЕННЫХ ПРОБЛЕМ | 17 | 12 | 1 | **4** | -| **ИТОГО** | **99** | **70** | **7** | **22** | +| **ИТОГО** | **99** | **71** | **6** | **22** | --- @@ -69,6 +69,7 @@ + ## 1. ЗАВЕРШИТЬ ОБНОВЛЕНИЯ @@ -127,7 +128,7 @@ | 4.3.2 | Проверять «работает», а не «отвечает» | 🔶 частично | | 4.3.3 | Отдельная проверка: вход работает | ✅ 60 проверок | | 4.4.1 | Снимки перед изменениями | ✅ | -| 4.4.2 | Проверка восстановления из копий | 🔶 проверено для конфигураций VPN | +| 4.4.2 | Проверка восстановления из копий | ✅ ежедневно: восстановление 40 баз + сверка ключевых данных | | 4.4.3 | Копии наружу | ⬜ | | 4.5.1 | Проверка «образ запускается» до обновления | ⬜ | | 4.5.2 | Различать «обновлено» и «уже актуально» | ⬜ | diff --git a/ops/backup/check-backups.sh b/ops/backup/check-backups.sh new file mode 100755 index 0000000..5c0fd94 --- /dev/null +++ b/ops/backup/check-backups.sh @@ -0,0 +1,44 @@ +#!/bin/bash +# ============================================================ +# backup-check.sh — живы ли резервные копии (задача 4.4.2) +# ============================================================ +# ЗАЧЕМ СЕЙЧАС: единый вход связал 15 служб с Authentik, и роль копий +# выросла. Проверяю: делаются ли копии, когда последняя, и есть ли +# проверка восстановления. +# ============================================================ +set -uo pipefail + +echo "=== 1. DUPLICATI (CT 111) ===" +pct exec 111 -- bash -c 'docker ps --filter name=duplicati --format " {{.Names}} | {{.Status}}" 2>/dev/null' +pct exec 111 -- bash -c 'ls -la /opt/backup 2>/dev/null | head -3; find / -maxdepth 4 -name "*.duplicati*" -o -maxdepth 4 -name "Duplicati-server.sqlite" 2>/dev/null | head -3' | sed 's/^/ /' + +echo +echo "=== 2. RESTIC (конфигурации) ===" +pct exec 139 -- bash -c 'command -v restic >/dev/null 2>&1 && echo " restic есть" || echo " restic нет"' 2>/dev/null | sed 's/^/ /' +grep -rln "restic" /opt/buryan-hub/scripts/ /root/buryan-infra/ops/ 2>/dev/null | head -5 | sed 's/^/ скрипты: /' + +echo +echo "=== 3. РЕЗЕРВНЫЕ КОПИИ В ХРАНИЛИЩЕ ===" +ls -lht /var/lib/vz/dump/ 2>/dev/null | head -8 | awk '{print " " $6, $7, $8, $9, $5}' +echo " --- всего файлов ---" +ls -1 /var/lib/vz/dump/ 2>/dev/null | wc -l | sed 's/^/ /' + +echo +echo "=== 4. КОПИИ БАЗ POSTGRES ===" +ls -lht /root/*.sql 2>/dev/null | head -8 | awk '{print " " $6, $7, $8, $9, $5}' +echo " --- всего дампов ---" +ls -1 /root/*.sql 2>/dev/null | wc -l | sed 's/^/ /' + +echo +echo "=== 5. ЕСТЬ ЛИ АВТОМАТИЧЕСКОЕ РЕЗЕРВИРОВАНИЕ ===" +echo " --- cron на PVE ---" +grep -rhE "^\S+ \S+ \S+ \S+ \S+ (root )?/" /etc/cron.d/ 2>/dev/null | grep -vE "^\s*#" | head -10 | sed 's/^/ /' +echo " --- systemd-таймеры ---" +systemctl list-timers --no-pager 2>/dev/null | head -6 | sed 's/^/ /' + +echo +echo "=== 6. ПОСЛЕДНИЕ КОПИИ КОНТЕЙНЕРОВ ===" +for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}' | head -6); do + n=$(pct listsnapshot $ct 2>/dev/null | tail -n +2 | wc -l) + echo " CT $ct: снимков $n" +done