diff --git a/docs/NIGHT-JOURNAL.md b/docs/NIGHT-JOURNAL.md index 36d2870..6828c0d 100644 --- a/docs/NIGHT-JOURNAL.md +++ b/docs/NIGHT-JOURNAL.md @@ -171,3 +171,6 @@ | 2 | Восстановление прав по снимку неполное | бот не смог записать | права выдаются явно на всю схему | | 3 | Владелец базы теряется при пересоздании | воркер Authentik не запустился | владелец берётся из копии | | 4 | Локаль C недостаточна для русского | проверка регистра и сортировки | ICU ru-RU | +[19:52:34] postgres переведена +[19:52:35] immich: требуется доступ к виртуалке или решение владельца +[19:52:40] проверка восстановления: таблицы 9=9, очередь 6=6 — совпало diff --git a/docs/NIGHT-REPORT.md b/docs/NIGHT-REPORT.md new file mode 100644 index 0000000..2c65bbb --- /dev/null +++ b/docs/NIGHT-REPORT.md @@ -0,0 +1,174 @@ +# Отчёт о ночном спринте + +**Дата:** 2026-10-14, ночь +**Задача:** централизация баз данных +**Состояние:** этапы 1, 2, 3, 8 выполнены. Этап 4 остановлен по обоснованной причине. + +--- + +## 1. Что сделано + +### Этап 1. Уборка безопасных остатков — выполнен + +| Что | Результат | Чем подтверждено | +|---|---|---| +| Мёртвые файловые базы n8n и mealie | убраны | копии в карантине совпали по размеру: 102 998 016 и 1 331 200 байт | +| Осиротевшая база `gitea` в PostgreSQL | выгружена и удалена | в выгрузке 112 таблиц | +| Старый кластер PostgreSQL 14 | выгружен и удалён | выгрузка: 14 баз, 1012 таблиц, 323 688 строк; сверка показала, что все базы есть в рабочем | + +**Освобождено 500 МБ** в контейнере баз. Карантин: 119 МБ. +Ничего не удалено без проверенной копии — всё перемещено в `/mnt/backups/retired/`. + +### Этап 2. Кодировка: образец — выполнен + +База `buryan_monitoring` переведена на **UTF8 с локалью ICU ru-RU**. + +Подтверждение — не «команда выполнена», а поведение базы: + +| Проверка | Было (SQL_ASCII) | Стало | +|---|---|---| +| длина строки «Привет» | **12** | **6** | +| upper('Привет') | Привет | **ПРИВЕТ** | +| 'ёж' < 'жук' | false | **true** | + +### Этап 3. Остальные базы — выполнен, 12 баз + +| База | Таблиц | Владелец восстановлен | +|---|---|---| +| authentik_db | 165 | authentik_user | +| n8n | 136 | n8n | +| n8n_central | 136 | n8n | +| n8n_prod | 136 | n8n | +| nextcloud_db | 151 | nextcloud_user | +| paperless_db | 74 | paperless_user | +| firefly_db | 81 | firefly_user | +| mealie_db | 62 | mealie_user | +| buryan_hub | 12 | n8n | +| buryan_monitor | 6 | buryan_agent | +| authentik | 0 (служебная) | postgres | +| buryan_monitoring | 9 | postgres | + +**Итого 15 баз из 17** переведены на UTF8 с русской локалью. +Каждая — с проверкой состава таблиц и трёх проверок русского текста. + +### Этап 8. Проверка восстановления — выполнен + +Выгрузка базы развёрнута во временную базу и сверена: + +``` +таблиц: было 9, стало 9 +очередь обновлений: было 6, стало 6 +реестр баз: было 35, стало 35 +русский текст: длина 6, upper ПРИВЕТ +``` + +**Копии пригодны, кодировка переносится.** Без этой проверки считать +копию копией нельзя. + +--- + +## 2. Ошибки, которые я допустил и исправил + +Все четыре обнаружены проверками, а не угаданы. + +| # | Ошибка | Как проявилась | Исправление | +|---|---|---|---| +| 1 | Имя базы с **дефисом** | PostgreSQL прочитал дефис как вычитание, переименование не сработало, а я **поверил выводу команды** и загрузил данные в ту же базу | имена без дефисов; после каждого изменения — **проверка по системному каталогу**, а не по выводу команды | +| 2 | Восстановление прав **по снимку** оказалось неполным | бот потерял право записи в очередь — та же поломка, что была днём | права выдаются **явно на всю схему**, а не по снимку | +| 3 | Владелец базы назначался `postgres` | у 10 баз владельцем была роль сервиса; воркер Authentik не смог применить миграцию и не запускался | владелец берётся из копии до переноса, возвращён у всех 10 | +| 4 | Локаль `C` в стандарте | кодировка верна, но регистр и сортировка для русского **не работают** | проверены варианты на тестовых базах, выбран **ICU ru-RU** | + +Ошибка №1 — та же, что мучила весь день: **я проверял факт выполнения команды, +а не результат**. Здесь это привело к загрузке данных в саму себя. Данные +не пострадали, но результата не было. + +Ошибка №3 могла остаться незамеченной: базы работали бы, пока сервису +не потребовалось создать таблицу или применить миграцию. + +--- + +## 3. Что НЕ сделано и почему + +### Этап 4. Перенос файловых баз в PostgreSQL — остановлен + +**Причина: ни у одного сервиса нет встроенного переноса данных.** + +| Сервис | Размер | Поддерживает PostgreSQL | Перенос данных | +|---|---|---|---| +| Uptime Kuma | 160 МБ | зависит от версии | **инструментов нет** | +| Gitea | 14 МБ | да | есть dump/restore, но **смена типа базы официально не поддержана** | +| Sonarr | 3,2 МБ | да | **инструментов нет** | +| Paperless | 2,4 МБ | да | **инструментов нет** | +| Radarr | 2,0 МБ | да | **инструментов нет** | +| Grafana | 1,5 МБ | да | **инструментов нет** | +| Prowlarr | 368 КБ | да | **инструментов нет** | +| Bazarr | 364 КБ | да | **инструментов нет** | +| Vaultwarden | 288 КБ | да | **инструментов нет** | + +**Поддержка PostgreSQL и перенос данных — разные вещи.** Перенос означал бы +ручную конвертацию схемы и строк для каждого сервиса. + +Для **хранилища паролей** и **системы контроля версий** это риск, который +нельзя проверить простым запуском сервиса: сервис поднимется, но проверить, +что все записи перенесены без искажений, можно только вручную и вместе с вами. + +Это ровно то расхождение плана с реальностью, при котором я обязан +остановиться. **Я не стал писать конвертер для хранилища паролей ночью.** + +### Immich + +База 95 МБ на SQL_ASCII. Виртуалка 104 доступна по SSH (порт 22 открыт на +192.168.1.104), но вход по ключу не проходит, а агент гостя не установлен. +Перенос требует либо доступа, либо вашего решения об остановке виртуалки. + +### Служебная база `postgres` + +Перевести нельзя: PostgreSQL запрещает переименовывать эту базу. +В ней нет таблиц, прикладных данных она не хранит — оставлена как есть. +Предохранитель это поймал и остановил работу без изменений. + +--- + +## 4. Что требует вашего решения + +1. **Как переносить файловые базы.** Варианты: + - писать конвертер по одной базе, начиная с самой простой (Grafana), + с проверкой каждой; + - оставить сервисы на файловых базах, обеспечив им резервное копирование; + - переносить выборочно: те, где это даёт пользу. + +2. **Immich** — нужен доступ к виртуалке или согласие на её остановку. + +3. **Удалять ли 13 копий до переноса** (258 МБ). Они оставлены как откат. + Предлагаю сохранить сутки, затем убрать. + +4. **Диск CT 134 (Prometheus) достиг 80%** — обнаружено попутно. Растут + данные мониторинга. Требует настройки хранения. + +5. **Проверка отката для новых баз** показала: восстановление работает. + Но проверять его нужно регулярно, а не один раз. + +--- + +## 5. Цифры + +| Показатель | До спринта | После | +|---|---|---| +| Баз на UTF8 | 3 из 18 | **15 из 17** | +| Баз с правильной русской локалью | 0 | **15** | +| Старый кластер PostgreSQL 14 | 381 МБ | удалён | +| Мёртвые файловые базы | 99 МБ | убраны в карантин | +| Осиротевшая база gitea | 30 МБ | удалена | +| Свободно в контейнере баз | 5,9 ГБ | **6,1 ГБ** | +| Пул томов | 36,5% | **36,6%** | + +--- + +## 6. Что осталось незавершённым в журнале + +Этапы 4 (перенос файловых баз), 5 (двойной Paperless), 6 (Gitea), +7 (Uptime Kuma) — отложены до вашего решения по причине из раздела 3. +Их статус в журнале: ⏸. + +Всё, что отмечено ✅, проверено и работает. +Всё, что отмечено ⏸, не тронуто.