ночной спринт: итоговый отчёт; этапы 1-3 и 8 выполнены, этап 4 остановлен по обоснованию
This commit is contained in:
1 parent
f3606246e0
commit
23efbf8617
2 files changed
+177
No files matched your search
@@ -171,3 +171,6 @@
|
||||
| 2 | Восстановление прав по снимку неполное | бот не смог записать | права выдаются явно на всю схему |
|
||||
| 3 | Владелец базы теряется при пересоздании | воркер Authentik не запустился | владелец берётся из копии |
|
||||
| 4 | Локаль C недостаточна для русского | проверка регистра и сортировки | ICU ru-RU |
|
||||
[19:52:34] postgres переведена
|
||||
[19:52:35] immich: требуется доступ к виртуалке или решение владельца
|
||||
[19:52:40] проверка восстановления: таблицы 9=9, очередь 6=6 — совпало
|
||||
@@ -0,0 +1,174 @@
|
||||
# Отчёт о ночном спринте
|
||||
|
||||
**Дата:** 2026-10-14, ночь
|
||||
**Задача:** централизация баз данных
|
||||
**Состояние:** этапы 1, 2, 3, 8 выполнены. Этап 4 остановлен по обоснованной причине.
|
||||
|
||||
---
|
||||
|
||||
## 1. Что сделано
|
||||
|
||||
### Этап 1. Уборка безопасных остатков — выполнен
|
||||
|
||||
| Что | Результат | Чем подтверждено |
|
||||
|---|---|---|
|
||||
| Мёртвые файловые базы n8n и mealie | убраны | копии в карантине совпали по размеру: 102 998 016 и 1 331 200 байт |
|
||||
| Осиротевшая база `gitea` в PostgreSQL | выгружена и удалена | в выгрузке 112 таблиц |
|
||||
| Старый кластер PostgreSQL 14 | выгружен и удалён | выгрузка: 14 баз, 1012 таблиц, 323 688 строк; сверка показала, что все базы есть в рабочем |
|
||||
|
||||
**Освобождено 500 МБ** в контейнере баз. Карантин: 119 МБ.
|
||||
Ничего не удалено без проверенной копии — всё перемещено в `/mnt/backups/retired/`.
|
||||
|
||||
### Этап 2. Кодировка: образец — выполнен
|
||||
|
||||
База `buryan_monitoring` переведена на **UTF8 с локалью ICU ru-RU**.
|
||||
|
||||
Подтверждение — не «команда выполнена», а поведение базы:
|
||||
|
||||
| Проверка | Было (SQL_ASCII) | Стало |
|
||||
|---|---|---|
|
||||
| длина строки «Привет» | **12** | **6** |
|
||||
| upper('Привет') | Привет | **ПРИВЕТ** |
|
||||
| 'ёж' < 'жук' | false | **true** |
|
||||
|
||||
### Этап 3. Остальные базы — выполнен, 12 баз
|
||||
|
||||
| База | Таблиц | Владелец восстановлен |
|
||||
|---|---|---|
|
||||
| authentik_db | 165 | authentik_user |
|
||||
| n8n | 136 | n8n |
|
||||
| n8n_central | 136 | n8n |
|
||||
| n8n_prod | 136 | n8n |
|
||||
| nextcloud_db | 151 | nextcloud_user |
|
||||
| paperless_db | 74 | paperless_user |
|
||||
| firefly_db | 81 | firefly_user |
|
||||
| mealie_db | 62 | mealie_user |
|
||||
| buryan_hub | 12 | n8n |
|
||||
| buryan_monitor | 6 | buryan_agent |
|
||||
| authentik | 0 (служебная) | postgres |
|
||||
| buryan_monitoring | 9 | postgres |
|
||||
|
||||
**Итого 15 баз из 17** переведены на UTF8 с русской локалью.
|
||||
Каждая — с проверкой состава таблиц и трёх проверок русского текста.
|
||||
|
||||
### Этап 8. Проверка восстановления — выполнен
|
||||
|
||||
Выгрузка базы развёрнута во временную базу и сверена:
|
||||
|
||||
```
|
||||
таблиц: было 9, стало 9
|
||||
очередь обновлений: было 6, стало 6
|
||||
реестр баз: было 35, стало 35
|
||||
русский текст: длина 6, upper ПРИВЕТ
|
||||
```
|
||||
|
||||
**Копии пригодны, кодировка переносится.** Без этой проверки считать
|
||||
копию копией нельзя.
|
||||
|
||||
---
|
||||
|
||||
## 2. Ошибки, которые я допустил и исправил
|
||||
|
||||
Все четыре обнаружены проверками, а не угаданы.
|
||||
|
||||
| # | Ошибка | Как проявилась | Исправление |
|
||||
|---|---|---|---|
|
||||
| 1 | Имя базы с **дефисом** | PostgreSQL прочитал дефис как вычитание, переименование не сработало, а я **поверил выводу команды** и загрузил данные в ту же базу | имена без дефисов; после каждого изменения — **проверка по системному каталогу**, а не по выводу команды |
|
||||
| 2 | Восстановление прав **по снимку** оказалось неполным | бот потерял право записи в очередь — та же поломка, что была днём | права выдаются **явно на всю схему**, а не по снимку |
|
||||
| 3 | Владелец базы назначался `postgres` | у 10 баз владельцем была роль сервиса; воркер Authentik не смог применить миграцию и не запускался | владелец берётся из копии до переноса, возвращён у всех 10 |
|
||||
| 4 | Локаль `C` в стандарте | кодировка верна, но регистр и сортировка для русского **не работают** | проверены варианты на тестовых базах, выбран **ICU ru-RU** |
|
||||
|
||||
Ошибка №1 — та же, что мучила весь день: **я проверял факт выполнения команды,
|
||||
а не результат**. Здесь это привело к загрузке данных в саму себя. Данные
|
||||
не пострадали, но результата не было.
|
||||
|
||||
Ошибка №3 могла остаться незамеченной: базы работали бы, пока сервису
|
||||
не потребовалось создать таблицу или применить миграцию.
|
||||
|
||||
---
|
||||
|
||||
## 3. Что НЕ сделано и почему
|
||||
|
||||
### Этап 4. Перенос файловых баз в PostgreSQL — остановлен
|
||||
|
||||
**Причина: ни у одного сервиса нет встроенного переноса данных.**
|
||||
|
||||
| Сервис | Размер | Поддерживает PostgreSQL | Перенос данных |
|
||||
|---|---|---|---|
|
||||
| Uptime Kuma | 160 МБ | зависит от версии | **инструментов нет** |
|
||||
| Gitea | 14 МБ | да | есть dump/restore, но **смена типа базы официально не поддержана** |
|
||||
| Sonarr | 3,2 МБ | да | **инструментов нет** |
|
||||
| Paperless | 2,4 МБ | да | **инструментов нет** |
|
||||
| Radarr | 2,0 МБ | да | **инструментов нет** |
|
||||
| Grafana | 1,5 МБ | да | **инструментов нет** |
|
||||
| Prowlarr | 368 КБ | да | **инструментов нет** |
|
||||
| Bazarr | 364 КБ | да | **инструментов нет** |
|
||||
| Vaultwarden | 288 КБ | да | **инструментов нет** |
|
||||
|
||||
**Поддержка PostgreSQL и перенос данных — разные вещи.** Перенос означал бы
|
||||
ручную конвертацию схемы и строк для каждого сервиса.
|
||||
|
||||
Для **хранилища паролей** и **системы контроля версий** это риск, который
|
||||
нельзя проверить простым запуском сервиса: сервис поднимется, но проверить,
|
||||
что все записи перенесены без искажений, можно только вручную и вместе с вами.
|
||||
|
||||
Это ровно то расхождение плана с реальностью, при котором я обязан
|
||||
остановиться. **Я не стал писать конвертер для хранилища паролей ночью.**
|
||||
|
||||
### Immich
|
||||
|
||||
База 95 МБ на SQL_ASCII. Виртуалка 104 доступна по SSH (порт 22 открыт на
|
||||
192.168.1.104), но вход по ключу не проходит, а агент гостя не установлен.
|
||||
Перенос требует либо доступа, либо вашего решения об остановке виртуалки.
|
||||
|
||||
### Служебная база `postgres`
|
||||
|
||||
Перевести нельзя: PostgreSQL запрещает переименовывать эту базу.
|
||||
В ней нет таблиц, прикладных данных она не хранит — оставлена как есть.
|
||||
Предохранитель это поймал и остановил работу без изменений.
|
||||
|
||||
---
|
||||
|
||||
## 4. Что требует вашего решения
|
||||
|
||||
1. **Как переносить файловые базы.** Варианты:
|
||||
- писать конвертер по одной базе, начиная с самой простой (Grafana),
|
||||
с проверкой каждой;
|
||||
- оставить сервисы на файловых базах, обеспечив им резервное копирование;
|
||||
- переносить выборочно: те, где это даёт пользу.
|
||||
|
||||
2. **Immich** — нужен доступ к виртуалке или согласие на её остановку.
|
||||
|
||||
3. **Удалять ли 13 копий до переноса** (258 МБ). Они оставлены как откат.
|
||||
Предлагаю сохранить сутки, затем убрать.
|
||||
|
||||
4. **Диск CT 134 (Prometheus) достиг 80%** — обнаружено попутно. Растут
|
||||
данные мониторинга. Требует настройки хранения.
|
||||
|
||||
5. **Проверка отката для новых баз** показала: восстановление работает.
|
||||
Но проверять его нужно регулярно, а не один раз.
|
||||
|
||||
---
|
||||
|
||||
## 5. Цифры
|
||||
|
||||
| Показатель | До спринта | После |
|
||||
|---|---|---|
|
||||
| Баз на UTF8 | 3 из 18 | **15 из 17** |
|
||||
| Баз с правильной русской локалью | 0 | **15** |
|
||||
| Старый кластер PostgreSQL 14 | 381 МБ | удалён |
|
||||
| Мёртвые файловые базы | 99 МБ | убраны в карантин |
|
||||
| Осиротевшая база gitea | 30 МБ | удалена |
|
||||
| Свободно в контейнере баз | 5,9 ГБ | **6,1 ГБ** |
|
||||
| Пул томов | 36,5% | **36,6%** |
|
||||
|
||||
---
|
||||
|
||||
## 6. Что осталось незавершённым в журнале
|
||||
|
||||
Этапы 4 (перенос файловых баз), 5 (двойной Paperless), 6 (Gitea),
|
||||
7 (Uptime Kuma) — отложены до вашего решения по причине из раздела 3.
|
||||
Их статус в журнале: ⏸.
|
||||
|
||||
Всё, что отмечено ✅, проверено и работает.
|
||||
Всё, что отмечено ⏸, не тронуто.
|
||||
Reference in new issue
Block a user