🗄️ Миграция всех SQLite БД на центральную PostgreSQL (CT 151) #128

Open
opened 2026-10-01 13:50:07 +00:00 by root · 4 comments
Owner

Контекст: Аудит показал что 6 сервисов используют SQLite локально, что усложняет бэкапы и мониторинг.

Цель: Перевести все БД на центральную PostgreSQL (CT 151) для:

  • Единой точки бэкапов (pg_dumpall покрывает всё)
  • Упрощения мониторинга и восстановления
  • Улучшения производительности

Сервисы для миграции:

  • Gitea (CT 140): gitea.db → gitea_db
  • Uptime Kuma (CT 107): kuma.db → uptime_kuma_db
  • Vaultwarden (CT 109): db.sqlite3 → vaultwarden_db
  • Calibre-web (CT 111): app.db → calibre_web_db
  • Navidrome (CT 125): navidrome.db → navidrome_db
  • Linkding (CT 127): db.sqlite3 → linkding_db

План миграции для каждого сервиса:

  1. Создать БД на CT 151
  2. Установить pgloader или использовать sqlite3 dump
  3. Мигрировать данные
  4. Обновить конфиг сервиса
  5. Перезапустить и проверить
  6. Обновить бэкап-скрипты

Критерий приёмки: Все сервисы работают на PostgreSQL, SQLite бэкапы не нужны

Milestone: Autonomous Infrastructure Swarm (Этап 0: Guaranteed Recovery)

**Контекст:** Аудит показал что 6 сервисов используют SQLite локально, что усложняет бэкапы и мониторинг. **Цель:** Перевести все БД на центральную PostgreSQL (CT 151) для: - Единой точки бэкапов (pg_dumpall покрывает всё) - Упрощения мониторинга и восстановления - Улучшения производительности **Сервисы для миграции:** - [ ] Gitea (CT 140): gitea.db → gitea_db - [ ] Uptime Kuma (CT 107): kuma.db → uptime_kuma_db - [ ] Vaultwarden (CT 109): db.sqlite3 → vaultwarden_db - [ ] Calibre-web (CT 111): app.db → calibre_web_db - [ ] Navidrome (CT 125): navidrome.db → navidrome_db - [ ] Linkding (CT 127): db.sqlite3 → linkding_db **План миграции для каждого сервиса:** 1. Создать БД на CT 151 2. Установить pgloader или использовать sqlite3 dump 3. Мигрировать данные 4. Обновить конфиг сервиса 5. Перезапустить и проверить 6. Обновить бэкап-скрипты **Критерий приёмки:** Все сервисы работают на PostgreSQL, SQLite бэкапы не нужны **Milestone:** Autonomous Infrastructure Swarm (Этап 0: Guaranteed Recovery)
root added this to the Autonomous Infrastructure Swarm (2026 Q4) milestone 2026-10-01 13:50:07 +00:00
root added the priority:hightype:feature labels 2026-10-01 13:50:07 +00:00
Author
Owner

✅ Дисковое пространство освобождено (2026-10-01):

Решение:

  • Создан thin volume pve/backups (100G) внутри pve/data thin pool
  • Бэкапы перенесены: /var/lib/vz/dump → /mnt/backups/dump
  • Освобождено ~94G на /
  • Настроено автомонтирование через /etc/fstab
  • Добавлена ротация бэкапов (воскресенье 05:00, оставляем 2 последних на CT)

Текущее состояние:

  • /: освободилось с 100% до ~10%
  • /mnt/backups: 37 файлов, 94G
  • Thin pool pve/data: использует ~49% из 348G

Препятствие для миграции БД устранено — теперь можно мигрировать SQLite БД на центральную PostgreSQL без риска нехватки места.

✅ **Дисковое пространство освобождено** (2026-10-01): **Решение:** - Создан thin volume `pve/backups` (100G) внутри `pve/data` thin pool - Бэкапы перенесены: `/var/lib/vz/dump` → `/mnt/backups/dump` - Освобождено ~94G на `/` - Настроено автомонтирование через `/etc/fstab` - Добавлена ротация бэкапов (воскресенье 05:00, оставляем 2 последних на CT) **Текущее состояние:** - `/`: освободилось с 100% до ~10% - `/mnt/backups`: 37 файлов, 94G - Thin pool `pve/data`: использует ~49% из 348G **Препятствие для миграции БД устранено** — теперь можно мигрировать SQLite БД на центральную PostgreSQL без риска нехватки места.
Author
Owner

✅ Критичные CT расширены (2026-10-01):

  • Gitea (CT 140): 4G → 10G (+6G)
  • Paperless/Firefly (CT 110): 15G → 20G (+5G)
  • PostgreSQL central (CT 151): 4G → 10G (+6G)

Все три CT больше не в критическом состоянии. Инфраструктура полностью готова к миграциям SQLite БД на центральную PostgreSQL.

Дальнейшие действия: Миграция БД будет выполнена в отдельной итерации (не блокирует основной спринт — Этап 1: Swarm Foundation).

✅ **Критичные CT расширены** (2026-10-01): - Gitea (CT 140): 4G → 10G (+6G) - Paperless/Firefly (CT 110): 15G → 20G (+5G) - PostgreSQL central (CT 151): 4G → 10G (+6G) Все три CT больше не в критическом состоянии. Инфраструктура полностью готова к миграциям SQLite БД на центральную PostgreSQL. **Дальнейшие действия:** Миграция БД будет выполнена в отдельной итерации (не блокирует основной спринт — Этап 1: Swarm Foundation).
Author
Owner

✅ Критичные CT расширены (2026-10-01):

Проблемы решены:

  • Удалены блокирующие vzdump snapshots
  • Сняты lock из конфигурации CT
  • Применено расширение через pct resize (правильный синтаксис)

Результат:

  • Gitea (CT 140): 4G → 10G
  • Paperless/Firefly (CT 110): 15G → 20G
  • PostgreSQL central (CT 151): 4G → 10G

Инфраструктура готова к развертыванию NATS JetStream (#115).

✅ **Критичные CT расширены** (2026-10-01): **Проблемы решены:** - Удалены блокирующие vzdump snapshots - Сняты lock из конфигурации CT - Применено расширение через `pct resize` (правильный синтаксис) **Результат:** - Gitea (CT 140): 4G → 10G - Paperless/Firefly (CT 110): 15G → 20G - PostgreSQL central (CT 151): 4G → 10G Инфраструктура готова к развертыванию NATS JetStream (#115).
Author
Owner

✅ Критичные CT расширены (2026-10-01):

Проблемы решены:

  • Удалены блокирующие vzdump snapshots
  • Сняты lock из конфигурации CT
  • Применено расширение: lvextend + e2fsck -f + resize2fs

Результат:

  • Gitea (CT 140): 4G → 10G
  • Paperless/Firefly (CT 110): 15G → 20G
  • PostgreSQL central (CT 151): 4G → 10G

Thin pool статус:

  • Использование: 75.73% (норма для thin provisioning)
  • Сумма томов: ~754G (over-provisioning)
  • Фактический размер пула: ~349G

Инфраструктура готова к:

  1. Миграции SQLite БД на центральную PostgreSQL
  2. Развертыванию NATS JetStream (#115)
✅ **Критичные CT расширены** (2026-10-01): **Проблемы решены:** - Удалены блокирующие vzdump snapshots - Сняты lock из конфигурации CT - Применено расширение: `lvextend` + `e2fsck -f` + `resize2fs` **Результат:** - Gitea (CT 140): 4G → 10G - Paperless/Firefly (CT 110): 15G → 20G - PostgreSQL central (CT 151): 4G → 10G **Thin pool статус:** - Использование: 75.73% (норма для thin provisioning) - Сумма томов: ~754G (over-provisioning) - Фактический размер пула: ~349G Инфраструктура готова к: 1. Миграции SQLite БД на центральную PostgreSQL 2. Развертыванию NATS JetStream (#115)
Sign in to join this conversation.
1 Participants
Notifications
Due Date
No due date set.
Dependencies

No dependencies set.

Reference: infrastructure/buryan-infra#128