Commit Graph
8 Commits
Author SHA1 Message Date
root fcdf1b84ca Authentik 2026.8.4: обновление завершено, база переведена в UTF8
Доведено до последней версии: 2025.4 (апрель 2025) -> 2026.8.4.
18 месяцев обновлений.

ИТОГ: пользователей 10, приложений 23, провайдеров 24, групп 19,
миграций 556 -> 777, кодировка UTF8. Все 27 доменов отвечают,
наблюдение 60 проверок без провалов, перезапусков 0.

БЛОКЕРОМ БЫЛА КОДИРОВКА SQL_ASCII: 2026.8 требует UTF8 и висел на
«waiting to acquire database lock» — не падал, а замирал.

КАК ПЕРЕВОДИЛИ (безопасно, без риска для данных):
 1. дамп с --encoding=UTF8 (конвертация на выгрузке);
 2. ТЕСТОВАЯ база authentik_utf8_test с ENCODING UTF8 TEMPLATE template0;
 3. заливка дампа в неё;
 4. сравнение: 215 таблиц против 215, пользователи 10/10, группы 18/18,
    приложения 23/23, провайдеры 24/24, миграции 718/718;
 5. контрольная сумма данных пользователей (md5 склейки
    username/name/email) — совпала полностью;
 6. проверено наличие не-ASCII текста: 0 значений в ключевых колонках —
    риск порчи текста нулевой;
 7. только потом переключение: старая база -> authentik_db_ascii_backup,
    тестовая -> рабочая. Это переименование, а не копирование:
    мгновенно и обратимо.

После этого 2026.8.4 поднялся с первого запуска за 60 секунд.

ОСТАЛОСЬ НА ДИСКЕ: база ascii_backup, дампы до каждого шага, версия
закреплена по digest.
2026-10-18 11:22:12 +03:00
root 7ec318616d Authentik: 2025.4 -> 2026.5.7 (13 месяцев обновлений), найден блокер 2026.8
Ступенчатый подход сработал:
  2025.12.6  — прошло
  2026.2.7   — прошло
  2026.5.7   — прошло
  2026.8.4   — зависает

ИТОГО: апрель 2025 -> май 2026. Данные целы: 10 пользователей,
23 приложения, 24 OAuth2-провайдера, 718 миграций. Все 26 доменов
отвечают, наблюдение 60 проверок без провалов, состояние стабильно.

ПОЧЕМУ СТУПЕНИ ПОМОГЛИ: прямой прыжок 2025.12.6 -> 2026.8.4 виснет, а
промежуточные версии встали с первого запуска. Значит проблема не в
ресурсах и не в правах, а в конкретном переходе.

ПРИЧИНА ЗАВИСАНИЯ 2026.8 — КОДИРОВКА БАЗЫ. Authentik предупреждает:
«PostgreSQL Server encoding is not UTF8: SQL_ASCII». Проверено:
рабочая база authentik_db — SQL_ASCII, а 25 других баз сервера — UTF8.
Там же лежат базы *_pre_utf8_20261014_* — следы НЕЗАВЕРШЁННОГО перевода
в UTF8, сделанного 14 октября. 2026.8 требует UTF8 и виснет на
преобразовании.

СЛЕДУЮЩИЙ ШАГ (задача 1.20): перевести authentik_db в UTF8 отдельной
операцией — дамп с --encoding=UTF8, новая база с TEMPLATE template0,
заливка, проверка кириллицы и счётчиков, переключение приложения. И
только потом 2026.8.4. Не смешивал с обновлением версии: это уже
миграция данных, а смешивать два риска в одной операции нельзя.

НАДЁЖНОСТЬ: версия закреплена по digest; перед каждым шагом снимался
дамп; порядок откката отработан и проверен (версия + база, с проверкой
схемы); память CT 114 — 4096 МБ.
2026-10-18 02:21:15 +03:00
root f2e0c7ade7 Authentik обновлён: 2025.4 -> 2025.12.6 (18 месяцев обновлений)
Окно проведено по решению владельца. ИТОГ: обновление ВЫПОЛНЕНО.

БЫЛО: образ от 8 апреля 2025 (2025.4), 18 месяцев без обновлений —
:Docker-тег latest не существует, поэтому pull всегда падал, а скрипт
обновления молча объявлял успех.
СТАЛО: 2025.12.6, последняя версия 2025 года.

ДАННЫЕ ЦЕЛЫ: 10 пользователей, 23 приложения, 24 OAuth2-провайдера.
Все 28 доменов отвечают, наблюдение 60 проверок без провалов, состояние
стабильно через 2 и 4 минуты.

ТРИ ПРЕПЯТСТВИЯ, КОТОРЫЕ ПРИШЛОСЬ СНЯТЬ:
1. ПРАВА НА ТАБЛИЦЫ: таблицы базы принадлежат роли authentik, а
   приложение ходит как authentik_user; миграции меняют структуру и
   требовали прав владельца. Выдано членство роли.
2. ПОРЯДОК ВЕРСИЙ: Authentik запрещает прыгать через мажор
   («Major version skips are not allowed»). Обязательный порядок:
   2025.4 -> 2025.12.6 -> 2026.8.4.
3. ПАМЯТЬ: при 2048 МБ миграция стояла на «waiting to acquire database
   lock». После подъёма до 4096 МБ обновление прошло с первого запуска.

ОСТАЛОСЬ: 2026.8.4 снова зависает на блокировке даже при 4 ГБ. Откат на
2025.12.6 работает штатно. Нужно отдельное окно и разбор конкретной
миграции. Не срочно: 2025.12.6 — последняя версия 2025 года.

ЗАЩИТА: версия закреплена по digest (случайный pull не подсунет
нерабочую), дамп базы до окна сохранён, членство роли выдано.

МОИ ОШИБКИ В ОКНЕ (записаны в документ):
  * откатил версию без отката базы -> схема новее приложения -> вход 502;
  * не проверил результат восстановления (psql от postgres, файл только
    для root) — приложение упало на схеме;
  * снял свою же сессию восстановления, получив полусостояние.
Правило: откатывать версию и базу ВМЕСТЕ, после восстановления
проверять схему, перед завершением сессии смотреть, чей это запрос.
2026-10-17 19:16:29 +03:00
root a04259fcc6 Authentik: окно проведено, три препятствия найдены, служба восстановлена
Владелец: «окно для Authentik делаем, это важно». Проведено.
ИТОГ: служба работает, обновление не выполнено — найдены три
конкретные препятствия, два сняты.

1. ПРАВА НА ТАБЛИЦЫ (снято). Миграции падали:
   «must be owner of table authentik_brands_brand». Таблицы базы
   authentik_db принадлежат роли authentik, а приложение ходит как
   authentik_user. Старая версия структуру не меняла, поэтому проблема
   была невидима годами. Выдано членство роли — обратимо.

2. ПОРЯДОК ВЕРСИЙ (учтено). «Major version skips are not allowed:
   from 2025.12.6 to 2026.8.4». Прыгать через мажор нельзя, порядок
   обязателен: 2025.4 -> 2025.12.6 -> 2026.8.4.

3. МИГРАЦИЯ ЗАВИСАЕТ (не снято). После исправления прав 2025.12.6
   встала на «waiting to acquire database lock» на 20+ минут. Проверено
   и исключено: подготовленных транзакций нет, блокировок нет, зависших
   сессий нет, права выданы. Остаётся память: CT 114 имеет 2048 МБ, а у
   Authentik 2025.12 требования выше. Следующий шаг — поднять до 4 ГБ.

МОИ ОШИБКИ ПРИ ОТКАТЕ (записаны в документ):
  * откат версии приложения без отката базы оставил схему новее
    приложения -> вход отдавал 502 (session_key vs session_id);
  * восстановление из дампа не сработало молча: psql шёл от postgres, а
    файл был доступен только root; я не проверил результат;
  * завершая «зависшие» сессии, снял ту, которая была самим
    восстановлением.

ВОССТАНОВЛЕНО: база пересоздана и залита из дампа, снятого до окна.
Проверено: 165 таблиц, 10 пользователей, 23 приложения, 556 миграций,
колонка session_key на месте, страница входа 200, все домены отвечают,
наблюдение 60 проверок без провалов.

Дампы сохранены: рабочий и «сломанный». Версия приложения закреплена по
digest, чтобы случайный pull не подсунет нерабочую.
2026-10-17 18:44:21 +03:00
root 9515ca5f9b openclaw: один экземпляр, версия закреплена, домен исправлен
Задача владельца: если экземпляров два — сделать один, самый свежий.

БЫЛО: рабочий openclaw-old (44 ч) и падавший новый; в compose НЕ БЫЛО
монтирования данных, поэтому любой новый контейнер стартовал без
состояния и падал.

СДЕЛАНО: добавлено монтирование /opt/openclaw -> /home/node/.openclaw,
старый контейнер удалён, поднят ОДИН контейнер с именем openclaw.

ПОЧЕМУ НЕ НА СВЕЖЕЙ ВЕРСИИ: свежий образ при запуске с существующим
состоянием перезапускается по кругу — 21 перезапуск за 6 минут, код
выхода 0. В журнале прямо указано, чего не хватает:
  «Fix: set commands.ownerAllowFrom to your channel user id»
Новая версия изменила требования к конфигурации. Это не поломка, а
необходимая миграция настроек, и делать её вслепую на живой службе
нельзя. Поэтому: экземпляр один и работает, версия ЗАКРЕПЛЕНА по digest
в compose (случайный pull не подсунет нерабочую версию), обновление
вынесено в задачу 5.9.

ПОПУТНО: домен openclaw.buryans.ru проксировал на порт 8080, а служба
слушает 18789 — снаружи и дома был 404. Исправлено в двух местах
(VPS и хост PVE), теперь 200.

Наблюдение: 60 проверок без провалов.
2026-10-17 16:25:01 +03:00
root 739d61869b Пул освобождён на 35 ГБ (TRIM), добавлено зеркало образов, найден CT 111
без интернета

ГЛАВНОЕ ОТКРЫТИЕ: тонкий пул был заполнен на 80,5%, снимки не создавались,
обновления стояли. Оказалось — место не «занято данными», а ЗАВИСЛО:
LVM не знает об удалённых внутри контейнеров файлах, пока ей не передадут
TRIM.
После pct fstrim по всем контейнерам: пул 80,47% -> 70,29%, около 35 ГБ
освободилось. Где висело больше всего: CT 113 — 93,3 ГБ, CT 155 — 43 ГБ,
CT 105 — 13,7 ГБ, CT 115 — 11,7 ГБ (тот самый openclaw).
Поставлен в расписание: еженедельно, /etc/cron.d/buryan-trim. Без этого
пул снова забьётся невидимым мусором.

ЗЕРКАЛО РЕЕСТРА: скачивание образов из дома нестабильно (Docker Hub то
отвечает, то висит по таймауту). Во все 26 контейнеров добавлено зеркало
mirror.gcr.io (официальное зеркало Docker Hub). Docker сначала пробует
основной реестр, зеркало — только при недоступности. CT 108 заработал.

ЦЕНА МОЕЙ ОШИБКИ В ДИАГНОСТИКЕ: я решил, что адреса 100.51.15.102 и
100.60.105.131 — это Tailscale. Проверил через 1.1.1.1 — те же адреса,
это собственный CDN Docker Hub. Догадку отбросил, причину нашёл дальше.

CT 111 БЕЗ ИНТЕРНЕТА. Из контейнера доступны все хосты локальной сети,
кроме шлюза 192.168.1.1. Проверено и исключено: маршруты, ARP, политики
маршрутизации, правила по IP/MAC/интерфейсу на хосте, firewall Proxmox
(отключён), цепочки Tailscale (мостовой трафик минует iptables), второй
адрес на том же интерфейсе (тоже нет связи) — значит дело не в адресе.
Вывод: блокирует роутер, а роутер по решению владельца не трогаем.
Документ с вариантами решения: docs/CT111-NO-INTERNET.md
2026-10-17 16:02:14 +03:00
root 7347cf476a Автоматика: профиль безопасности в одном месте, уборка по расписанию,
проверка входа (1.2, 1.7, 4.3.3)

1.2 ПРОФИЛЬ БЕЗОПАСНОСТИ. apparmor=unconfined — ослабление изоляции,
нужное только там, где LXC мешает Docker. Такие места легко забыть:
после обновления стека служба просто не поднимается.
Сделан ops/security/apparmor-manage.sh — единственный источник правды:
измеряет, кому обход нужен, показывает где прописан, правит только по
флагу --apply.
ИЗМЕРЕНО (26 контейнеров с Docker): обход нужен только CT 115 и CT 140,
и в обоих уже прописан. Остальным 24 не нужен.

МОЯ ОШИБКА: первая версия проверки запускала docker run hello-world.
Если образа нет локально, Docker идёт в реестр и падает с TLS handshake
timeout — это НЕ про AppArmor. Получил ложное срабатывание на CT 108.
Исправлено: беру локальный образ, считаю «нужен обход» только если в
ошибке есть apparmor.

1.7 УБОРКА ОСТАТКОВ. cleanup-leftovers.sh раз в неделю убирает
контейнеры с -old- в имени, которые остановлены или крутятся в петле,
плюс висячие образы. Работающие не трогает: в CT 115 openclaw-old —
действующий экземпляр. Первый прогон освободил несколько ГБ.
Расписание: /etc/cron.d/buryan-cleanup.

4.3.3 ПРОВЕРКА ВХОДА. Добавлена check_login(): служба может отвечать
302 на корень и не отдавать страницу входа — человек видит пустоту, а
наблюдение молчит. Проверяет код 200 после переходов, непустое тело и
признаки страницы Authentik.
Наблюдение: 59 -> 60 проверок, все проходят.
2026-10-17 15:33:32 +03:00
root 7d7412d80a Раздел 1: двойник compose обезврежен, openclaw разгружен, остатки убраны
Задачи 1.10, 1.11, 1.12.

1.10 ДВОЙНИК COMPOSE У n8n. Рядом с настоящим compose лежал файл
/opt/n8n/docker-compose.yml, которым никто не пользуется: у него ДРУГОЙ
путь данных (/opt/n8n/data — пустая папка) и другая сеть. Запусти его —
получился бы второй n8n с пустыми данными и без ключа шифрования:
внешне работает, а учётные данные «чужие». Файл переименован в
.orphan-20261017. Настоящий compose (/opt/automation-lxc) в порядке.

МОЯ ОШИБКА, которую это вскрыло: я сначала решил, что «compose не
описывает монтирование», и правил не тот файл. Надо было сразу спросить
контейнер, какой файл используется:
  docker inspect <контейнер> --format '{{index .Config.Labels "com.docker.compose.project.config_files"}}'

1.11 OPENCLAW. Падал в петле: база состояния нечитаема, ENOSPC. Причина —
диск в CT 115 был заполнен на 100%. Мусор был НЕ там, где показывал
Docker: /var/lib/docker занимал 1.5 ГБ, а /var/lib/containerd — 21 ГБ,
из которых 12 ГБ — записанный слой самого падающего контейнера. Docker
при этом показывал «возвратно 21.7 ГБ», что вводит в заблуждение: это
его собственный нужный образ.

Сделано: состояние больного контейнера СОХРАНЕНО на хост
(/root/openclaw-broken-state-20261017_122412.tar, 1.67 МБ, база внутри —
проверено), петля остановлена, контейнер удалён. МЕСТО: было 100%, стало
55%, освободилось 11 ГБ. Живой экземпляр openclaw-old не тронут.

Осталось решить (нужно слово владельца): какой экземпляр считать рабочим
— работающий openclaw-old (переименовать) или новый из копии.

1.12 ОСТАТКИ ОТ ОБНОВЛЕНИЙ. Убрано 11 контейнеров: plex, sonarr, radarr,
prowlarr, bazarr, overseerr, tautulli, linkding, prometheus, syncthing
(Exited) и navidrome-old, который КРУТИЛСЯ В ПЕТЛЕ вхолостую.
Оставлено 3 работающих: calibre-web-old, freshrss-old, openclaw-old.
Признак «old» в имени не значит «мусор» — это действующие экземпляры.
Правило записано: удалять только Exited/Created/Restarting.

ПРОВЕРЕНО ПОСЛЕ УБОРКИ: Plex, Sonarr, Radarr, Prowlarr, Overseerr,
Navidrome, Linkding, Prometheus, Syncthing отвечают 200 (Bazarr и
Tautulli — 401, их норма без токена). Наблюдение: 34 проверки, провалов
нет.
2026-10-17 12:24:43 +03:00