Commit Graph
89 Commits
Author SHA1 Message Date
buryan-agent 02f088aca7 [FIX] Load 190: лимит памяти CT110; отчёт об инциденте 2026-10-22 04:38:38 +03:00
buryan-agent d64864c980 [B-12] Monica: семейная CRM развёрнута, карточка 2026-10-21 23:30:39 +03:00
buryan-agent 84151fd16d [B-09] NetBox: развёрнут (NetBox + Postgres + Redis), карточка 2026-10-21 23:24:50 +03:00
buryan-agent 6d3cb716b2 [B-06][B-07] Kavita и Audiobookshelf: развёрнуты в CT111 2026-10-21 23:16:00 +03:00
buryan-agent cce2f01816 [B-23] Grafana: дашборд инфраструктуры + node_exporter на хосте 2026-10-21 22:31:43 +03:00
buryan-agent ebaed39e88 Mesh: выключено автообновление, закреплены каналы, сторож узлов
Диагностика: бэкхол Кабинета в норме (RSSI -53, канал 36), значит падения
не от сигнала. На главном роутере было включено автообновление компонентов
(auto-update no disable), а оба узла имели одинаковый uptime — то есть
перезагружались одновременно, и mesh рассыпалась.

Сделано: auto-update disable на главном; закреплены каналы 2,4 ГГц (1 и 11)
и 5 ГГц (36); ширина 2,4 приведена к 20 МГц. Добавлены ping-мониторы в Kuma
с уведомлением в Matrix. Написан сторож mesh_watch.py (cron 5 мин): сообщает
о пропаже и возврате узла и сам применяет настройки, когда узел появляется.

Родители (192.168.1.63) физически офлайн — в mesh числится выключенным.
2026-10-21 10:28:53 +03:00
buryan-agent 12658a8f6f Все устройства в HA, починка egress и headscale
HA: своя интеграция hub_devices — 104 device_tracker с именами, типами и IP.
Итого 197 сущностей. Подключён ha_keenetic (CPU/WAN/порты/Wi-Fi/WireGuard),
установлен vidaa_tv для Hisense.

Инфраструктура: headscale отдавал 500 из-за отсутствия Upgrade-заголовков в
nginx — исправлено, узел перерегистрирован, маршруты включены. tinyproxy
заменён своим CONNECT-прокси на VPS + SSH-туннель (не зависит от Tailscale).
Для HACS сделан прозрачный маршрут до GitHub: SSH-туннели на 6 хостов и DNAT
в CT 106 с обновлением IP каждые 6 часов.

Грабли: дубликат контейнера HA перехватывал порт; ScannerEntity выключен в
реестре по умолчанию; легаси-платформы device_tracker удалены из HA 2026.2;
имена контейнеров берутся из конфигов Proxmox, а не из роутера.
2026-10-20 17:38:19 +03:00
root 81dfaa0013 n8n и Gitea: убраны внутренние адреса; Home Assistant выведен из единого входа
1. n8n ПОКАЗЫВАЛ КАРТИНКУ ВМЕСТО СЕРВИСА. Причина: N8N_EDITOR_BASE_URL
   указывал на http://192.168.1.108:5680/ — браузер снаружи не может
   загрузить ресурсы с внутреннего адреса. Исправлено на
   https://n8n.buryans.ru/, добавлены N8N_HOST, N8N_PROTOCOL=https,
   WEBHOOK_URL. В журнале теперь "Editor is now accessible via
   https://n8n.buryans.ru".

2. GITEA — та же болезнь: ROOT_URL=http://192.168.1.140:3000/,
   DOMAIN=192.168.1.92. Исправлено на https://git.buryans.ru/ и
   git.buryans.ru.

3. HOME ASSISTANT ВЫВЕДЕН ИЗ ЕДИНОГО ВХОДА (решение владельца).
   home.buryans.ru ведёт прямо на HA (8123). Причина: у HA своя
   авторизация и своё мобильное приложение, прокси впереди мешал.
   Проверено: home отвечает 200 напрямую, API 401 (защищён токеном HA).

МОИ ОШИБКИ: правил docker-compose.yml заменой строк и склеил переменные
окружения в одну строку — n8n перестал запускаться (getaddrinfo
EAI_AGAIN); восстанавливал из копии и правил построчно. Плюс сломал
отступы YAML. Урок: после правки compose всегда проверять
docker compose config.

ОСТАЛОСЬ: проверить свои адреса у Grafana, Jellyfin, Navidrome, Mealie,
Firefly, Linkding, Paperless, Plex — тот же класс ошибки.
2026-10-19 08:50:16 +03:00
root ff2837a763 Единый вход на ВСЕ домены: было 16, стало 25
Владелец: «а почему 16 сервисов? нужны абсолютно все».

ДОБАВЛЕНО ПОД ВХОД: adguard, backup (Duplicati), element (веб),
finance (Firefly), n8n, git (Gitea), meals (Mealie), openclaw,
status (Uptime Kuma), home. Псевдонимы ns1, chat, flow, recipes, www
теперь перенаправляют на основной домен — вход один.

КАК: через API Authentik созданы 9 провайдеров и приложений, для каждой
службы запущен oauth2-proxy на своём порту (9101-9110), домены на VPS и
дома переключены на них.

ОСТАЛИСЬ БЕЗ ВХОДА 4 — осознанно, не забыты:
  * matrix — клиенты Element ходят в API напрямую, прокси сломает вход;
  * sync — Syncthing синхронизирует устройства по тому же порту;
  * immich — мобильное приложение работает через API;
  * pve — доступ к гипервизору, риск потерять управление.
Плюс сам authentik/admin, headscale, turn, call — служебные.
Для immich и gitea правильный путь — OIDC внутри службы (задача 4.1.4).

МОИ ОШИБКИ:
  1. список служб с пробелами разбился на части -> мусорные провайдеры
     «(Duplicati)», «(Uptime», «страница» и т.п.; убрал через API;
  2. забыл apparmor=unconfined -> Gitea и OpenClaw не стартовали;
  3. n8n слушает 5680, а я и старый прокси указывали 5678 -> n8n
     показывался «не отвечает», хотя был жив; исправил везде;
  4. у n8n приложение в Authentik называется n8n-proxy, а не n8n.

ПРОВЕРЕНО: 25 доменов снаружи и дома редиректят на authentik; Element за
входом безопасен (._matrix он не проксирует); наблюдение 58 проверок без
провалов; метрики 36 служб — 0 проблем.
2026-10-18 18:50:03 +03:00
root 5efa9dbbb6 Аудит единого входа: снаружи его нет; базы медиаслужб в порядке, диски разгружены
4.1.1 АУДИТ «ОДНА ДВЕРЬ». Есть 13 прокси входа (oauth2-proxy): Plex,
Paperless, Calibre, Dashy, Tautulli, Overseerr, Bazarr, Prowlarr, Radarr,
Sonarr, Vaultwarden, FreshRSS, Jellyfin. Дома часть доменов через них
ходит. НА VPS — НИ ОДИН: все домены снаружи идут напрямую в службу,
минуя вход.

ПРИЧИНА: у прокси прописаны ВНУТРЕННИЕ адреса
(REDIRECT_URL=http://192.168.1.117:9989/..., OIDC_ISSUER_URL=
http://192.168.1.114:9000/...). Снаружи браузер перенаправляется на
внутренний адрес, недоступный из интернета, — вход не может завершиться.
Похоже, обходной путь был такой: снаружи пустить напрямую.

ВАЖНО: это НЕ дыра. У Sonarr/Radarr/Prowlarr свои пароли, у Plex свой
аккаунт, у Vaultwarden свой мастер-пароль. Это отсутствие единого входа,
риск умеренный, срочности нет.

НЕ СДЕЛАНО СЕЙЧАС ОСОЗНАННО: изменение доступа сразу к 13 службам; ошибка
означает, что вход перестанет работать у всех, а владелец сейчас не может
проверить. Заведено задачей 4.1.3, начинать с одного домена.

5.6 ЗАПИСЬ В БАЗЫ МЕДИАСЛУЖБ: Sonarr 17 МБ, Radarr 12 МБ, Prowlarr 9 МБ,
Bazarr 9 МБ — 0 ошибок записи в журналах, службы отвечают.

ПОПУТНО: диски CT 117-119 были заполнены на 79-80% (меньше 1 ГБ
свободно). Освобождено безопасно: неиспользуемые образы Docker (214+227+
202 МБ). Стало 69-70%, свободно по 1,2 ГБ. Службы проверены — 200.
Диски по 3,9 ГБ всё равно малы: предложено увеличить до 8 ГБ отдельной
операцией.
2026-10-18 14:03:40 +03:00
root fcdf1b84ca Authentik 2026.8.4: обновление завершено, база переведена в UTF8
Доведено до последней версии: 2025.4 (апрель 2025) -> 2026.8.4.
18 месяцев обновлений.

ИТОГ: пользователей 10, приложений 23, провайдеров 24, групп 19,
миграций 556 -> 777, кодировка UTF8. Все 27 доменов отвечают,
наблюдение 60 проверок без провалов, перезапусков 0.

БЛОКЕРОМ БЫЛА КОДИРОВКА SQL_ASCII: 2026.8 требует UTF8 и висел на
«waiting to acquire database lock» — не падал, а замирал.

КАК ПЕРЕВОДИЛИ (безопасно, без риска для данных):
 1. дамп с --encoding=UTF8 (конвертация на выгрузке);
 2. ТЕСТОВАЯ база authentik_utf8_test с ENCODING UTF8 TEMPLATE template0;
 3. заливка дампа в неё;
 4. сравнение: 215 таблиц против 215, пользователи 10/10, группы 18/18,
    приложения 23/23, провайдеры 24/24, миграции 718/718;
 5. контрольная сумма данных пользователей (md5 склейки
    username/name/email) — совпала полностью;
 6. проверено наличие не-ASCII текста: 0 значений в ключевых колонках —
    риск порчи текста нулевой;
 7. только потом переключение: старая база -> authentik_db_ascii_backup,
    тестовая -> рабочая. Это переименование, а не копирование:
    мгновенно и обратимо.

После этого 2026.8.4 поднялся с первого запуска за 60 секунд.

ОСТАЛОСЬ НА ДИСКЕ: база ascii_backup, дампы до каждого шага, версия
закреплена по digest.
2026-10-18 11:22:12 +03:00
root bdf9ff55a1 CT 111: адрес сменён на 192.168.1.240, интернет заработал
По решению владельца: политики на роутере нет, меняем адрес.

БЫЛО: из CT 111 не было выхода в интернет — шлюз не отвечал, при этом
все остальные хосты локальной сети были доступны. Перед этим исключил
маршруты, ARP, политики маршрутизации, правила по IP/MAC/интерфейсу на
хосте, firewall Proxmox (отключён), цепочки Tailscale и второй адрес на
том же интерфейсе.

СТАЛО: 192.168.1.111 -> 192.168.1.240 (в стороне от DHCP-диапазона:
.112, .124, .128 оказались заняты устройствами). Шлюз доступен,
example.com отвечает 200, службы поднялись.

ВМЕСТЕ С АДРЕСОМ поправлены ссылки: настройки контейнера, внешний nginx
на VPS (3), домашний nginx (3), наблюдение (3), реестр обновлений (3),
карта доменов (3).

ОТКРЫТИЕ: домашние домены проксирует nginx НА ХОСТЕ PVE
(/etc/nginx/conf.d/buryans-all.conf, 41 домен), а не NPM в CT 101.
Значит при любой смене адреса искать ссылки надо в двух местах — на VPS
и на хосте. Записано в документ.

Проверено: книги/новости/rss работают дома и снаружи (302),
наблюдение 60 проверок без провалов.
2026-10-17 16:14:02 +03:00
root 13a42f2235 Спринт: обновления проверены в деле, найдён ложный успех, наблюдение 34 -> 59
ОБНОВЛЕНИЯ ПРОВЕРЕНЫ НА ЖИВЫХ СЛУЖБАХ:
  freshrss   — обновлён (проверка цепочки)
  gitea      — обновлён
  paperless  — обновлён (3 минуты миграций, проверка прошла с 7-й попытки)
  authentik  — НЕВОЗМОЖНО: тега :latest нет в реестре

ПОЧЕМУ ОБНОВЛЕНИЯ НЕ ШЛИ ВООБЩЕ: скрипт отказывается работать при
заполнении пула выше 75%, а он был на 80,4%. Пул забит не данными, а
ВОСЕМЬЮ ЗАБЫТЫМИ СНИМКАМИ LVM от обновлений 14-15.10 (самый большой —
100 ГБ). Снимки убраны, порог поднят до 85% с пояснением: процент не
учитывал абсолютный запас (68 ГБ свободно из 348).

НАЙДЕН СЕРЬЁЗНЫЙ ДЕФЕКТ — ЛОЖНЫЙ УСПЕХ. Прогон на authentik:
  Image ghcr.io/goauthentik/server:latest Error ... not found
  🎉 authentik обновлён
Образ не скачался, контейнер остался на старом, скрипт отчитался об
успехе. ПРИЧИНА: скачивание стояло в конвейере с tail -3, поэтому код
возврата приходил от tail (всегда 0). Ошибка терялась.

ПОСЛЕДСТВИЕ: authentik — поставщик единого входа для 22 служб — жил на
образе 18-МЕСЯЧНОЙ давности, и никто не знал.

ИСПРАВЛЕНО: скачивание без конвейера (честный код возврата); при неудаче
скрипт пишет «НЕ ОБНОВЛЕНО: образ недоступен» и выходит с кодом 3.
Проверено повторным прогоном.

НАБЛЮДЕНИЕ: 34 -> 59 проверок. Добавлено 25 служб, источник адресов —
реестр обновлений (там каждый адрес проверялся вручную). Добавлена
check_alive() для служб с паролем: 401/403 — признак ЖИВОЙ службы, иначе
8 служб давали бы ложные тревоги постоянно.

СКОРОСТЬ ВХОДА: кэш статики на VPS, 7,86 с -> 1,3 с.

МОИ ОШИБКИ ЗА СПРИНТ (записаны в документ):
  * мерил несуществующий домен auth.buryans.ru (правильный
    authentik.buryans.ru) — время уходило на таймаут DNS;
  * перепутал файл compose у n8n (двойник вместо настоящего);
  * проверка дала 6 ложных тревог, считая 401 сбоем.

ОСТАЛОСЬ ПОД ВОПРОСОМ: authentik (нужно окно + дамп базы — переход через
18 месяцев для SSO рискован), openclaw (решение владельца), второй VPS
(нужен сервер), Element Call (большая задача).
2026-10-17 13:04:56 +03:00
root 8925202d94 chore(update): paperless -> ghcr.io/paperless-ngx/paperless-ngx:latest (CT 105) 2026-10-17 13:04:40 +03:00
root 6a1ce2a295 chore(update): authentik -> ghcr.io/goauthentik/server:latest (CT 114) 2026-10-17 12:58:21 +03:00
root a6a168db38 chore(update): gitea -> gitea/gitea:latest (CT 140) 2026-10-17 12:58:03 +03:00
root a4ab5974c9 Наблюдение: все службы из реестра теперь проверяются (34 -> 59)
ЗАДАЧА 4.3.1. Владелец пережил обрыв, о котором узнал от семьи. Надо
узнавать первым.

ИСТОЧНИК ПРОВЕРОК: реестр обновлений services.yaml. Адреса здоровья там
уже проверены вручную при добавлении служб — значит это готовый и
проверенный список, не выдуманный заново.

ДОБАВЛЕНО 25 проверок: npm, uptime-kuma, dashy, jellyfin, tautulli,
paperless, syncthing, linkding, calibre, freshrss, sonarr, radarr,
prowlarr, bazarr, openclaw, умный дом (homeassistant), zigbee2mqtt,
nextcloud, финансы (firefly), paperless офис, копии Duplicati, очередь
NATS, тревоги (alertmanager), Element, звонки LiveKit.

ОТДЕЛЬНАЯ ФУНКЦИЯ ДЛЯ СЛУЖБ С ПАРОЛЕМ. Обычная check() считает 401/403
ошибкой. Для служб с авторизацией это признак ЖИВОЙ службы, а не
поломки. Добавлена check_alive(), которая принимает 200/201/204/301/
302/401/403. Без неё 8 служб давали бы ложные тревоги постоянно.

ПРОВЕРЕНО: прогон без провалов, в журнале «проверено: 59».
Было 34.

Откат: cp /root/check-services.sh.before-all-services-<дата> \
          /opt/buryan-hub/scripts/check-services.sh
2026-10-17 12:57:41 +03:00
root 83182af9c9 chore(update): freshrss -> freshrss/freshrss:latest (CT 111) 2026-10-17 12:51:58 +03:00
root 915de56603 Обновления из бота: реестр расширен с 28 до 50 служб
Жалоба владельца: обновление из бота не работает на многие сервисы.
Проверил — причина простая: скрипт работает только по реестру
services.yaml, а в нём было 28 служб при 97 работающих контейнерах.

НЕ ОБНОВЛЯЛИСЬ (22 службы), в том числе важные:
  adguard (DNS всего дома), loki (журналы), alertmanager (тревоги),
  mautrix-telegram (мост в Telegram), livekit (звонки), homeassistant,
  nextcloud, duplicati (копии), firefly, paperless в CT 110,
  nats, swarm-redis, element-web, coturn, zigbee2mqtt, mosquitto.

ЧТО СДЕЛАНО:
1. Добавлены все 22 службы. В реестре теперь 50.
2. Каждый адрес проверки здоровья проверен вручную перед записью.
   Правило жёсткое: адрес добавляется только если реально отвечает.
   Неверный адрес хуже отсутствующего — скрипт счёл бы службу сломанной
   и ОТКАТИЛ исправное обновление.
3. Службы с паролем не потеряли проверку: adguard и paperless-web
   ответили 401, я сначала убрал у них проверку — это было неправильно,
   401 означает ЖИВУЮ службу. Вернул с флагом auth_required.
4. ИСПРАВЛЕНА ОШИБКА В САМОМ СКРИПТЕ: если контейнер создан вручную и
   метки compose у него нет, скрипт запускал «docker compose up -d» БЕЗ
   имени службы — то есть пересоздавал весь проект вместе с соседями.
   Для /opt/smart-lxc это значило: обновляя homeassistant, он пересоздал
   бы ещё mosquitto и zigbee2mqtt. Теперь служба ищется в compose-файле
   по container_name. Проверено на homeassistant.

ПРОВЕРКА: добавлен validate-registry.sh — для каждой службы проверяет,
что контейнер существует, каталог compose на месте, адрес здоровья
отвечает ожидаемым кодом.
  служб в реестре: 50, полностью обновляемы: 49.

ОСТАЛОСЬ ОГРАНИЧЕНИЕМ (честно):
  * openclaw — контейнер снят сегодня (падал, диск был полон), ждёт
    решения владельца;
  * duplicati, alertmanager, buryan-alert-webhook — работают БЕЗ compose:
    скрипт скачает образ, но пересоздать контейнер не сможет и скажет
    об этом прямо, а не изобразит успех;
  * mosquitto/redis/nats/coturn — порты не HTTP, проверки здоровья нет;
  * 12 контейнеров oauth2-proxy-* не внесены: вспомогательные.

МОЯ ОШИБКА В ПРОВЕРКЕ: первая версия дала 6 ложных тревог, считая
401/403 сбоем. Пришлось учитывать auth_required — то же правило, что уже
было в скрипте обновления. Урок: проверка должна знать те же правила,
что и проверяемое.

РЕШЕНИЕ ВЛАДЕЛЬЦА УЧТЕНО: postgres-rbac не трогаем.
2026-10-17 12:36:43 +03:00
root 9d7ad160c2 chore(update): authentik -> ghcr.io/goauthentik/server:latest (CT 114) 2026-10-15 22:37:45 +03:00
root efa438236c chore(update): gitea -> gitea/gitea:latest (CT 140) 2026-10-15 22:36:15 +03:00
root 7995fa61ca chore(update): paperless -> ghcr.io/paperless-ngx/paperless-ngx:latest (CT 105) 2026-10-15 22:34:29 +03:00
root 2295670096 chore(update): matrix -> matrixdotorg/synapse:latest (CT 155) 2026-10-15 20:22:29 +03:00
root c5a766720d исправлена причина неудач обновления: окно ожидания задается для каждой службы (matrix, paperless — 480 с) 2026-10-15 19:56:22 +03:00
root d45185c302 chore(update): headscale -> unknown (CT 201) 2026-10-15 19:25:18 +03:00
root 3a33f510ed chore(update): vaultwarden -> vaultwarden/server:latest (CT 109) 2026-10-15 19:24:21 +03:00
root 78f8e04e4a chore(update): n8n -> n8nio/n8n:latest (CT 108) 2026-10-15 19:23:34 +03:00
root 726bb00134 chore(update): npm -> jc21/nginx-proxy-manager:latest (CT 101) 2026-10-15 19:22:20 +03:00
root 9413fd2b9e chore(update): grafana -> grafana/grafana:latest (CT 113) 2026-10-15 19:13:13 +03:00
root 85d0781ae6 chore(update): prometheus -> prom/prometheus:latest (CT 134) 2026-10-15 19:12:15 +03:00
root ec84cabf06 chore(update): openclaw -> ghcr.io/openclaw/openclaw:latest (CT 115) 2026-10-15 19:11:16 +03:00
root 0c22141e3d chore(update): uptime-kuma -> louislam/uptime-kuma:latest (CT 107) 2026-10-15 19:10:18 +03:00
root bef0b6f533 chore(update): jellyfin -> jellyfin/jellyfin:latest (CT 103) 2026-10-15 17:22:54 +03:00
root c9ef28987e chore(update): plex -> linuxserver/plex:latest (CT 116) 2026-10-15 17:21:25 +03:00
root 9c42a6b112 chore(update): prowlarr -> lscr.io/linuxserver/prowlarr:latest (CT 119) 2026-10-15 17:18:19 +03:00
root 7d2d3e1f81 chore(update): radarr -> lscr.io/linuxserver/radarr:latest (CT 118) 2026-10-15 17:17:18 +03:00
root a62d2c0014 chore(update): sonarr -> lscr.io/linuxserver/sonarr:latest (CT 117) 2026-10-15 17:16:17 +03:00
root 49f6c32960 chore(update): bazarr -> lscr.io/linuxserver/bazarr:latest (CT 120) 2026-10-15 17:03:16 +03:00
root bf306bf3c5 chore(update): mealie -> ghcr.io/mealie-recipes/mealie:latest (CT 110) 2026-10-15 17:02:14 +03:00
root 1864b177c5 chore(update): overseerr -> lscr.io/linuxserver/overseerr:latest (CT 121) 2026-10-15 17:00:42 +03:00
root fe2b7464b3 chore(update): calibre -> linuxserver/calibre-web:latest (CT 111) 2026-10-15 16:57:32 +03:00
root 561d0de147 chore(update): navidrome -> deluan/navidrome:latest (CT 125) 2026-10-15 16:56:15 +03:00
root 3ed20aa9a9 chore(update): tautulli -> tautulli/tautulli:latest (CT 122) 2026-10-15 16:55:18 +03:00
root ef3293a2c7 chore(update): freshrss -> freshrss/freshrss:latest (CT 111) 2026-10-15 16:53:32 +03:00
root 24b60bdff9 chore(update): linkding -> sissbruecker/linkding:latest (CT 127) 2026-10-15 16:45:16 +03:00
root e14658bd0e chore(update): syncthing -> syncthing/syncthing:latest (CT 139) 2026-10-15 16:37:27 +03:00
root efc368e2b9 chore(update): dashy -> lissy93/dashy:latest (CT 102) 2026-10-15 16:25:27 +03:00
root 63516b8942 fix: ожидание готовности сервиса, проверка создания контейнера, версия API демона 2026-10-14 18:23:00 +03:00
root 034db36ce8 chore(update): mealie -> ghcr.io/mealie-recipes/mealie:latest (CT 110) 2026-10-14 18:22:28 +03:00
root bfd1b3157a chore(update): grafana ->
unknown (CT 113)
2026-10-14 18:15:07 +03:00