Commit Graph
318 Commits
Author SHA1 Message Date
buryan-agent e0309080bc API данных: боты сохраняют всё в папку проекта
POST /data/<коллекция> — запись документа, GET /data/<коллекция> — чтение,
POST /export — выгрузка в /root/buryan-infra/data/.

Боты при любом пожелании пишут его в коллекцию wishes (кто, какой бот,
номер, текст). Команда !export выгружает коллекцию из чата. Каждый день
в 23:00 cron выгружает wishes, dialog, events и копирует журналы.

Проверено: пожелание от @polina легло в API и в файл, !export вернул путь,
в папке проекта 6 файлов (wishes, dialog, events, logs).
2026-10-19 20:13:37 +03:00
buryan-agent cc7c98dad7 Доступ всем участникам + у каждого бота своя инструкция по направлению
ALLOWED_USERS расширен: владелец, Полина, Елена, Никита, Сергей, Алекс.

Для каждого бота написана подробная инструкция именно по его зоне:
медиа (Jellyfin/Seerr/Sonarr/Radarr/Navidrome), фото (Immich), книги
(Calibre), дом (HA, Android/Google TV), инфраструктура, поиск, дайджест,
камеры. В инструкции — что умеет, примеры человеческих фраз, ссылки и
ограничения.

Бот присылает инструкцию при первом обращении от человека (один раз,
состояние в onboarded.json), «помощь» повторяет её.

Проверено: инструкции различаются (610–1249 символов), повторное
обращение не спамит, «помощь» отдаёт нужную.
2026-10-19 20:10:30 +03:00
buryan-agent 70f44f2f9d Kuma в шине: изменения состояния + починка устаревших мониторов
Коннектор отдаёт monitor.up/monitor.down вместо разового списка; ключ
события включает состояние, карточка монитора остаётся одна (entity_key).

Найдено и исправлено в мониторах: Calibre-web и FreshRSS смотрели на старый
адрес 192.168.1.111 (сервисы на .240), пять мониторов принимали только 2xx
при фактических 302 — добавлены 3xx, два мёртвых монитора выключены
(Nginx Proxy Manager, Paperless-110).

Итог: 50 вверх, 5 вниз (три — push-мониторы бэкапов, это норма).
Копия базы до правок: kuma.db.bak-monitors.
2026-10-19 20:09:16 +03:00
buryan-agent c5e24fae35 Резервные копии базы ядра с проверкой восстановления
pg_dump hub_core в /mnt/backups/hub-core, ротация 14 файлов, cron 02:30.

Проверено по-настоящему: дамп создан (6 таблиц), развёрнут в тестовую
базу hub_core_test — восстановились все 68 карточек. Тестовая база удалена.

Скрипт лежит отдельным файлом /opt/hub-core/backup.sh (cron не может
вызывать строку из истории).
2026-10-19 20:06:04 +03:00
buryan-agent 8224f1df7a Панель: связи и журнал действий; статус спринта
Панель показывает ещё связи между карточками и таблицу действий сверки
(что, куда, результат, статус). Проверено: 200, 5 блоков, цифры совпадают.

Добавлен docs/SPRINT-STATUS.md — что уже работает и проверено, что ждёт
участия владельца (ключи LLM, Telegram, DNS для новых доменов, MQTT в HA,
камеры, доступ к определениям Prowlarr) и как проверить самому.
2026-10-19 20:05:27 +03:00
buryan-agent 454140adf8 Telegram user bot: подготовлен целиком, ждёт api_id/api_hash
Telethon 1.45 установлен, скрипт читает каналы и отправляет сообщения в
шину ядра (telegram.post), состояние хранится между запусками — дублей нет.

Готово: конфиг-шаблон (600), юнит (не включён), cron каждые 15 минут с
проверкой TG_API_ID, фильтр по ключевым словам.

Проверено без ключей: завершается понятным сообщением, ничего не ломает.
Чтобы включить — заполнить /etc/hub-core/telegram.env и один раз войти
(код придёт в Telegram).
2026-10-19 20:03:59 +03:00
buryan-agent 253dd5ce2b Бот поиска переведён на ядро: !card, !feed, поиск по карточкам
Поиск идёт в /search ядра, старый SQLite-индекс остался запасным.
Добавлены команды: !card <id> (карточка, связи, история), !feed
(последние события), !s теперь показывает номер карточки для !card.

Проверено: !feed отдал события, !s нашёл «Дюна: часть вторая #1»,
!card 1 показал ключ tmdb:693134 и историю radarr: media.imported.
2026-10-19 20:01:50 +03:00
buryan-agent 8b376d9c55 Сквозной поиск и карточка сущности с историей в API ядра
GET /search?q= — поиск по карточкам (название и внешние ключи).
GET /entity/{id} — карточка, её связи и история событий.

Проверено: поиск «дюна» вернул 3 карточки, карточка отдала историю
событий. Тестовые данные удалены, в ядре 68 настоящих карточек.

Попутно: datetimes ломали json.dumps — теперь сериализация с default=str,
иначе клиент получал пустой ответ.
2026-10-19 20:01:08 +03:00
buryan-agent 51442a2e47 Frigate развёрнут без камер: контейнер, MQTT, сверка, коннектор
CT 126 (frigate-lxc): 2 ядра, 2 ГБ, 16 ГБ, /mnt/media/frigate под записи.
Образ 6.3 ГБ, версия 0.18.2, контейнер healthy, /api/stats отдаёт
cameras: {} — камер пока нет по договорённости.

Подключено: MQTT (mosquitto 192.168.1.106:1883, префикс frigate),
проверка в сверке (18 проверок, 0 проблем), коннектор событий
camera.detection для шины.

Отдельно зафиксирована проблема загрузки: ghcr.io из этой сети почти
недоступен, образ получен через зеркало ghcr.nju.edu.cn с последующим
перетегированием.
2026-10-19 20:00:18 +03:00
buryan-agent 50cfd813ce Автодействия: импорт файла сразу запускает сканирование Jellyfin
Ядро по событию media.imported вызывает POST /Library/Refresh в Jellyfin,
поэтому новое сразу видно в медиатеке, без ожидания расписания.

Каждое действие пишется в журнал actions с результатом и статусом.
Проверено: событие «Тест автодействия» → сканирование HTTP 204 →
запись scan → jellyfin → done. Тестовая карточка удалена.
2026-10-19 19:55:24 +03:00
buryan-agent 577626a250 Единая панель состояния на порту ядра
GET / на hub-core отдаёт HTML-панель: карточки, события всего и за сутки,
открытые проблемы, последние 25 событий, разбивка по источникам.

Страница без внешних зависимостей — работает, даже если остальные сервисы
недоступны. Проверено: 200, цифры совпадают с базой (68/68/68/0).
2026-10-19 19:31:30 +03:00
buryan-agent 7402aa574f LLM-адаптер: разбор свободных фраз и вызов инструментов бота
llm.py — клиент любого OpenAI-совместимого API (DeepSeek, Qwen, локальный).
Модель получает список инструментов (команд бота) и либо вызывает нужный,
либо отвечает текстом.

Встроено в бота: если правила не распознали фразу, бот спрашивает модель.
Без ключа адаптер молчит — поведение прежнее.

Проверено на локальной заглушке: фраза «покажи статистику по медиа» →
модель выбрала инструмент stats → бот вернул медиатеку; ответ текстом
записывается в журнал диалогов. health() подтверждает связь.

Настройка: /etc/hub-core/llm.env (600), подключён к hub-bots через
EnvironmentFile, формат llm.env.example в репозитории.
2026-10-19 19:26:41 +03:00
buryan-agent 0384335f5d Связка карточек по названию + расписания ядра
linker.py связывает сущности с одинаковыми названиями разных видов:
нормализация (регистр, ё→е, год в скобках, знаки, служебные слова), затем
отношение «одно_название».

Проверено на тесте: «Дюна» (фильм) ↔ «Дюна (1965)» (книга) — связь создана,
тестовые карточки удалены.

Все расписания ядра на месте: коннекторы (10 мин), сверка (03:30), связка
(03:45), дайджест событий (08:30), resume (19:00). Обе службы активны.
2026-10-19 18:44:12 +03:00
buryan-agent d0530d58c6 Home Assistant в шину событий + дневной дайджест
HA подключён без токена: читаем реестр сущностей из хранилища внутри
контейнера, получаем события ha.entity.

Дайджест собирает события за сутки, группирует по источникам, показывает
заметное (импорт, заявки, тревоги, документы) и состояние ядра. Расписание
08:30.

Проверено: прогон показал 68 событий (57 Kuma, 8 HA, 2 тревоги, 1 импорт),
68 карточек, 0 открытых проблем.
2026-10-19 18:43:43 +03:00
buryan-agent 8e8bdcd235 Продолжить просмотр: список недосмотренного из Jellyfin в Matrix
resume.py обходит пользователей Jellyfin, собирает незавершённые видео,
считает процент и остаток, отправляет список в Matrix (на Android это и
есть push-уведомление, на Google TV открывается та же ссылка в родном
приложении).

Проверено: прогон отправил сообщение «сейчас ничего не досмотрено» —
корректно при пустой библиотеке.

Расписание 19:00 ежедневно.
2026-10-19 18:43:05 +03:00
buryan-agent 374bf1a403 Ночная сверка: проверка 17 служб, автоподъём остановленных, журнал действий
reconcile.py проверяет 17 служб по HTTP, смотрит состояние контейнера и
поднимает остановленные, записывая действие в журнал actions с командой
отката. Проблемы ведутся в таблице problems: новые создаются, исчезнувшие
закрываются.

Проверено: первый прогон нашёл 1 проблему (n8n на неверном порту),
контейнер работал — автопочинки не было; после правки порта 0 проблем.

Расписание 03:30, лог /var/log/hub-reconcile.log.
2026-10-19 18:42:30 +03:00
buryan-agent 67bc0a00a7 Коннекторы: 10 источников, включая Kuma, Calibre, Navidrome, Immich, Paperless
Добавлены источники из баз сервисов: Paperless (API), Calibre (metadata.db
через python3), Navidrome (sqlite), Immich (immich_db), Uptime Kuma (kuma.db).

Первый прогон дал 57 событий от Kuma, второй — 0: идемпотентность работает.
В ядре 60 карточек и 60 событий.

По пути: база Kuma лежит не в docker volume, а в /opt/network-lxc/uptime/data;
функции источников должны возвращать (список, ошибка) — две штуки отдавали
просто список, из-за чего падали с unpacking error.
2026-10-19 18:41:47 +03:00
buryan-agent 885def24d9 Коннекторы: Sonarr, Radarr, Seerr, Jellyfin, Alertmanager в шину событий
Опрос вместо вебхуков: не требует правок в сервисах, ловит пропущенное,
состояние в state.json — каждое изменение даёт одно событие.

Проверено: первый прогон дал 2 события (тревоги Alertmanager), в ядре
3 карточки и 3 события. Расписание — каждые 10 минут.

Осталось: Uptime Kuma (нужен ключ API), Immich, Paperless, Calibre,
Navidrome, Frigate, Home Assistant.
2026-10-19 18:40:43 +03:00
buryan-agent 125ca73696 Hub Core: шина событий и граф сущностей в PostgreSQL
Первый шаг проекта: база hub_core (UTF8) на общем PostgreSQL, служба
hub-core на порту 9120.

Умеет: принимать события от сервисов (POST /event), вести карточки
сущностей (kind + key, статус, внешние ключи), связывать карточки,
искать и показывать последние события, публиковать важное в личку
владельцу через Matrix.

Проверено: событие radarr/media.imported записалось, карточка
«фильм | Дюна: часть вторая» создалась с кириллицей.

По пути: systemd разбивал DSN по пробелам (нужны кавычки), база была
создана в SQL_ASCII — пересоздана в UTF8.
2026-10-19 18:11:19 +03:00
buryan-agent a32c1ec498 Индексаторы: найдена причина — домен определений недоступен из сети
indexers.prowlarr.com резолвится (188.114.97.3 и IPv6 Cloudflare), но
не отвечает ни по IPv4, ни по IPv6 с узла. github.com при этом доступен —
значит блокировка именно этого домена, а не проблема сети.

Из-за этого архив определений не скачивается (остаётся .part), а встроенный
набор из 77 определений содержит только приватные трекеры плюс Knaben,
Anidex, Anidub, AnimeZ, RuTracker. Публичных 1337x/YTS/TorrentGalaxy нет.

В docs/INDEXERS-ROOTCAUSE.md расписаны три обхода: Jackett со встроенными
определениями (рекомендую), выход Prowlarr через туннель, своё зеркало.
2026-10-19 17:50:49 +03:00
buryan-agent 59a08d8c14 Prowlarr: разбор причин, почему не добавляются индексаторы + план спринтов
Установлено: indexers.prowlarr.com из контейнера недоступен, прямые ссылки
на indexers.zip отдают 404, архив остаётся недокачанным (.part). Схема
отдаёт 77 определений, но публичных трекеров среди них нет — только
приватные плюс Knaben, Anidex, Anidub, AnimeZ, RuTracker.

Найден правильный способ запуска обновления: POST /api/v1/command
{"name":"IndexerDefinitionUpdate"}.

Добавлен docs/SPRINTS-BACKLOG.md: задания по всем сервисам — индексаторы
и полный цикл медиа, Telegram как источник, переделка ботов, наполнение
контента, наблюдаемость, надёжность.
2026-10-19 17:49:11 +03:00
buryan-agent ce6127fdcb Личные боты: только владельцу, входящие пожелания, понимание фраз
Спам прекращён: боты вышли из общих комнат (владельца из них убрали),
состоят только в личной переписке. Писать может только владелец —
остальным вежливый отказ; открывается списком ALLOWED_USERS.

Свободный текст теперь не сваливается в подсказку: если команды нет,
бот сохраняет пожелание во «Входящие» (/var/lib/hub-bots/inbox),
отправляет копию владельцу и отвечает номером записи.

Понимание фраз: к точным командам добавлен разбор по основам слов —
«покажи статистику по медиа» выполняется как stats.

Уведомления (Seerr, тревоги, сводки) переведены из комнат в личку.
2026-10-19 17:19:00 +03:00
buryan-agent c3db92e965 Медиа-цепочка: общий том, загрузчик, связи Prowlarr/Bazarr/Seerr, тревоги в Matrix
До спринта цепочки не было: у Jellyfin /media, у arr /opt/media (разные
папки), ноль папок библиотек, ноль загрузчиков, ноль индексаторов.

Сделано: общий том /mnt/media во всех контейнерах (проверено записью из
Sonarr и чтением в Jellyfin); qBittorrent в новом CT 123; корневые папки
/data/series и /data/movies; загрузчик подключён к Sonarr и Radarr (тесты
200); Prowlarr синхронизирует приложения Sonarr и Radarr (тесты 200);
Bazarr подключён к обоим; Seerr переведён на правильные папки.

Тревоги Alertmanager теперь идут в комнату «Инфраструктура» через приёмник
ботов: у разных источников разные комнаты (Seerr — медиа, тревоги —
инфраструктура). Проверено доставкой critical-тревоги.

Осталось: индексаторы — нужны аккаунты трекеров.
2026-10-19 17:12:13 +03:00
buryan-agent 7b88923550 Личные боты: переписка один на один вместо общей комнаты
Каждый бот теперь личный собеседник: при старте создаёт комнату is_direct
с владельцем и приглашает его. В личке не нужны команды — понимает обычные
слова («статистика», «что нового», «найди дюна»).

Общие комнаты остались, но там бот отвечает только на !команды, чтобы не
встревать в разговор. Уведомления и сводки — туда же.

Боты принимают приглашения: если человек сам начнёт переписку, она станет
личной (признак is_direct в событии приглашения).
2026-10-19 16:53:44 +03:00
buryan-agent 49f9e7bc89 Индекс: заявки Seerr и альбомы Immich, недельная сводка
Источников стало девять: jellyfin, sonarr, radarr, navidrome, calibre,
linkding, paperless, immich (альбомы), seerr (заявки — видно, что просили,
даже если ещё не скачано).

Все девять собираются без ошибок (проверено). По пути поправил Navidrome
(в схеме нет artist_id, есть album_artist) и Immich (psql не понимает
кириллицу в именах колонок без кавычек — сделал помощник на sh).

Недельная сводка: понедельник 09:30, отдельный файл weekly.py.
2026-10-19 16:48:06 +03:00
buryan-agent 529139f89b Сквозной индекс контента и карта пробелов
Индекс: все семь источников (Jellyfin, Sonarr, Radarr, Navidrome, Calibre,
Paperless, Linkding) в одной базе, пересборка каждые 3 часа. Поиск идёт по
нормализованному полю — SQLite не умеет lower() для кириллицы, поэтому
регистр приводится при сборке. Выгрузки из баз — помощники в контейнерах.

Новые команды: !index (состав индекса), !reindex (пересобрать),
!link (кросс-связи: одно название в разных видах контента),
!gaps (что мешает работать целиком).

Проверено на тестовых записях: «дюна» находится сразу как фильм, книга
и закладка; тестовые записи после проверки удалены.
2026-10-19 16:46:13 +03:00
buryan-agent c2d507ced0 Уведомления Seerr в Matrix и вход в Seerr через Quick Connect
Приёмник вебхуков в службе ботов: Seerr шлёт события на
http://192.168.1.10:9110/seerr, бот публикует их в комнате «Медиа»
в человеческом виде (что за фильм, кто просил, статус).

Quick Connect в Seerr: включён, код выдаётся. Причина прошлой поломки —
Seerr очистил адрес Jellyfin при первом входе, из-за чего запрос падал
с «Invalid URL». Адрес прописан заново.
2026-10-19 16:40:22 +03:00
buryan-agent 91df3e60bf Флот Matrix-ботов: медиа, фото, книги, дом, инфраструктура, поиск, дайджест, камеры
Восемь ботов в пространстве Buryan Hub, по комнате на домен. Каждый
отвечает на !help списком своих команд и показывает реальные данные:
Jellyfin (Items/Counts), Sonarr/Radarr (очередь, диски, нехватка),
Seerr (заявки), Prometheus (службы, тревоги), Immich/Calibre/Navidrome
и Home Assistant — через pct.

Ежедневная сводка в 09:00 (cron) в комнату «Дайджесты».

Важное: все библиотеки пусты (0 фильмов, 0 фото, 0 книг, 0 треков),
Frigate не развёрнут — боты говорят об этом честно и подсказывают,
как наполнить. Диск один, внешних хранилищ нет.

Секреты: /etc/hub-bots/bots.env (600), /root/hub-bots/ALL-SECRETS.txt (600),
зашифрованная копия ops/secrets-enc/hub-bots-secrets.age.
2026-10-19 16:37:38 +03:00
buryan-agent 794adc438b Seerr вместо Overseerr + метрики медиасервисов и правила оповещений
Seerr (преемник Overseerr и Jellyseerr): поднят на CT 121, настроен на
Jellyfin, подключены Sonarr и Radarr, домен ombi переведён. Старый
Overseerr удалён.

Тонкости, на которые потратил время: настройки медиасервера требуют уже
открытой сессии (правится только через settings.json), первый вход требует
serverType в теле, Sonarr/Radarr ждут обязательные поля профиля.

Мониторинг: 4 экспортёра exportarr (Sonarr/Radarr/Prowlarr/Bazarr) в
Prometheus, адреса целей — на узел, а не 127.0.0.1 (Prometheus в контейнере).
Добавлены 3 правила: ошибка сбора, очередь, место. Всего 10 правил.

Карта интеграций и план по волнам — docs/INTEGRATIONS-2026-10-19.md.
2026-10-19 15:19:59 +03:00
buryan-agent e202f8ce6c Централизация входа: Jellyfin через SSO-плагин, Vaultwarden через SSO и заготовки
Jellyfin: поставлен плагин SSO Authentication 5.1.1, создан провайдер
jellyfin-sso, настроен вход (SchemeOverride=https — иначе адрес возврата
шёл как http и Authentik отказывал), домен media переведён напрямую,
8 пользователей заведены, akadmin — администратор.

Vaultwarden: включён админ-токен, созданы заготовки учёток в vaultwarden_db —
SSO привязывает их по почте (штатный приём), мастер-пароль остаётся.

users-sync.sh: одной командой заводит всех из Authentik в Gitea, Nextcloud,
Linkding, Navidrome, Jellyfin, Vaultwarden. Идемпотентно.

Plex и Overseerr: OIDC нет; варианты (PlexSSO, Seerr) описаны в docs.
2026-10-19 15:06:43 +03:00
buryan-agent 6d653fb1f8 HA: auth_request вместо прокси на пути приложения; общие пользователи из Authentik
HA: nginx проверяет вход подзапросом /oauth2/auth, а в HA уходят чистые
запросы через ha-strip. Это убирает 302 для служебных запросов фронтенда
(«Unable to fetch auth providers»). Применено на домашнем и внешнем nginx.
Проверено: /auth/providers -> 200 с Trusted Networks.

Пользователи: скрипт users-sync.sh заводит всех из Authentik в Gitea,
Nextcloud, Navidrome, Linkding. Остальные службы автозаводят при входе.
Исправлен дубль почты akadmin/roman, убраны мусорные учётки от проверок.
2026-10-19 14:33:20 +03:00
buryan-agent fc70ea2d0d Порядок: HA стабильно (малая cookie), дом и VPS выровнены, лишнее убрано
HA: cookie сессии уменьшена с ~4 КБ (две части) до 565 байт (одна),
новое имя _oauth2_proxy_ha, SameSite=lax. Проверено: повторный заход
отдаёт /auth/providers 200, журнал чист.

Дом и VPS расходились в hub (заглушка nginx), links (мимо единого входа)
и turn — выровнены, теперь 41 домен совпадает.

Overseerr переведён напрямую (свой вход через Plex), прокси снят.
Удалены провайдеры без приложений: n8n-oidc, vaultwarden-proxy (35/36).
Firefly: убраны дубли от проверок, остался владелец.

domains.yaml приведён к факту: 19 адресов, добавлено предупреждение
о ручной настройке единого входа.
2026-10-19 14:22:43 +03:00
buryan-agent 92b1d4a58f Home Assistant: вход через Authentik заработал (прослойка снимает X-Forwarded-For)
Причина отказа найдена в коде HA: он запрещает вход по доверенной сети
с адреса, внесённого в http.trusted_proxies, а если адрес не внесён и
приходит X-Forwarded-For — отвечает 400.

Решение: trusted_networks для сети Docker с trusted_users (пользователь Roman),
trusted_proxies без сети прокси, и nginx-прослойка ha-strip между прокси и HA,
которая вычищает X-Forwarded-For и X-Real-IP.

Проверено: способы входа содержат Trusted Networks, авто-вход отдаёт
create_entry, круг через домен — 200 Home Assistant, в журнале HA новых
ошибок нет, прямой заход из локальной сети по-прежнему требует пароль.
2026-10-19 14:05:51 +03:00
buryan-agent d8066f73de Home Assistant: попытка SSO отменена, служба возвращена в рабочее состояние
Провайдер trusted_networks в HA 2026.2.3 конфиг принимает (схема проходит),
но вход с адреса прокси отклоняет — даже при 0.0.0.0/0. Значит HA не
применяет auth_providers из configuration.yaml.

Откат: домен напрямую на 192.168.1.106:8123, прокси остановлен, конфиг
чистый, check_config проходит. У HA остаётся один вход — свой.
2026-10-19 13:56:16 +03:00
buryan-agent 5652d0bd8d Родной SSO: Home через Authentik, Navidrome, Mealie, Immich, Element
Home Assistant: trusted_networks + trusted_users, домен через прокси — своя форма убрана.
Navidrome: доверенная сеть Docker + доступ к библиотеке, проверено по API (200/401).
Authentik: созданы mealie-oidc и immich-oidc с областями по образцу.
Mealie: родной OIDC, прокси убран. Immich: oauth включён в базе.
Synapse: allow_existing_users=true — SSO пускает существующие учётки.
2026-10-19 13:44:37 +03:00
buryan-agent e5feb3e755 Двойной вход: найдена корневая причина (sub=хеш), часть служб переведена на один вход 2026-10-19 13:26:54 +03:00
buryan-agent 6ab5a6476a Копии: освобождён диск (94%%→72%%), CT 111 добавлен в расписание и проверен
Ротация запускалась раз в неделю при ежедневных копиях — диск дошёл
до 94%%. Ротация переведена на ежедневный запуск (06:30), освобождено 24 ГБ.

CT 111 (книги, каталог, Duplicati, FreshRSS) не имел ни одного архива.
Добавлен в /etc/cron.d/lxc-backups (вс 05:15) и сразу проверен:
vzdump-lxc-111-2026_10_19-12_30_24.tar.zst, 3,3 ГБ.
2026-10-19 12:31:46 +03:00
buryan-agent 6a444b3e0c Единый вход: 11 дефектов исправлено, 16 служб проверены живым входом
Найдено и исправлено то, чего не было в аудите:
- каталог книг: провайдеру не разрешён адрес возврата /catalog/oauth2/callback
  и имя cookie совпадало с Calibre (цикл входа)
- backup вёл на Grafana; Duplicati живёт в CT 111:8200
- Node-RED: внутренние адреса возврата и издателя, недоступное имя службы
- headscale.buryans.ru вёл на прокси Node-RED вместо headscale
- arr: AuthenticationMethod лежит в config.xml (Basic/Forms), а не в базе
- Vaultwarden: провайдер без приложения в Authentik давал отказ во входе
- Nextcloud 500: сломанное приложение Talk (spreed) валило вход
- requests/ombi: 403 из-за разных доменов на одном прокси
- 502 после входа: сессия с правами групп не влезала в буфер заголовков nginx
- лишний экран согласия у всех 35 провайдеров
- FreshRSS: данные не сохранялись из-за лишнего префикса в пути монтирования

Добавлена сквозная проверка входа (login-check.py) и служебная учётная
запись sso-check: проверяем результат, а не факт создания.
2026-10-19 12:27:46 +03:00
root 42db6aba07 Найдена настоящая причина 500: у новых провайдеров не было областей доступа
В журнале прокси: "could not get claim email: profile URL: unexpected
status 403". В журнале Authentik: "Scope mismatch. required {'openid'},
token_has set()" — токен приходил вообще БЕЗ областей.

ПРИЧИНА: у провайдеров, созданных мной через API (adguard, backup,
element, finance, git, meals, openclaw, status, home, catalog,
home-assistant), оказалось НОЛЬ привязанных областей доступа
(property_mappings). Без областей openid/email/profile в токене нет
почты, прокси идёт за ней в userinfo, тот отвечает 403, прокси отдаёт
500. Старые провайдеры (sonarr и др.) были настроены раньше с областями —
поэтому работали. Падали ровно те сервисы, что добавил я.

ИСПРАВЛЕНО: скопировал набор областей с рабочего sonarr-proxy на все 11.
ПРОВЕРЕНО: токен выдаётся, userinfo отвечает 200 с email_verified true,
все 16 доменов отвечают 302 на вход.

МОЯ ОШИБКА: при создании провайдеров задал имя, адреса возврата и типы
обменов, но забыл привязать области. Проверял факт создания, а не
реальный токен. Урок: проверять данные в токене, а не только что объект
создался.

ОСТАЛОСЬ: двойной родной вход, цикл перенаправления у каталога, Mealie
401, Plex 400, Vault отказ, Nextcloud 500.
2026-10-19 11:19:17 +03:00
root 201737b5f4 Сверены все перенаправления входа; добавлена сводная таблица сервисов
СВЕРКА. Собраны все 28 прокси и 35 провайдеров Authentik, сверены
адреса возврата с доменами, расхождения исправлены. Проверено живьём:
у каждого из 23 сервисов вход ведёт на СВОЙ домен
(adguard -> adguard.buryans.ru/oauth2/callback и т.д.). Смешения нет.

УБРАНЫ ЛИШНИЕ ПРОКСИ: oauth2-proxy-home (CT 155) и oauth2-proxy-ha
(CT 106) — Home Assistant выведен из единого входа, они стали не нужны.

НАЙДЕНО БЕЗ ДОМЕНОВ: tautulli (имя есть в прокси, но не в DNS),
node-red (адрес возврата внутренний), grafana, prometheus, alertmanager.
Проверено: эти имена в DNS не существуют — без A-записей у регистратора
домен и сертификат создать нельзя. Записано задачей С-15.

ДОБАВЛЕН docs/SERVICES-TABLE.md: полная таблица — 23 сервиса с доменом и
входом, 8 псевдонимов, 8 доменов со своим паролем (Nextcloud, HA, Immich,
Syncthing, Proxmox, Matrix, Authentik, Headscale), 5 без домена, и
список того, что убрано.
2026-10-19 10:36:08 +03:00
root ae29d105bf chore(audit): auto-snapshot and CHANGELOG update 2026-10-19
- LXC running: 29/30
- Alerts (24h): 0
- Disk PVE: 17%
2026-10-19 09:00:05 +03:00
root 81dfaa0013 n8n и Gitea: убраны внутренние адреса; Home Assistant выведен из единого входа
1. n8n ПОКАЗЫВАЛ КАРТИНКУ ВМЕСТО СЕРВИСА. Причина: N8N_EDITOR_BASE_URL
   указывал на http://192.168.1.108:5680/ — браузер снаружи не может
   загрузить ресурсы с внутреннего адреса. Исправлено на
   https://n8n.buryans.ru/, добавлены N8N_HOST, N8N_PROTOCOL=https,
   WEBHOOK_URL. В журнале теперь "Editor is now accessible via
   https://n8n.buryans.ru".

2. GITEA — та же болезнь: ROOT_URL=http://192.168.1.140:3000/,
   DOMAIN=192.168.1.92. Исправлено на https://git.buryans.ru/ и
   git.buryans.ru.

3. HOME ASSISTANT ВЫВЕДЕН ИЗ ЕДИНОГО ВХОДА (решение владельца).
   home.buryans.ru ведёт прямо на HA (8123). Причина: у HA своя
   авторизация и своё мобильное приложение, прокси впереди мешал.
   Проверено: home отвечает 200 напрямую, API 401 (защищён токеном HA).

МОИ ОШИБКИ: правил docker-compose.yml заменой строк и склеил переменные
окружения в одну строку — n8n перестал запускаться (getaddrinfo
EAI_AGAIN); восстанавливал из копии и правил построчно. Плюс сломал
отступы YAML. Урок: после правки compose всегда проверять
docker compose config.

ОСТАЛОСЬ: проверить свои адреса у Grafana, Jellyfin, Navidrome, Mealie,
Firefly, Linkding, Paperless, Plex — тот же класс ошибки.
2026-10-19 08:50:16 +03:00
root aefcdbb315 Убраны дубли служб: второй Paperless и старый FreshRSS
По итогам аудита обнаружено, что параллельно работают:
  * второй Paperless в CT 110 (paperless_web, paperless_worker,
    paperless_redis) — рабочий Paperless живёт в CT 105, а прокси в CT 110
    смотрит именно на CT 105, значит эти три контейнера не нужны;
  * старый FreshRSS (freshrss-old-20261014-180053) рядом с новым в CT 111.

Остановлены, автозапуск отключён (restart=no). Прокси
oauth2-proxy-paperless в CT 110 НЕ тронут — он обслуживает docs.

ПРОВЕРЕНО: docs, news, rss отвечают; наблюдение 58 проверок без провалов;
память освободилась (CT 110 — 368 МБ, CT 111 — 284 МБ занято).
2026-10-18 23:01:43 +03:00
root 9853715e51 Ночной спринт: починен VPN (был корень проблем), бот стал отзывчивым, аудит служб
1. VPN. В журнале шлюза сотни "context deadline exceeded" для flibusta,
   libgen, archive.org; все три канала помечены мёртвыми. ПРИЧИНА:
   автоподбор выбирал hysteria2, а он сыпется (в логах VPS H3 error 0x0),
   плюс проверка живости шла на gstatic, который через этот канал не
   открывался. ИСПРАВЛЕНО: hysteria2 убран из автоподбора (остались
   VLESS+TLS и Reality), проверка переведена на cp.cloudflare.com,
   интервал 3 минуты. РЕЗУЛЬТАТ: flibusta/libgen/archive снова 200.

2. КНИЖНЫЙ БОТ. Не отвечал: поиск шёл последовательно по 5 источникам,
   три через VPN висели по 15-30 с, бот застревал. Плюс разбор команд был
   строгим, а сообщения приходили с кавычками. ИСПРАВЛЕНО: параллельный
   поиск с общим лимитом 45 с, сразу подтверждение "Ищу...", терпимый
   разбор (кавычки, пробелы, "/ Find"), свободный текст ("найди Дюна"),
   журнал каждого цикла. ПРОВЕРЕНО: /find Дюна и "найди Дюна" отвечают.

3. АУДИТ. 28 контейнеров, ~60 docker-контейнеров, 23 домена под входом,
   2 намеренно открыты (immich, sync), наблюдение 58 проверок без
   провалов. НАЙДЕНО: два Paperless работают одновременно (CT 105 и 110),
   старый FreshRSS жив, 40 баз в общем PostgreSQL + 18 файлов SQLite,
   плюс дубли баз *_pre_utf8_* и *_ascii_*. Всё записано на утро.
2026-10-18 23:00:37 +03:00
root ee17c9c9b3 Интеграция домашних сервисов: Nextcloud на files, Home Assistant на home
ОБНАРУЖЕНО: у Nextcloud и Home Assistant вообще не было доменов — только
IP внутри сети, и у каждого свой пароль.

СДЕЛАНО:
1. NECTCLOUD -> files.buryans.ru (раньше домен вёл на Paperless).
   Вход через Authentik средствами самого Nextcloud (приложение
   user_oidc), а не прокси — потому что мобильный клиент и синхронизация
   ходят в API напрямую, прокси их сломал бы. Добавлены доверенные домены
   files/cloud, поправлен overwrite.cli.url для ссылок в письмах.
   Paperless остался на docs.buryans.ru.
2. HOME ASSISTANT -> home.buryans.ru (раньше заглушка). Вход через
   oauth2-proxy-ha на 9111. API (/api, /local, /auth, /static) намеренно
   НЕ закрыт единым входом — иначе перестанет работать мобильное
   приложение; при этом API защищён токенами HA (отвечает 401).
3. ПОПУТНО в HA исправлено: internal_url и external_url стояли на верхнем
   уровне конфига, HA ругался "Integration 'internal_url' not found" —
   перенесены внутрь homeassistant.

ПРОВЕРЕНО: files 302 -> /login со входом через Authentik; home 302 ->
Authentik; API HA без токена 401; docs 302 (Paperless на месте);
Zigbee2MQTT 200; наблюдение 58 проверок без провалов; все контейнеры
работают.

ОСТАЛОСЬ: тревога "Высокая нагрузка" (следствие моих сборок, уйдёт сама),
уведомления HA в Matrix, календарь Nextcloud в HA, обновить Dashy.
2026-10-18 22:51:06 +03:00
root 617236205b Calibre: один вход без второй формы; книжный бот в Matrix
1. УБРАН ВТОРОЙ ВХОД В CALIBRE. После Authentik он показывал свою форму.
   Включил доверие заголовку от прокси:
   allow_reverse_proxy_header_login=1, header=X-Forwarded-Email,
   auto_create_users=1, disable_standard_login=1. Админа переименовал в
   свою почту, чтобы вход попадал в его учётку.
   ПРОВЕРЕНО: без заголовка 302 (просит вход), с заголовком 200 и кнопка
   «Выход» — пустило. Второго пароля больше нет.

2. КНИЖНЫЙ БОТ @bot_books. Команды: /find (поиск в ЛитРес, Open Library,
   archive.org, Флибусте, libgen), /lib (что уже есть), /wanted (что
   искать), /tgadd /tglist /tgdel (каналы Telegram), /help.
   Доступ по списку: @akadmin, @polina; остальным отказ с показом их
   адреса. Бот сам принимает приглашения в комнаты.
   ПРОВЕРЕНО: /find Дюна вернул три издания ЛитРес с ценами (599/579 ₽),
   карточку Open Library и три книги в archive.org.

3. TELEGRAM БЕЗ АККАУНТА: бот ищет по публичным каналам через
   веб-предпросмотр t.me/s/имя (работает через VPN). Скачивать файлы так
   нельзя — для этого нужен юзербот (задача К-11).

МОИ ОШИБКИ: бот сначала не обрабатывал приглашения (не вступал в комнату);
сборка образа шла из кэша и патч не попадал в контейнер — помогло
--no-cache; год из Open Library показывался как цена.
2026-10-18 21:13:56 +03:00
root 2807bc815f Исправлен 500 на всех сервисах: Authentik 2026.8 отдавал email_verified=false
СИМПТОМ: после ввода пароля любой сервис с единым входом отдавал 500.
Прямые адреса работали, службы живы, Authentik писал вход успешным.

ПРИЧИНА (найдена в журнале прокси):
  "Error redeeming code during OAuth2 callback:
   email in id_token (...) isn't verified"
В Authentik 2026.8 стандартное сопоставление области email зашито так:
  return {"email": request.user.email, "email_verified": False}
То есть почта ВСЕГДА помечается непроверенной, а oauth2-proxy по
умолчанию таких не пускает. В 2026.8 из таблицы пользователей убрали
поле email_verified — поэтому в сопоставлении и стоит константа.
Это следствие сегодняшнего обновления Authentik, а не правок прокси.

ИСПРАВЛЕНО: выражение заменено на email_verified: True (почта хранится в
самом Authentik, другого источника нет). Проверено: userinfo отдаёт true.

КАК ИСКАЛ: коды на краю 302 -> 500 возникает после входа; в журнале
Authentik ни одного 5xx; в логе VPS нашёл 500 на /oauth2/callback;
и только прочитав журнал прокси БЕЗ фильтра увидел нужную строку.
Ошибка поиска: слишком долго смотрел на grant_types (он тоже был неправ
и я его исправил, но 500 давала именно непроверенная почта).

НА БУДУЩЕЕ: обновления Authentik ломают вход тихо — после каждого
обновления проверять вход на одном сервисе. Правка живёт в базе и при
следующем обновлении может вернуться к стандартной. Проверка в документе.

ЗАОДНО: инструкция для Полины переписана проще и нагляднее, отправлена
в Matrix.
2026-10-18 21:05:50 +03:00
root 60866cd2b6 Каталог книг: сервис со статистикой; поиск расширен (7 источников); инструкции в Matrix
СЕРВИС КАТАЛОГА: https://books.buryans.ru/catalog/ за единым входом.
  * 181 книга, 45 серий, 25 книг к поиску;
  * страницы «Обзор», «Серии», «Книги», «Что искать»;
  * API /api/summary и /health;
  * профили читателей (сейчас Полина);
  * написан на стандартной библиотеке Python — нечему ломаться.

СХЕМА: nginx /catalog/ -> oauth2-proxy-catalog :9990 -> catalog :9200.

ПОИСК РАСШИРЕН ДО 7 ИСТОЧНИКОВ: ЛитРес (цены), Open Library (ISBN),
ФантЛаб, Google Books — напрямую; archive.org, libgen, Флибуста — через
VPN-шлюз, потому что в России заблокированы. ЛитРес через VPN НЕ ходит
(блокирует зарубежные адреса). Результат: находки у 15 из 25 книг,
libgen добавил ещё совпадения.

ИНСТРУКЦИИ ОТПРАВЛЕНЫ В MATRIX в личные чаты: Akadmin — как устроено,
как проверить, где что лежит, как обновить; Полина — как войти, искать,
загружать книги. Matrix требует метод PUT (на POST вернул 405).

МОИ ОШИБКИ: путь к каталогу не совпал (нули на странице); обновлённый
файл не попал в контейнер, а я собрал образ из старого; проверка входа
заголовком не проходит — нужна настоящая сессия.
2026-10-18 20:54:17 +03:00
root 9b28117a7d Поиск книг без Telegram: 15 из 25 найдено, с ценами ЛитРес
Владелец: «есть ли возможность пока без ТГ искать книги, которых нет?»

СДЕЛАНО: скрипт ops/books/finder/book_finder.py.
  1. берёт каталог Полины и находит серии, где следующая книга существует,
     но не прочитана (25 книг);
  2. спрашивает ЛитРес (магазин: цена + прямая ссылка), Open Library
     (ISBN, год, язык), ФантЛаб (фантастика), Google Books;
  3. отбрасывает нерелевантные совпадения по словам названия и автора;
  4. собирает ссылки, где искать дальше. Ничего не скачивает.

РЕЗУЛЬТАТ: точные совпадения у 15 из 25; у 10 есть цена в ЛитРес
(«Морана и Тень. Плетущая» 599 ₽, «Обманный бросок» 549 ₽ и т.д.).
Английские новинки без перевода в ЛитРес отсутствуют — для них только
Open Library и поисковые ссылки. Псевдозаписи каталога («Другие книги
цикла») книг не находят, потому что это заметки, а не книги.

МОИ ОШИБКИ: Google Books отдавал 429 (квота) — я решил, что каталоги
недоступны, а Open Library работал; фильтр по русскому автору мешал
поиску; данные ЛитРеса с экранированными кавычками не разбирались;
ФантЛаб отдавал служебную ссылку вместо результатов.

Полный отчёт: docs/library/book-finder-report.md (25 книг, таблицы,
цены, ссылки). Дальше — веб-страница поиска в каталоге (К-7).
2026-10-18 20:07:38 +03:00
root 25ef17ad18 n8n 500 и системная проблема сторожа: исправлено
1. ОШИБКА 500 У N8N. Сам n8n был здоров (API 200, миграции применены).
Причина на стороне входа: провайдеры, созданные мной через API, вышли с
ПУСТЫМ grant_types, поэтому Authentik отклонял обмен кода на токен
(«Invalid grant_type for provider»). Прописал authorization_code и
refresh_token всем девяти; проверено — у всех 33 провайдеров теперь есть
типы обменов и приложение.

2. СИСТЕМНАЯ ПРОБЛЕМА: сторож buryan-agent каждые 5 минут перезапускал
ЛЮБОЙ остановленный контейнер. Отсюда «NPM сам вернулся», «старые
calibre поднялись снова» и невозможность что-либо осознанно выключить.
ИСПРАВЛЕНО в 28 контейнерах: если политика перезапуска no — не трогаем;
добавлен файл исключений /opt/buryan-agent/ignore.txt; в отчёте такие
контейнеры помечаются stopped-intentionally. ПРОВЕРЕНО: остановил три,
запустил сторожа вручную — failed=0 restarted=0, всё осталось выключено.

3. turn.buryans.ru отдавал 502 (HTTP-прокси на TURN-сервер) — теперь
перенаправление на call.buryans.ru.

СОСТОЯНИЕ: 40 доменов работают, n8n 200/302, библиотека работает,
наблюдение 58 проверок без провалов, активных тревог нет.

ОСТАЛОСЬ МЕЛОЧЬ: старый дубль freshrss-old-20261014-180053 всё ещё
работает — остановить и переименовать.
2026-10-18 19:27:37 +03:00