Commit Graph
526 Commits
Author SHA1 Message Date
buryan-agent e76d8e5ef1 [S-09] Prometheus: причина 403 — пустой grant_types у провайдера; issuer переведён на публичный 2026-10-21 15:32:41 +03:00
buryan-agent 082a714ee8 [S-01] HA SSO подтверждён (oauth2-proxy-home), Prometheus: scope-mappings исправлены 2026-10-21 15:27:27 +03:00
buryan-agent 00b1c3fbf6 [S-01] HA: TOTP решили не включать (уточнение ADR-009) 2026-10-21 15:21:51 +03:00
buryan-agent 397121cada [S-08] Вход по 2FA без пароля (TOTP первым) + Prometheus через SSO на публичном домене 2026-10-21 15:21:13 +03:00
buryan-agent 4a11f8fa2a [S-01] Финал спринта: статусы 30/32, Wiki и анонсы синхронизированы 2026-10-21 15:09:14 +03:00
buryan-agent 42bf5720be [S-01] ADR-009: Home Assistant — собственный вход + TOTP, SSO не внедряем 2026-10-21 15:08:33 +03:00
buryan-agent c0550522b5 [S-03] Prometheus за SSO по LAN: oauth2-proxy → Authentik, ADR-008 2026-10-21 15:08:18 +03:00
buryan-agent d3c7ceb0a0 [S-03] Prometheus: oauth2-proxy поднят в CT134, провайдер Authentik создан 2026-10-21 15:07:34 +03:00
buryan-agent 3361e22ed8 [X-03] Камеры: RTSP в сети нет (подтверждено), Frigate ждёт железо; !статус в боте 2026-10-21 15:06:04 +03:00
buryan-agent 8a7fa7e2e9 [W-02] Транскрипция встреч: faster-whisper → заметка в buryan-work 2026-10-21 15:05:00 +03:00
buryan-agent 4119f8727a [W-01] Presale Cockpit: репозиторий buryan-work, шаблоны, матрица ВКС, !пресейл в боте 2026-10-21 15:03:32 +03:00
buryan-agent 7bc8ebf1f2 [S-02] Gitea SSO через Authentik работает: провайдер gitea, кнопка входа, редирект 302 2026-10-21 15:01:20 +03:00
buryan-agent 5d68dfcffb [S-02] ADR-007: план SSO для Gitea (oauth2-proxy + Authentik + nginx), откат описан 2026-10-21 14:39:32 +03:00
buryan-agent a02ddbc83c [A-09] Страж следит за свежестью бэкапов: последний vzdump старше 26 ч → алерт 2026-10-21 14:16:49 +03:00
buryan-agent 163e563f49 [X-05] Явное расписание бэкапов: ежедневно 02:00, все гости, keep-last=2 2026-10-21 14:11:08 +03:00
buryan-agent 1f788441cb [X-01] Бэкапы починены: storage backups зарегистрирован, fstrim освободил 6% пула 2026-10-21 14:06:10 +03:00
buryan-agent 2b095565c0 [X-01] Аудит бэкапов: vzdump молчит с 19.10, дублей нет, пул 83.9% 2026-10-21 13:59:27 +03:00
buryan-agent 96c8cd3cda [X-04] Учения: проверка дампа одной базы, 0 таблиц считается провалом 2026-10-21 13:56:31 +03:00
buryan-agent 8d3fce6c57 [X-04] Учения восстановления: конфиги + дамп БД, ежемесячно 2026-10-21 13:56:15 +03:00
buryan-agent af3aced11c [S-05] Kuma: 60 мониторов, добавлены Portainer, Seerr, Paperless, Immich 2026-10-21 13:55:06 +03:00
buryan-agent f835c8147b [S-06] Восстановлены статусы A-08, S-06, S-07 после перезаписи трекера 2026-10-21 13:53:49 +03:00
buryan-agent da41c8ea6c [S-04] ADR-006: Mosquitto остаётся без SSO, компенсирующие меры 2026-10-21 13:53:42 +03:00
buryan-agent 6688bacf1e [S-07] Бэкап конфигов: 46 конфигураций (Jellyfin, Paperless, HA, Plex, *arr, Gitea, Prometheus) 2026-10-21 13:53:31 +03:00
buryan-agent cb8bcf47fa [S-07] Бэкап конфигов: 21 конфигурация, автообнаружение монтирований 2026-10-21 13:50:08 +03:00
buryan-agent 9d9694fb5f [S-02] Уточнены подходы к SSO: Gitea reverse-proxy, Prometheus oauth2-proxy, HA OIDC 2026-10-21 13:40:47 +03:00
buryan-agent 84b44375bc [A-07] Бэкап конфигов: HA, Gitea, Prometheus, Mosquitto, Kuma, AdGuard 2026-10-21 13:39:55 +03:00
buryan-agent 58f137e1a3 [A-08] Граф зависимостей и ссылки на статус в карточках 2026-10-21 13:34:59 +03:00
buryan-agent 12d6983a49 [K-09] Правило: всё в Gitea со статусами; трекер, проверка ID, обёртка коммита 2026-10-21 13:34:42 +03:00
buryan-agent d47a8c5bba Отчёт о дырах и ежедневный бэкап конфигураций
Отчёт Gaps.md: без SSO 27 сервисов, без бэкапа 39, без мониторинга 7,
критичных с дырами 4 (homeassistant, prometheus, gitea, mosquitto).

Бэкап конфигов: /usr/local/bin/backup-configs + cron 03:45, архив в
/mnt/backups/configs, хранение 30 дней. Собирает bind-монтирования
контейнеров и конфиги в /opt; данные (медиа, фото, БД) не дублируются.

Ограничение: конфиги сервисов, чьи данные лежат внутри CT, попадают только
при наличии bind-mount на хост — расширение через pct exec в следующем шаге.
2026-10-21 13:28:43 +03:00
buryan-agent 7c7655c905 Карточки сервисов: 83 уникальных сервиса, группы, домены, зависимости
Сгенерированы карточки: группа, критичность, CT, образ, порт, домен, SSO,
бэкап, зависимости, последствия падения, команды проверки и порядок действий.
Плюс страницы по группам и индекс Services.

Карточек 83, потому что 111 контейнеров — это 83 уникальных сервиса плюс
служебные копии promtail и oauth2-proxy в каждом CT.

Домены: 11 исправлены вручную (jellyfin, navidrome, plex, paperless и др.),
остальные — по nginx и имени сервиса.
2026-10-21 13:23:17 +03:00
buryan-agent 43502690c9 Политика: перезапуск — класс C с подтверждением; заявки в Matrix
Перезапуск контейнера отнесён к классу C (влияет на сервис) — агент только
предлагает, владелец подтверждает. Добавлена очередь заявок
/opt/hub-agents/approvals.json и команды бота: !заявки, !одобрить N,
!отклонить N. Исполняются только разрешённые действия (restart_container).

Дорожная карта переставлена: сначала скелет и структура сервисов, работа
(ВКС/Presale) — после стабилизации. Wiki обновлена.
2026-10-21 13:18:18 +03:00
buryan-agent 3af3fa304f Вики перенесена в организацию: git.buryans.ru/infrastructure/buryan-wiki
Gitea 28 отдаёт 404 для репозиториев пользователей (agent-qwen, root), но
корректно отдаёт репозитории организаций. Проверено на infrastructure/docs.

Документация перенесена в infrastructure/buryan-wiki (10 файлов, публично,
200 OK), код остаётся в agent-qwen/buryan-infra. В README добавлена ссылка,
в ops/wiki/WIKI.md описана причина и порядок обновления.
2026-10-21 12:46:20 +03:00
buryan-agent c20cddd747 Спринт: Wiki, статус-страница, рой агентов на DeepSeek
Wiki в Gitea: 9 страниц (архитектура, сервисы, агенты, дорожная карта,
регламенты, ADR, онбординг, работа). Инициализирована через API, затем
пушится как git-репозиторий.

Статус-страница hub.buryans.ru/status: 62 сервиса по группам, состояние
берётся из docker ps (TCP-проверка давала ложные срабатывания для CT111),
кэш 60 с, JSON на /status.json.

Рой агентов: groups.yaml (6 групп), policy.yaml (классы A/B/C/D, лимиты,
тихие часы), ТЗ шести секретарей и Головы, раннер (наблюдение) и мозг на
DeepSeek (json-ответ: диагноз, severity, предложенные действия). Таймеры:
раннер каждые 30 минут, мозг ежечасно. В v0 ничего не выполняется — только
диагностика и предложения; уведомление уходит при crit.

Найдено и исправлено агентом: freshrss, catalog и их oauth2-proxy были
недоступны — перезапущены, статус 62/62.
2026-10-21 12:43:57 +03:00
buryan-agent a931175a30 Дайджест «Что нового»: ежедневно в 12:00, только если что-то появилось
Генератор family_digest.py собирает контент (книги Calibre, медиа только с
файлами, фото Immich, документы Paperless) и человеческие анонсы из
ops/product/WHATS-NEW.md. Если нового нет — молчит.

Таймер hub-digest.timer: ежедневно 12:00. Команда бота: !новости / !дайджест /
!что нового (обработчик учитывает, что бот разбирает команду по первому слову).

Ловушки: pct exec с длинным python -c ломается на кавычках (запрос вынесен в
calibre_query.py внутри CT); медиа без файлов не считается новым.
2026-10-21 12:34:57 +03:00
buryan-agent 92ecc62ea3 Аудит развития: рынок решений, целевая архитектура, рой агентов, сверка с Full-Audit
Добавлен AUDIT-2026-10-21-VISION: обзор 60+ self-hosted решений (что есть,
что добавить, что не нужно), функциональные дыры по быту/контенту/знаниям/
работе, целевая архитектура из 6 групп и 6 агентов + Голова, Gitea как
центральная истина с Wiki, трек ВКС/Presale, дорожная карта на 19 недель.

Создан реестр services.yaml: 111 контейнеров с группами, критичностью, CT,
образом и портами (ключ CT:имя — иначе promtail и oauth2-proxy схлопывались).

Сверка с Full-Audit: гости 34, контейнеры 111 (в аудите было 105 — ошибка
подсчёта), домены 40, БД 43, HA 42/313, устройства 106.
2026-10-21 12:32:20 +03:00
buryan-agent 3af6737511 Telegram userbot на втором номере: сервис, CLI и связка с книжным ботом
Второй аккаунт (+79105469668, id 6922233999) авторизован через Telethon
по api_id от mautrix. Работает через прокси CT161 (прямого интернета нет).

Что есть: CLI (whoami/dialogs/find/join/files/save) и HTTP-сервис на 9122
(/health, /files, /save), который скачивает файлы в /opt/books/ingest —
дальше Calibre-Web импортирует сам. В книжном боте появились /tg <запрос>
и /tg скачать N.

Выяснилось: публичные книжные каналы — витрины со ссылками на ботов, файлов
там нет. Нужны каналы, где книги выкладывают файлами, или книжный бот,
которому userbot будет писать запрос.

Ловушка: PowerShell добавляет BOM в файлы — Python падает на U+FEFF.
2026-10-21 11:53:56 +03:00
buryan-agent 1b6847822c Книги: бот знает каталог Полины, советует похожие и качает в библиотеку
Каталог polina-library.json (181 книга, 45 серий, статусы серий) теперь
используется ботом. Добавлены команды: /полина (что читать дальше, что ждёт
перевода или выхода), /похожие (та же серия, следующий том, другие серии
автора), /скачать (Флибуста-зеркало и libgen, с проверкой совпадения названия).

Скачанное кладётся в /opt/books/ingest — Calibre-Web-Automated импортирует
сам. Для Полины создана полка «Полина» и на неё добавлены три книги
(Царство Проклятых, Плетущая, Обсидиановый огонь).

Ловушки: без сверки названия Флибуста отдаёт случайную книгу; order —
зарезервированное слово в SQLite; calibredb remove в контейнере молчит,
удалять через metadata.db.
2026-10-21 11:48:40 +03:00
buryan-agent f420e9079b Mesh: найдена причина падений — пересечение DHCP-пула с серверами и плавающий IP узла
Слабый сигнал исключён: бэкхол Кабинета RSSI -53. Настоящая причина:
1) DHCP-пул главного был 192.168.1.33-152, а серверы занимают 101-161 —
   клиенты и узлы могли получить занятый адрес (например .108 с n8n);
2) у узла Кабинет не было статического резерва, его IP плавал (.108, .185, .3),
   из-за чего он «пропадал» для мониторинга и клиентов;
3) на главном было включено автообновление компонентов — оба узла имели
   одинаковый uptime, то есть перезагружались вместе.

Исправлено: пул сужен до .170-.250, добавлен резерв 50:ff:20:ed:de:23 → .3
(через CLI, RCI не умеет), автообновление выключено, каналы закреплены
(1 и 11 по 20 МГц, 5 ГГц 36/80). Сторож mesh_watch ищет узлы по MAC через
контроллер, уведомляет в Matrix и сам применяет настройки.
2026-10-21 10:39:42 +03:00
buryan-agent ebaed39e88 Mesh: выключено автообновление, закреплены каналы, сторож узлов
Диагностика: бэкхол Кабинета в норме (RSSI -53, канал 36), значит падения
не от сигнала. На главном роутере было включено автообновление компонентов
(auto-update no disable), а оба узла имели одинаковый uptime — то есть
перезагружались одновременно, и mesh рассыпалась.

Сделано: auto-update disable на главном; закреплены каналы 2,4 ГГц (1 и 11)
и 5 ГГц (36); ширина 2,4 приведена к 20 МГц. Добавлены ping-мониторы в Kuma
с уведомлением в Matrix. Написан сторож mesh_watch.py (cron 5 мин): сообщает
о пропаже и возврате узла и сам применяет настройки, когда узел появляется.

Родители (192.168.1.63) физически офлайн — в mesh числится выключенным.
2026-10-21 10:28:53 +03:00
root a30c60f580 chore(audit): auto-snapshot and CHANGELOG update 2026-10-21
- LXC running: 33/33
- Alerts (24h): 0
- Disk PVE: 18%
2026-10-21 09:00:06 +03:00
buryan-agent 23fcd27a01 n8n: единый вход через Authentik, второй пароль убран
Внутренний логин n8n отключить штатно нельзя (OIDC/SAML — платные).
Сделан авто-вход: nginx видит отсутствие cookie n8n-auth и отправляет на
/hub-login; там auth_request проверяет сессию Authentik, сервис n8n-auto-login
логинится служебной учёткой и отдаёт браузеру готовую cookie n8n-auth.

Маршруты продублированы на VPS — домен указывает туда, а не на домашний сервер
(это выяснилось при отладке).

Сервис слушает только 127.0.0.1, cookie HttpOnly/Secure/SameSite=Lax.
Бэкапы конфигов nginx сохранены.
2026-10-20 23:52:39 +03:00
buryan-agent f936daa129 n8n: создан владелец, экран первичной настройки убран
После пересборки базы в таблице user осталась пустая строка (email и password
NULL), из-за чего n8n показывал форму создания пользователя. Владелец создан
через POST /rest/owner/setup: roman@buryans.ru. showSetupOnFirstLoad теперь
false, вход POST /rest/login отвечает 200. Пароль сохранён в
/root/.n8n-owner-password и в ops/creds/CREDENTIALS.md.
2026-10-20 23:46:15 +03:00
buryan-agent d967d4ed3f 2FA включён, Gitea прибран, README-индекс, статус Яндекс API
Authentik: стадия MFA Validation переведена в режим configure с TOTP —
при входе пользователь без устройства проходит настройку по QR. Откат
описан в ops/auth/2FA.md.

Gitea: удалены пустые репозитории root/buryan-infra и root/runbooks,
главному репозиторию задано описание и темы. README переписан как индекс:
карта инфраструктуры, ссылки на все разделы документации, принципы.

Яндекс: зафиксирован статус — чтение работает, управление через API 403
(нет scope iot), управление голосом и Zigbee работают.
2026-10-20 23:32:33 +03:00
buryan-agent a96bdac9b6 Роутеры: каналы исправлены, AP в HA; n8n починен полностью
Роутеры: оба Keenetic Hopper SE (5.1.5) авторизуются по x-ndm схеме.
Каналы 2,4 ГГц перекрывались (ch10 + ch7/40МГц) — выставлены ch1 и ch11 по
20 МГц. AP Кабинет добавлен в HA, всего 70 сущностей keenetic. Выяснено, что
.3 — беспроводной репитер (Ethernet не подключён), .63 офлайн.

n8n: причина таймаутов — неработающий task runner. Контейнер пересоздан с
N8N_RUNNERS_ENABLED=false, правильным портом 5680, путём данных и прокси.
Восстановлены 10 сценариев и 4 credentials, удалены дубли и битые webhook.
Все вебхуки отвечают 200, Telegram реально отправляет.
2026-10-20 23:29:55 +03:00
buryan-agent 8dcc68a12f Полный аудит системы: 34 гостя, 42 интеграции, 106 устройств
Собраны и сведены в один документ: гипервизор и ресурсы, сеть (40 доменов,
интерфейсы, туннели, порты), 106 устройств в сети, полный список 33 контейнеров
и ВМ с содержимым, 42 интеграции HA и 289 сущностей, Zigbee, Яндекс, n8n,
46 баз, бэкапы, cron, systemd, безопасность.

Найдено: 3 критичных (swap 100%, тонкий пул 83.6/90%, дубли z2m/mosquitto/
adguard), 6 существенных (временные БД n8n, n8n без credentials, Яндекс 403,
Frigate 0 камер, nmap_tracker пуст, Immich ML unhealthy), 6 средних.

Сразу исправлено: удалены временные базы n8n_big/n8n_tmp/n8n_restore (~100 МБ),
остановлен лишний zigbee2mqtt в CT 106 (без донгла).
2026-10-20 22:22:59 +03:00
buryan-agent 3e6ac0945d Zigbee-выключатель подключён, голосовое управление Яндексом
Первое Zigbee-устройство: Yandex YNDX_00532 (0xacbac0fffebde397) —
двухклавишный выключатель. В HA появились switch 1/2, подсветка, режимы,
переименованы по-человечески.

Ловушка: permit_join нельзя открыть дольше 254 секунд — запросы на 900/1800
молча отклоняются, из-за этого первая попытка не сработала. Написан keepjoin.py,
который держит окно открытым 15 минут.

Яндекс: переавторизация по QR обновляет cookie, но права iot не появляются;
прямые запросы к api.iot и iot.quasar дают 403/401. Сделан голосовой обход:
команда бота !алиса <фраза> отправляет «Алиса, ...» на колонку, и она
выполняет действие. Работает для всех устройств аккаунта.
2026-10-20 21:56:42 +03:00
buryan-agent 2ec0b721fd Восстановлены 15 сценариев n8n и добавлен его бэкап
n8n не был в бэкапах — поэтому после переезда на SQLite сценарии пропали.
Нашлись дампы retired-инсталляций (3 шт., Postgres). Восстановил их во
временные БД на CT 151 и вытащил 15 уникальных workflows, импортировал в
текущий n8n (docker exec n8n n8n import:workflow).

Credentials не переносятся: зашифрованы старым N8N_ENCRYPTION_KEY.

Добавлен /usr/local/bin/backup-n8n + cron 03:30: копирует SQLite с WAL и
логи, пакует в /mnt/backups/n8n, хранит 14 дней. Первый архив проверен.

Nextcloud: calendar 6.6.2 и contacts 8.9.1 установлены через egress-прокси
(occ app:install с https_proxy).

Ловушки: psql -A -t переносит строки (нужен copy to stdout); Postgres
base64 вставляет \n каждые 76 символов (нужен replace).
2026-10-20 21:42:21 +03:00
buryan-agent 6b269438eb Zigbee2MQTT на Sonoff V2, мост Яндекс.Умный дом, приложения Nextcloud
Sonoff Dongle Plus V2 определён как EFR32MG21 (ember, не zstack). LXC не
поддерживает usb0 — запущено на хосте с --privileged и --device. Адаптер
отвечает, MQTT подключён, frontend 8098, HA получил bridge-сущности,
режим сопряжения открыт на 15 минут.

Написан мост Яндекс Умный дом → MQTT → HA: 18 устройств (свет, розетки, ТВ,
датчики, пылесос). Чтение работает, запись 403 — токен музыкального скоупа
без права iot; для управления нужна переавторизация.

Nextcloud: поставлены notes, tasks, spreed, memories, richdocuments.
calendar и contacts не встали — app store недоступен (timeout).

HA: добавлены погода met.no и weather-сущность; всего 42 интеграции,
280 сущностей.
2026-10-20 21:33:13 +03:00
buryan-agent 5de4697549 Matrix восстановлен, Kuma и HA научились уведомлять в Matrix
Synapse падал в цикле: /opt/matrix/data принадлежал root вместо 991 и
контейнер пересоздался без сети matrix_matrix-net. Исправлено chown,
security-opt и подключением к сети; Matrix 200, боты работают.
Telegram-мост ожил после подключения к той же сети.

Добавлен POST/GET /notify в hub-core: шлёт сообщение в Matrix владельцу через
MEDIA-бота. Kuma получила webhook-уведомление с шаблоном
[{{STATUS}}] {{NAME}} и привязку ко всем мониторам. В HA добавлен
rest_command.hub_notify — проверено 200.

Написана карта связей между сервисами (ops/integration/LINKS.md): что связано,
что нет и какие решения ещё не задействованы (n8n, mautrix-мосты, Bazarr,
Vaultwarden, Zigbee2MQTT, Alertmanager, Paperless intake, Immich upload).
2026-10-20 20:38:08 +03:00
buryan-agent 9d0f51f9b2 Portainer, Linkding, аудит спринта и стратегия автоматизации
Portainer запущен (порт 9443 был занят SSH-туннелем GitHub — оставлен только
9000), API-ключ создан через /api/users/1/tokens, интеграция подключена.
Linkding: DRF-токен не работает при auth-proxy, но API отвечает на заголовок
X-Forwarded-User — добавлен сенсор закладок.

Итог дня: 37 интеграций, 255 сущностей, 104 трекера устройств.

Добавлены два документа: полный аудит спринта (что сделано, что нет и почему,
8 технических открытий) и стратегия автоматизации — 5 принципов, три слоя
архитектуры, 8 фаз, метрики и риски.
2026-10-20 20:18:27 +03:00