147 Commits
Author SHA1 Message Date
root 3c280946e2 Update python Docker tag to v3.15
lint / hygiene (push) Failing after 7s
lint / hygiene (pull_request) Failing after 3s
2026-11-04 00:31:01 +00:00
buryan-agent 5a162d6432 [AUDIT] Полный аудит системы для передачи в новую сессию
lint / hygiene (push) Failing after 0s
2026-10-28 11:52:53 +03:00
buryan-agent 971cc9f5d8 [CI] Gitea Actions: линт YAML, поиск секретов, обязательные файлы
lint / hygiene (push) Failing after 11s
2026-10-28 11:33:39 +03:00
buryan-agent 4fbb2c20ee [DECISION] 2FA не внедряем: только общая задача для всех членов семьи; зафиксировано и компенсировано 2026-10-28 11:21:30 +03:00
buryan-agent 82f65c5671 [P0][HERMES] fail2ban, SSH без пароля, Hermes (шина+планировщик), реестр автоматизаций, чистка Plex/Tautulli 2026-10-28 10:51:43 +03:00
buryan-agent 1987573484 [PLAN] Финишная подготовка перед локальной LLM: зрелость, дыры, реестр автоматизаций, этапы MCore 2026-10-28 10:28:15 +03:00
buryan-agent 5eb5ae2eb9 [MONITORING] Heartbeat бэкапов для Kuma, ремонт интервалов и push-токенов, swap на общем диске 2026-10-28 09:29:37 +03:00
buryan-agent 668b73ff17 [A-38] Снимок состояния 2026-10-28 2026-10-28 09:00:27 +03:00
root 7683fbefd7 chore(audit): auto-snapshot and CHANGELOG update 2026-10-28
- LXC running: 32/33
- Alerts (24h): 0
- Disk PVE: 27%
2026-10-28 09:00:07 +03:00
buryan-agent 67f62a7408 [BACKUP] Restore-тест: убран pipefail-SIGPIPE, ежемесячный cron, HDD как цель 2026-10-28 08:07:46 +03:00
buryan-agent ff2e7f94db [INCIDENT] read-only корень, память и zram, аудит Prometheus, порядок в Matrix, бэкапы на HDD 2026-10-28 08:03:04 +03:00
buryan-agent c70c430d8e [STORAGE] Все данные сервисов в общем хранилище: Nextcloud, Paperless, Immich (NFS), Matrix, Ollama 2026-10-27 18:51:34 +03:00
buryan-agent 335a8c39f3 [STORAGE] Общее хранилище на NVMe (books, downloads, frigate), бэкапы на HDD, fstab для pve-backups 2026-10-27 18:34:11 +03:00
buryan-agent 1fd0f91231 [DISKS] Медиатека на NVMe 1 ТБ, архив на HDD 1 ТБ, ночная копия; лечение read-only после сборки 2026-10-27 17:58:47 +03:00
buryan-agent 69bb14fbef [A-38] Снимок состояния 2026-10-27 2026-10-27 09:00:28 +03:00
root c1fbcc849e chore(audit): auto-snapshot and CHANGELOG update 2026-10-27
- LXC running: 33/33
- Alerts (24h): 0
- Disk PVE: 51%
2026-10-27 09:00:26 +03:00
buryan-agent a038ba9348 [A-38] Снимок состояния 2026-10-26 2026-10-26 09:00:14 +03:00
root 3b74a6fa55 chore(audit): auto-snapshot and CHANGELOG update 2026-10-26
- LXC running: 33/33
- Alerts (24h): 0
- Disk PVE: 51%
2026-10-26 09:00:12 +03:00
buryan-agent 194ee4f89a [A-38] Снимок состояния 2026-10-25 2026-10-25 09:00:32 +03:00
buryan-agent f191cc98f6 [A-26] Недельный отчёт 2026-W43 2026-10-25 09:00:30 +03:00
root 1524ab9797 chore(audit): auto-snapshot and CHANGELOG update 2026-10-25
- LXC running: 33/33
- Alerts (24h): 0
- Disk PVE: 51%
2026-10-25 09:00:18 +03:00
buryan-agent 6aed00b1f4 [A-38] Снимок состояния 2026-10-24 2026-10-24 09:00:36 +03:00
root 01e0633e76 chore(audit): auto-snapshot and CHANGELOG update 2026-10-24
- LXC running: 33/33
- Alerts (24h): 0
- Disk PVE: 51%
2026-10-24 09:00:11 +03:00
buryan-agent 586c70b927 [NIGHT] Проверка отката на CT124: процедура pct rollback + start + docker start, дополнения в runbook 2026-10-23 23:07:21 +03:00
buryan-agent 069af80d1c [NIGHT] Чистка 33 CT (−28 ГБ) и хоста (−7.5 ГБ), снапшоты для отката; подготовка миграции на 1 ТБ с проверкой в песочнице 2026-10-23 23:03:01 +03:00
buryan-agent 653ed42d69 [MEDIA] Властелин Колец снят с загрузки, диск освобождён до 62%; M-16 отложен 2026-10-23 22:36:51 +03:00
buryan-agent 50b2d43288 [PLAN] Спринты 7-10: безопасность, работа, HA-устройства, диск 1ТБ (SATA есть); Plex выведен 2026-10-23 22:35:53 +03:00
buryan-agent ef791095ff [SECRETARY] Агент с инструментами и памятью, 15 команд, фикс прав и приоритетов; диск очищен на 18.6 ГБ 2026-10-23 22:32:24 +03:00
buryan-agent 453bf6eb5c [PLAN-3.1] Сверка плана V3 с фактами: M-02/M-03/M-20 закрыты, M-14 спорный, блокеры обновлены 2026-10-23 22:07:23 +03:00
buryan-agent 167b8a5751 [HOME] План переноса устройств из Яндекса: Zigbee-реле локально, Yeelight LAN, Xiaomi по токенам 2026-10-23 21:44:58 +03:00
buryan-agent cacef3caf1 [HOME] Свой мост Яндекс.Умный дом → MQTT: 23 устройства, состояния в HA; управление ждёт токен записи 2026-10-23 21:41:40 +03:00
buryan-agent 2039beff28 [HOME] HA: AdGuard восстановлен (14/14), SpeedTest убран, MQTT/Zigbee свет работает; недоступных 27→11 2026-10-23 21:31:47 +03:00
buryan-agent 10e4c16c7e [MONITORING] Kuma-экспортёр, панели Grafana, пинги бэкапов; 0 недоступных мониторов 2026-10-23 21:20:10 +03:00
buryan-agent a1a719b514 [SWARM][SPRINT-6] Агенты: исполнение A/B, заявки C с TTL; восстановление, ротация, второй контур на VPS 2026-10-23 20:56:41 +03:00
buryan-agent 4089210f58 [MEDIA] Запуск фильма по команде (Chromecast) и вебхук навыка Алисы 2026-10-23 20:30:55 +03:00
buryan-agent 1e036edf2b [SPRINT-3] Оркестрирование: скоринг маршрутов, цепочка намерений, журнал и !маршрут 2026-10-23 20:22:01 +03:00
buryan-agent b144922974 [SPRINT-3] Словарь алиасов 90 названий, API /aliases и команда !алиас 2026-10-23 20:18:24 +03:00
buryan-agent 42dcc08d5a [SPRINT-3] История и кэш каталога, разбор inbox (теги/статусы), роли во всех ботах 2026-10-23 20:14:02 +03:00
buryan-agent b5378ddeb1 [SPRINT-3] Русские запросы: словарь переводов + транслитерация 2026-10-23 20:10:47 +03:00
buryan-agent afe563d265 [SPRINT-3] Каталог медиа с нормализацией, разбор намерений, роли, статусы пожеланий 2026-10-23 20:07:12 +03:00
buryan-agent 3b73397fd8 [PLAN] Полный список оставшихся задач; статус Plex 2026-10-23 19:53:15 +03:00
buryan-agent 1c17b7b520 [PLAN] M-04 профили и лимиты, дашборд «Дом» на метриках HA (спринт 5) 2026-10-23 19:44:53 +03:00
buryan-agent e18d832f3f [PLAN] K-07 закрыт (46 целей), M-20 Trakt подключён 2026-10-23 19:38:59 +03:00
buryan-agent 931545af29 [K-07] Бэкап конфигураций доведён до 46 целей (+9: jellyfin, plex, dashy, frigate и др.) 2026-10-23 19:38:59 +03:00
buryan-agent 5b790a5e27 [SSO] Jellyfin: кнопка Authentik отдельным JS-файлом через nginx 2026-10-23 19:30:06 +03:00
buryan-agent 6fa76c84a9 [SSO] Jellyfin: кнопка входа через Authentik (nginx sub_filter), разбор EnableAuthorization 2026-10-23 19:22:20 +03:00
buryan-agent acb717d66a [SSO] Закрыты 6 открытых приложений; авто-SSO Jellyfin откатано, локальный вход проверен 2026-10-23 19:08:48 +03:00
buryan-agent 675eaa5ad4 [SSO] Аудит 52 приложений: админский доступ восстановлен; Jellyfin без локальной формы 2026-10-23 19:05:28 +03:00
buryan-agent 0985d28dbc [SSO] Jellyfin: вход по прямой ссылке /sso/OID/start/authentik; кнопка в UI отсутствует 2026-10-23 19:01:19 +03:00
buryan-agent 07c593ee03 [SSO] Jellyfin: причина слёта SSO — политика family-access без админов; добавлена привязка 2026-10-23 18:58:17 +03:00
buryan-agent 36c9bcdd42 [M-20] Trakt: инструкция по Client ID/Secret и верный redirect URI 2026-10-23 18:43:06 +03:00
buryan-agent 4e901523c5 [MEDIA] Bazarr: профиль «Русский + English», провайдеры, разбор ловушек 2026-10-23 18:40:26 +03:00
buryan-agent 06befe0e3e [OPS] Чистка диска (-41 ГБ), самовосстановление сервисов (класс B), метрики 2026-10-23 17:49:28 +03:00
buryan-agent 394f7b2aa1 [HW] План ИИ-узла: что переносить, сколько RAM нужно, апгрейды 2026-10-23 17:44:27 +03:00
buryan-agent 7df1b445c3 [HW] MCore4 Pro: верные характеристики (Core Ultra 5 125H, NPU, Arc, 16/256) 2026-10-23 17:32:12 +03:00
buryan-agent a91bd7c61b [HW] Yealink MCore4 Pro: сценарии применения в проекте 2026-10-23 17:29:34 +03:00
buryan-agent 0279ccb0c7 [VOICE] Голосовой ассистент отложен: задачи V-01…V-08 в бэклоге 2026-10-23 17:29:16 +03:00
buryan-agent 5c14e773b8 [VOICE] Гибридный ассистент: правила + DeepSeek, память диалога, скачивание медиа 2026-10-23 17:24:00 +03:00
buryan-agent acc97b0f7f [HOME] Яндекс: локальный режим восстановлен, самовосстановление интеграции 2026-10-23 16:50:08 +03:00
buryan-agent dbe4fc5d1e [HOME] 6 автоматизаций HA + мост HA→hub (проверено) 2026-10-23 16:41:18 +03:00
buryan-agent 511739e46f [BOOK] Загрузчик книг: Flibusta через VPN-прокси + юзербот (gsearch/gsave) 2026-10-23 16:24:49 +03:00
buryan-agent 53ebb861ca [BOOK] Каталог чтения (181 книга, 45 серий): поиск и команды !книги/!серия 2026-10-23 15:45:20 +03:00
buryan-agent 033caf5dfe [M-03] Clarkson's Farm: S03 импортирован, S04/S05 качаются; Jellyfin TV-библиотека 2026-10-23 15:43:47 +03:00
buryan-agent 823455a4b5 [SSO] SSO во всех новых сервисах; Jellyfin: добавлена библиотека сериалов 2026-10-23 15:14:09 +03:00
buryan-agent 2200fd1958 [SSO] Kavita: SSO работает; библиотека создана; файлы — заглушки 1.6 КБ 2026-10-23 14:54:38 +03:00
buryan-agent c574142805 [SSO] Фикс: пустой grant_types у провайдеров Authentik (kavita/netbox/docmost/podfetch) 2026-10-23 14:46:10 +03:00
buryan-agent 1070fbbad9 [SSO] Kavita: правильный redirect_uri /signin-oidc, карточка и документация 2026-10-23 14:40:41 +03:00
buryan-agent ad55a563a3 [SSO] Модель аккаунтов: админ = akadmin через Authentik; Kavita под OIDC 2026-10-23 14:37:34 +03:00
buryan-agent f8e853dd98 [INT] Единый поиск: +Jellyfin/Radarr/Sonarr/Paperless; карта интеграций 2026-10-23 14:31:55 +03:00
buryan-agent 81772ffb5f [AUDIT] Оценка достижения цели V3: инфра 80%, цель 20%; план закрытия 2026-10-23 14:29:13 +03:00
buryan-agent 19bbb9c5c6 [M-02] MEDIA.md: статусы синхронизированы с фактическим состоянием 2026-10-23 14:24:41 +03:00
buryan-agent 57b5002622 [AUDIT] Сверка с мастер-планом V3: что сделано, что упущено, порядок 2026-10-23 14:24:28 +03:00
buryan-agent 80e4c90430 [K-04] Центральная панель Dashy: 11 разделов, 47 ссылок, новые сервисы 2026-10-23 14:22:30 +03:00
buryan-agent 74fa76fab2 [S5] Дашборды Медиа/Бэкапы/Инфраструктура; плагин Trakt установлен 2026-10-23 14:15:51 +03:00
buryan-agent bb93807800 [M-02] qBittorrent: systemd-сервис, проверяется метриками (не docker) 2026-10-23 14:10:29 +03:00
buryan-agent ad9b27ca2b [M-02][M-03] qBittorrent в реестре; сквозной цикл медиа пройден 2026-10-23 14:09:01 +03:00
buryan-agent a4b6bf2786 [M-02] Секретарь различает действие и вопрос; команда !пожелания 2026-10-23 13:23:02 +03:00
buryan-agent f47b1bce17 [M-01] Matrix: центральный бот-секретарь с маршрутизацией и пожеланиями 2026-10-23 13:21:44 +03:00
buryan-agent 575a73fa52 [A-70] Семья без админских групп: админ только akadmin; Никита как все 2026-10-23 13:05:56 +03:00
buryan-agent d870d66765 [A-69] Никита: полный доступ к сервисам через family; заготовка restricted 2026-10-23 12:45:25 +03:00
buryan-agent 84b4164005 [A-68] Authentik: группа restricted для Никиты, доступ к новым приложениям по группам 2026-10-23 12:42:37 +03:00
buryan-agent 929a4bcaea [A-67] Разбор по месту на диске: 4 варианта простыми словами 2026-10-23 12:35:36 +03:00
buryan-agent 6e75e90c55 [A-66] 6 доменов опубликованы, SSO на NetBox/Docmost/Podfetch 2026-10-23 12:35:24 +03:00
buryan-agent e0a30f14b6 [B-19] Учения: восстановление целого гостя из vzdump прошло 2026-10-23 12:19:03 +03:00
buryan-agent af73453d6f [A-65] Карта бэкапов: offsite проверен, новые цели, ловушка пула 2026-10-23 12:17:38 +03:00
buryan-agent 16b907ca14 [B-19] Бэкап конфигов VPS и синхронизация сертификатов (проверено) 2026-10-23 12:16:48 +03:00
buryan-agent 410f8b501b [B-19] Бэкап хостовых конфигов: nginx (94 файла), pve, systemd 2026-10-23 12:10:37 +03:00
buryan-agent 1c2e57418c [A-64] Мониторинг хранилища: метрики пула, панели Grafana, алерты 2026-10-23 09:51:44 +03:00
buryan-agent 8948e5b250 [A-63] Документация: fstrim и чистка CT; статус на 23.10 (125 сервисов) 2026-10-23 09:47:44 +03:00
buryan-agent 24ee410631 [A-62] Бэклог: закрыты B-15, B-16, B-20, B-24; B-32 на решение владельца 2026-10-23 09:35:10 +03:00
buryan-agent 1830105e97 [B-08] Podfetch: сервер подкастов вместо gPodder, карточка и метрика 2026-10-23 09:34:11 +03:00
buryan-agent e120984f78 [FIX] Thin pool: pre-prune теперь делает pct fstrim по всем CT 2026-10-23 09:26:48 +03:00
buryan-agent 52adaa7712 [A-38] Снимок состояния 2026-10-23 2026-10-23 09:00:32 +03:00
root f187095540 chore(audit): auto-snapshot and CHANGELOG update 2026-10-23
- LXC running: 33/33
- Alerts (24h): 0
- Disk PVE: 24%
2026-10-23 09:00:10 +03:00
buryan-agent da5c024d97 [A-38] Снимок состояния 2026-10-22 2026-10-22 09:00:30 +03:00
root c7d38a06cb chore(audit): auto-snapshot and CHANGELOG update 2026-10-22
- LXC running: 33/33
- Alerts (24h): 0
- Disk PVE: 24%
2026-10-22 09:00:08 +03:00
buryan-agent 99871fde4b [AUDIT] Финальные цифры спринта: 46 коммитов, 54 документа 2026-10-22 08:07:09 +03:00
buryan-agent 6e92a36fd2 [AUDIT] Итоговый аудит спринта: что сделано и что осталось 2026-10-22 06:23:18 +03:00
buryan-agent 67d4e6740c [B-19] Учения по конфигам: 121 файл, 62 архива, битых 0 2026-10-22 05:43:51 +03:00
buryan-agent 294f52cc8e [A-59] /health: полная сводка (сервисы, алерты, нагрузка, диск) 2026-10-22 05:41:50 +03:00
buryan-agent 370db8a42f [A-58] Поиск: ссылка на /me, хранение конфигов 7 дней, документация обновлена 2026-10-22 05:40:29 +03:00
buryan-agent 2ce770f573 [A-57] Поиск: индексируется документация (386 записей), исправлен порядок commit 2026-10-22 05:37:20 +03:00
buryan-agent 588c9d50b8 [A-56] Фильтр Up-событий в уведомлениях; корректировка по учениям 2026-10-22 05:31:53 +03:00
buryan-agent 13f4288727 [FIX] Stirling JVM -Xmx768m, сброс failed-юнитов; отчёт об OOM 2026-10-22 05:28:57 +03:00
buryan-agent d510b840cb [B-19] Документация: проверка целостности архивов 2026-10-22 05:23:17 +03:00
buryan-agent 92e3509294 [A-54] Актуальное состояние проекта: цифры, таймеры, открытые вопросы 2026-10-22 05:23:06 +03:00
buryan-agent c474e5c0ec [A-53] Докмест в метриках; аудит: 124 сервиса, учения 5/5 2026-10-22 05:18:48 +03:00
buryan-agent 1126413477 [B-13] Docmost в дампах и учениях: 5/5 баз восстанавливаются 2026-10-22 05:17:46 +03:00
buryan-agent 13e3fbbb38 [B-13] Docmost: база знаний развёрнута (CT103:3001), карточка 2026-10-22 05:16:58 +03:00
buryan-agent 8330a01970 [B-11] RAG: таблица источников и расписание переиндексации 2026-10-22 05:13:02 +03:00
buryan-agent 999f7d860c [B-19] Учения восстановления баз: 4/4, автоматизация 3-го числа 2026-10-22 05:11:23 +03:00
buryan-agent a14138b266 [A-50] RAG: поиск по умолчанию, замеры Ollama; мозг включён 2026-10-22 05:06:52 +03:00
buryan-agent c5b8f55449 [A-49] Единый реестр: 124 сервиса в статусе, мозг включён 2026-10-22 04:49:31 +03:00
buryan-agent eb640a33c3 [A-48] Аудит и утренний чек-лист: стабилизация памяти 2026-10-22 04:39:13 +03:00
buryan-agent 02f088aca7 [FIX] Load 190: лимит памяти CT110; отчёт об инциденте 2026-10-22 04:38:38 +03:00
buryan-agent 83a5fc59bf [A-47] Аудит безопасности: секреты, порты, пароли 2026-10-22 02:53:31 +03:00
buryan-agent 71dc1b3fee [A-46] Аудит портов: что открыто в LAN и что стоит закрыть 2026-10-22 02:52:54 +03:00
buryan-agent 2338161f82 [A-45] Утренняя проверка ночных автоматизаций (08:00) 2026-10-22 02:50:35 +03:00
buryan-agent eefb97b568 [A-44] Утренний чек-лист: новая политика бэкапов 2026-10-22 02:49:12 +03:00
buryan-agent 8c43a337e9 [A-43] Документ о расхождении реестров; политика бэкапов 2 задания 2026-10-22 02:49:02 +03:00
buryan-agent 743fba267b [FIX] Бэкап 02:00 восстановлен догоном; pre-prune таймер 01:45 2026-10-22 02:46:41 +03:00
buryan-agent 8f42a79e4e [A-42] Реестр в репозитории синхронизирован с рабочим (75 сервисов) 2026-10-22 02:04:26 +03:00
buryan-agent 360f07392f [A-41] Покрытие: обновлены цифры и новые сервисы; вики пересобрана 2026-10-22 02:03:55 +03:00
buryan-agent 647afbce61 [B-19] Runbook бэкапов: проверка, восстановление, сторож пула 2026-10-22 02:03:40 +03:00
buryan-agent a9344f540e [FIX] Контроль thin pool в агенте; Immich-компоненты возвращены на хост 2026-10-22 01:49:35 +03:00
buryan-agent 25a85fdefa [AUDIT] Утренний чек-лист: что отключено и почему 2026-10-22 01:45:07 +03:00
buryan-agent 08fda88161 [AUDIT] Аудит ночного спринта 22.10: где мы и что осталось 2026-10-22 01:44:58 +03:00
buryan-agent 04467782dc [FIX] Thin pool, бэкапы, hub-brain, logrotate — инцидент 22.10 2026-10-22 01:38:52 +03:00
buryan-agent 22caecf85c [A-40] Утренний чек-лист после спринта 2026-10-22 01:31:11 +03:00
buryan-agent fa6415c4bf [A-38] Снимок состояния 2026-10-22 2026-10-22 01:30:49 +03:00
buryan-agent b93e729208 [A-31..A-37] Спринт: сервисы, RAG, дампы баз, алерты 2026-10-22 01:29:44 +03:00
buryan-agent 377b6c0b70 [B-19] Логические дампы баз: NetBox, Nextcloud, Monica, Authentik 2026-10-22 01:26:03 +03:00
buryan-agent 53f2546043 [B-09] NetBox: инструкция импорта, таймер RAG, чистка нагрузки 2026-10-22 01:24:34 +03:00
buryan-agent 5105b1188d [A-30] Спринт: 4 сервиса, Renovate, RAG, алерты 2026-10-22 01:07:18 +03:00
buryan-agent 8b5d52ad9a [B-11] RAG: режим поиска работает (14 с), генерация ограничена CPU 2026-10-22 01:00:55 +03:00
buryan-agent 73f565cbdc [B-11] RAG: pgvector + эмбеддинги Ollama, маршрут /rag 2026-10-22 00:23:22 +03:00
buryan-agent 7bc61d3d93 [B-21] Обучение агента + чистка реестра (убраны дубли и агенты Beszel) 2026-10-21 23:33:50 +03:00
buryan-agent d64864c980 [B-12] Monica: семейная CRM развёрнута, карточка 2026-10-21 23:30:39 +03:00
buryan-agent 84151fd16d [B-09] NetBox: развёрнут (NetBox + Postgres + Redis), карточка 2026-10-21 23:24:50 +03:00
buryan-agent 3e3d93ecf0 [B-10] renovate.json: менеджеры docker-compose и dockerfile 2026-10-21 23:18:49 +03:00
buryan-agent 6d3cb716b2 [B-06][B-07] Kavita и Audiobookshelf: развёрнуты в CT111 2026-10-21 23:16:00 +03:00
buryan-agent 32efc875c0 [S-29] Vikunja OIDC: найдена причина (пустой redirect_uri), regex-режим 2026-10-21 23:11:30 +03:00
buryan-agent e1aaeb6844 [A-29] Ночной спринт: отчёт о работе 2026-10-21 23:01:32 +03:00
buryan-agent 04267c4d60 [A-27] Карточки для dozzle и beszel 2026-10-21 22:59:07 +03:00
buryan-agent 13ae96122c [A-26] Недельный отчёт 2026-W43 2026-10-21 22:58:49 +03:00
buryan-agent 9e9dd1749f [A-25] AdGuard rewrites: вторая попытка откачена, DNS восстановлен 2026-10-21 22:58:04 +03:00
buryan-agent 1531da9ddc [B-26][B-27] Учения: найден пропуск HA в бэкапе; тег v1.4 2026-10-21 22:55:26 +03:00
153 changed files with 14997 additions and 198 deletions

No files matched your search

+44
View File
@@ -0,0 +1,44 @@
name: lint
on: [push, pull_request]
jobs:
hygiene:
runs-on: ubuntu-latest
steps:
- uses: actions/checkout@v4
- name: YAML и compose
run: |
python3 - <<'PY'
import glob, sys, yaml
bad=[]
for p in glob.glob('**/*.yml', recursive=True)+glob.glob('**/*.yaml', recursive=True):
try:
yaml.safe_load(open(p, encoding='utf-8'))
except Exception as e:
bad.append(f"{p}: {str(e)[:80]}")
print("проверено файлов:", len(glob.glob('**/*.yml', recursive=True)))
if bad:
print("\n".join(bad)); sys.exit(1)
PY
- name: Секреты в коммите
run: |
python3 - <<'PY'
import re, subprocess, sys
files = subprocess.run(["git","ls-files"],capture_output=True,text=True).stdout.split()
pat = re.compile(r"(?i)(password|passwd|api[_-]?key|secret|token)\s*[:=]\s*['\"]?[A-Za-z0-9_\-]{16,}")
hits=[]
for f in files:
if f.endswith(('.md','.yml','.yaml','.py','.sh','.json','.ini','.conf','.env')):
try: t=open(f,encoding='utf-8',errors='ignore').read()
except Exception: continue
for m in pat.finditer(t):
if 'example' in m.group(0).lower() or 'placeholder' in m.group(0).lower(): continue
hits.append(f"{f}: подозрение на секрет")
print("файлов проверено:", len(files))
if hits:
print("\n".join(hits[:10])); sys.exit(1)
PY
- name: Обязательные файлы
run: |
for f in README.md docs/ARCHITECTURE.md ops; do
test -e "$f" || { echo "нет $f"; exit 1; }
done
+28
View File
@@ -1,4 +1,32 @@
# 📝 CHANGELOG
## [2026-10-28] - 09:00
- 📸 Авто-снимок: 32/33 LXC запущено, 0 алертов за 24ч.
- 💻 Последний коммит: 67f62a7 [BACKUP] Restore-тест: убран pipefail-SIGPIPE, ежемесячный cron, HDD как цель
## [2026-10-27] - 09:00
- 📸 Авто-снимок: 33/33 LXC запущено, 0 алертов за 24ч.
- 💻 Последний коммит: a038ba9 [A-38] Снимок состояния 2026-10-26
## [2026-10-26] - 09:00
- 📸 Авто-снимок: 33/33 LXC запущено, 0 алертов за 24ч.
- 💻 Последний коммит: 194ee4f [A-38] Снимок состояния 2026-10-25
## [2026-10-25] - 09:00
- 📸 Авто-снимок: 33/33 LXC запущено, 0 алертов за 24ч.
- 💻 Последний коммит: 6aed00b [A-38] Снимок состояния 2026-10-24
## [2026-10-24] - 09:00
- 📸 Авто-снимок: 33/33 LXC запущено, 0 алертов за 24ч.
- 💻 Последний коммит: 586c70b [NIGHT] Проверка отката на CT124: процедура pct rollback + start + docker start, дополнения в runbook
## [2026-10-23] - 09:00
- 📸 Авто-снимок: 33/33 LXC запущено, 0 алертов за 24ч.
- 💻 Последний коммит: da5c024 [A-38] Снимок состояния 2026-10-22
## [2026-10-22] - 09:00
- 📸 Авто-снимок: 33/33 LXC запущено, 0 алертов за 24ч.
- 💻 Последний коммит: 99871fd [AUDIT] Финальные цифры спринта: 46 коммитов, 54 документа
## [2026-10-21] - 09:00
- 📸 Авто-снимок: 33/33 LXC запущено, 0 алертов за 24ч.
- 💻 Последний коммит: 23fcd27 n8n: единый вход через Authentik, второй пароль убран
+3
View File
@@ -0,0 +1,3 @@
# dialog
записей: 0
+3
View File
@@ -0,0 +1,3 @@
# dialog
записей: 0
+3
View File
@@ -0,0 +1,3 @@
# dialog
записей: 0
+3
View File
@@ -0,0 +1,3 @@
# dialog
записей: 0
+3
View File
@@ -0,0 +1,3 @@
# dialog
записей: 0
+3
View File
@@ -0,0 +1,3 @@
# dialog
записей: 0
+3
View File
@@ -0,0 +1,3 @@
# events
записей: 0
+3
View File
@@ -0,0 +1,3 @@
# events
записей: 0
+3
View File
@@ -0,0 +1,3 @@
# events
записей: 0
+3
View File
@@ -0,0 +1,3 @@
# events
записей: 0
+3
View File
@@ -0,0 +1,3 @@
# events
записей: 0
+3
View File
@@ -0,0 +1,3 @@
# events
записей: 0
+35
View File
@@ -0,0 +1,35 @@
{
"at": "2026-10-22T04:30:02+00:00",
"jellyfin": {
"Movie": 0,
"Series": 0,
"Episode": 0,
"Audio": 0
},
"navidrome": {
"albums": 28,
"tracks": 943,
"artists": 7
},
"calibre": {
"books": 13,
"authors": 9
},
"immich": {
"assets": 0,
"albums": 0,
"users": 1
},
"paperless": {
"documents": 0
},
"sonarr": {
"items": 5
},
"radarr": {
"items": 14
},
"frigate": {
"cameras": 0
}
}
+16
View File
@@ -0,0 +1,16 @@
# Инвентаризация
на 2026-10-22T04:30:02+00:00
| Сервис | Что есть |
|---|---|
| Jellyfin | фильмы 0, сериалы 0, серии 0, треки 0 |
| Navidrome | альбомы 28, треки 943, исполнители 7 |
| Calibre | книги 13, авторы 9 |
| Immich | снимки 0, альбомы 0 |
| Paperless | документы 0 |
| Sonarr | сериалов в базе 5 |
| Radarr | фильмов в базе 14 |
| Frigate | камер 0 |
_Нули означают, что библиотека пуста, а не что сервис не работает._
+35
View File
@@ -0,0 +1,35 @@
{
"at": "2026-10-23T04:30:02+00:00",
"jellyfin": {
"Movie": 0,
"Series": 0,
"Episode": 0,
"Audio": 0
},
"navidrome": {
"albums": 28,
"tracks": 943,
"artists": 7
},
"calibre": {
"books": 13,
"authors": 9
},
"immich": {
"assets": 0,
"albums": 0,
"users": 1
},
"paperless": {
"documents": 0
},
"sonarr": {
"items": 5
},
"radarr": {
"items": 14
},
"frigate": {
"cameras": 0
}
}
+16
View File
@@ -0,0 +1,16 @@
# Инвентаризация
на 2026-10-23T04:30:02+00:00
| Сервис | Что есть |
|---|---|
| Jellyfin | фильмы 0, сериалы 0, серии 0, треки 0 |
| Navidrome | альбомы 28, треки 943, исполнители 7 |
| Calibre | книги 13, авторы 9 |
| Immich | снимки 0, альбомы 0 |
| Paperless | документы 0 |
| Sonarr | сериалов в базе 5 |
| Radarr | фильмов в базе 14 |
| Frigate | камер 0 |
_Нули означают, что библиотека пуста, а не что сервис не работает._
+35
View File
@@ -0,0 +1,35 @@
{
"at": "2026-10-24T04:30:01+00:00",
"jellyfin": {
"Movie": 1,
"Series": 1,
"Episode": 24,
"Audio": 0
},
"navidrome": {
"albums": 28,
"tracks": 943,
"artists": 7
},
"calibre": {
"books": 41,
"authors": 32
},
"immich": {
"assets": 0,
"albums": 0,
"users": 1
},
"paperless": {
"documents": 0
},
"sonarr": {
"items": 6
},
"radarr": {
"items": 12
},
"frigate": {
"cameras": 0
}
}
+16
View File
@@ -0,0 +1,16 @@
# Инвентаризация
на 2026-10-24T04:30:01+00:00
| Сервис | Что есть |
|---|---|
| Jellyfin | фильмы 1, сериалы 1, серии 24, треки 0 |
| Navidrome | альбомы 28, треки 943, исполнители 7 |
| Calibre | книги 41, авторы 32 |
| Immich | снимки 0, альбомы 0 |
| Paperless | документы 0 |
| Sonarr | сериалов в базе 6 |
| Radarr | фильмов в базе 12 |
| Frigate | камер 0 |
_Нули означают, что библиотека пуста, а не что сервис не работает._
+35
View File
@@ -0,0 +1,35 @@
{
"at": "2026-10-25T04:30:02+00:00",
"jellyfin": {
"Movie": 1,
"Series": 1,
"Episode": 24,
"Audio": 0
},
"navidrome": {
"albums": 28,
"tracks": 943,
"artists": 7
},
"calibre": {
"books": 41,
"authors": 32
},
"immich": {
"assets": 0,
"albums": 0,
"users": 1
},
"paperless": {
"documents": 0
},
"sonarr": {
"items": 6
},
"radarr": {
"items": 12
},
"frigate": {
"cameras": 0
}
}
+16
View File
@@ -0,0 +1,16 @@
# Инвентаризация
на 2026-10-25T04:30:02+00:00
| Сервис | Что есть |
|---|---|
| Jellyfin | фильмы 1, сериалы 1, серии 24, треки 0 |
| Navidrome | альбомы 28, треки 943, исполнители 7 |
| Calibre | книги 41, авторы 32 |
| Immich | снимки 0, альбомы 0 |
| Paperless | документы 0 |
| Sonarr | сериалов в базе 6 |
| Radarr | фильмов в базе 12 |
| Frigate | камер 0 |
_Нули означают, что библиотека пуста, а не что сервис не работает._
+35
View File
@@ -0,0 +1,35 @@
{
"at": "2026-10-26T04:30:01+00:00",
"jellyfin": {
"Movie": 1,
"Series": 1,
"Episode": 24,
"Audio": 0
},
"navidrome": {
"albums": 28,
"tracks": 943,
"artists": 7
},
"calibre": {
"books": 41,
"authors": 32
},
"immich": {
"assets": 0,
"albums": 0,
"users": 1
},
"paperless": {
"documents": 0
},
"sonarr": {
"items": 6
},
"radarr": {
"items": 12
},
"frigate": {
"cameras": 0
}
}
+16
View File
@@ -0,0 +1,16 @@
# Инвентаризация
на 2026-10-26T04:30:01+00:00
| Сервис | Что есть |
|---|---|
| Jellyfin | фильмы 1, сериалы 1, серии 24, треки 0 |
| Navidrome | альбомы 28, треки 943, исполнители 7 |
| Calibre | книги 41, авторы 32 |
| Immich | снимки 0, альбомы 0 |
| Paperless | документы 0 |
| Sonarr | сериалов в базе 6 |
| Radarr | фильмов в базе 12 |
| Frigate | камер 0 |
_Нули означают, что библиотека пуста, а не что сервис не работает._
+35
View File
@@ -0,0 +1,35 @@
{
"at": "2026-10-27T04:30:02+00:00",
"jellyfin": {
"Movie": 1,
"Series": 1,
"Episode": 24,
"Audio": 0
},
"navidrome": {
"albums": 28,
"tracks": 943,
"artists": 7
},
"calibre": {
"books": 41,
"authors": 32
},
"immich": {
"assets": 0,
"albums": 0,
"users": 1
},
"paperless": {
"documents": 0
},
"sonarr": {
"items": 6
},
"radarr": {
"items": 12
},
"frigate": {
"cameras": 0
}
}
+16
View File
@@ -0,0 +1,16 @@
# Инвентаризация
на 2026-10-27T04:30:02+00:00
| Сервис | Что есть |
|---|---|
| Jellyfin | фильмы 1, сериалы 1, серии 24, треки 0 |
| Navidrome | альбомы 28, треки 943, исполнители 7 |
| Calibre | книги 41, авторы 32 |
| Immich | снимки 0, альбомы 0 |
| Paperless | документы 0 |
| Sonarr | сериалов в базе 6 |
| Radarr | фильмов в базе 12 |
| Frigate | камер 0 |
_Нули означают, что библиотека пуста, а не что сервис не работает._
+35
View File
@@ -0,0 +1,35 @@
{
"at": "2026-10-28T04:30:01+00:00",
"jellyfin": {
"Movie": 1,
"Series": 1,
"Episode": 24,
"Audio": 0
},
"navidrome": {
"albums": 28,
"tracks": 943,
"artists": 7
},
"calibre": {
"books": 41,
"authors": 32
},
"immich": {
"assets": 0,
"albums": 0,
"users": 1
},
"paperless": {
"documents": 0
},
"sonarr": {
"items": 6
},
"radarr": {
"items": 12
},
"frigate": {
"cameras": 0
}
}
+16
View File
@@ -0,0 +1,16 @@
# Инвентаризация
на 2026-10-28T04:30:01+00:00
| Сервис | Что есть |
|---|---|
| Jellyfin | фильмы 1, сериалы 1, серии 24, треки 0 |
| Navidrome | альбомы 28, треки 943, исполнители 7 |
| Calibre | книги 41, авторы 32 |
| Immich | снимки 0, альбомы 0 |
| Paperless | документы 0 |
| Sonarr | сериалов в базе 6 |
| Radarr | фильмов в базе 12 |
| Frigate | камер 0 |
_Нули означают, что библиотека пуста, а не что сервис не работает._
+4
View File
@@ -0,0 +1,4 @@
{"id": 1, "at": "2026-10-22T00:12:56", "bot": "infra", "from": "@akadmin:matrix.buryans.ru", "kind": "пожелание", "text": "Посмотри есть ли критические проблемы"}
{"id": 2, "at": "2026-10-22T00:13:07", "bot": "media", "from": "@akadmin:matrix.buryans.ru", "kind": "пожелание", "text": "Можешь ли ты скачать ферму кларксона"}
{"id": 3, "at": "2026-10-22T00:14:43", "bot": "media", "from": "@akadmin:matrix.buryans.ru", "kind": "пожелание", "text": "Скачай"}
{"id": 4, "at": "2026-10-22T00:15:53", "bot": "media", "from": "@akadmin:matrix.buryans.ru", "kind": "пожелание", "text": "Ок"}
+3
View File
@@ -0,0 +1,3 @@
{"id": 1, "at": "2026-10-23T22:23:09", "bot": "media", "from": "@akadmin:matrix.buryans.ru", "kind": "пожелание", "text": "Эти не интересные подскажи тупую американскую комедию типо очень страшного кино"}
{"id": 2, "at": "2026-10-23T22:24:18", "bot": "media", "from": "@akadmin:matrix.buryans.ru", "kind": "пожелание", "text": "Эти не интересные подскажи тупую американскую комедию типо очень страшного кино"}
{"id": 3, "at": "2026-10-23T22:28:30", "bot": "media", "from": "@akadmin:matrix.buryans.ru", "kind": "пожелание", "text": "Эти не интересные подскажи тупую американскую комедию типо очень страшного кино"}
+71
View File
@@ -0,0 +1,71 @@
# wishes
записей: 10
## 665bc3b1b8096a07
обновлено: 2026-10-20 08:36:04.886173+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 3
* **текст**: посоветуй фильм про космос
## d1449144fbb41ec4
обновлено: 2026-10-20 08:35:19.767909+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 2
* **текст**: посоветуй фильм про космос
## d3c1cb8c6803de58
обновлено: 2026-10-20 08:30:35.819843+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 1
* **текст**: граф
## 6438d460b153a934
обновлено: 2026-10-19 18:29:42.601848+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 9
* **текст**: входящие
## 4c399eb8d186a040
обновлено: 2026-10-19 18:28:03.538302+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 8
* **текст**: входящие
## 206625a9dc2ef302
обновлено: 2026-10-19 18:26:35.573683+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 7
* **текст**: входящие
## 7c71ec9ef6710266
обновлено: 2026-10-19 18:26:07.531245+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 6
* **текст**: входящие
## 7bd8e6589111cdcf
обновлено: 2026-10-19 17:13:05.235512+00:00
* **от**: @polina:matrix.buryans.ru
* **бот**: media
* **номер**: 5
* **текст**: хочу сериал про космос
## wish-002
обновлено: 2026-10-19 17:11:24.853757+00:00
* **от**: Сергей
* **бот**: cam
* **текст**: добавить камеры во двор
## wish-001
обновлено: 2026-10-19 17:11:24.834397+00:00
* **от**: Полина
* **бот**: media
* **текст**: хочу мультфильмы про кота
+99
View File
@@ -0,0 +1,99 @@
# wishes
записей: 14
## 912c925de49dcfd5
обновлено: 2026-10-21 21:15:53.853541+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 4
* **текст**: Ок
## 58be02cd2c676000
обновлено: 2026-10-21 21:14:43.197072+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 3
* **текст**: Скачай
## 14f8cf062dc523a1
обновлено: 2026-10-21 21:13:07.795455+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 2
* **текст**: Можешь ли ты скачать ферму кларксона
## 6b1116496ff50806
обновлено: 2026-10-21 21:12:56.695974+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: infra
* **номер**: 1
* **текст**: Посмотри есть ли критические проблемы
## 665bc3b1b8096a07
обновлено: 2026-10-20 08:36:04.886173+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 3
* **текст**: посоветуй фильм про космос
## d1449144fbb41ec4
обновлено: 2026-10-20 08:35:19.767909+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 2
* **текст**: посоветуй фильм про космос
## d3c1cb8c6803de58
обновлено: 2026-10-20 08:30:35.819843+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 1
* **текст**: граф
## 6438d460b153a934
обновлено: 2026-10-19 18:29:42.601848+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 9
* **текст**: входящие
## 4c399eb8d186a040
обновлено: 2026-10-19 18:28:03.538302+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 8
* **текст**: входящие
## 206625a9dc2ef302
обновлено: 2026-10-19 18:26:35.573683+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 7
* **текст**: входящие
## 7c71ec9ef6710266
обновлено: 2026-10-19 18:26:07.531245+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 6
* **текст**: входящие
## 7bd8e6589111cdcf
обновлено: 2026-10-19 17:13:05.235512+00:00
* **от**: @polina:matrix.buryans.ru
* **бот**: media
* **номер**: 5
* **текст**: хочу сериал про космос
## wish-002
обновлено: 2026-10-19 17:11:24.853757+00:00
* **от**: Сергей
* **бот**: cam
* **текст**: добавить камеры во двор
## wish-001
обновлено: 2026-10-19 17:11:24.834397+00:00
* **от**: Полина
* **бот**: media
* **текст**: хочу мультфильмы про кота
+120
View File
@@ -0,0 +1,120 @@
# wishes
записей: 17
## 6142b62696f75e5f
обновлено: 2026-10-23 19:28:30.340791+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 3
* **текст**: Эти не интересные подскажи тупую американскую комедию типо очень страшного кино
## bfcc2b4db98ec7d8
обновлено: 2026-10-23 19:24:18.456461+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 2
* **текст**: Эти не интересные подскажи тупую американскую комедию типо очень страшного кино
## f0085c5bb1791665
обновлено: 2026-10-23 19:23:09.587491+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 1
* **текст**: Эти не интересные подскажи тупую американскую комедию типо очень страшного кино
## 912c925de49dcfd5
обновлено: 2026-10-21 21:15:53.853541+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 4
* **текст**: Ок
## 58be02cd2c676000
обновлено: 2026-10-21 21:14:43.197072+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 3
* **текст**: Скачай
## 14f8cf062dc523a1
обновлено: 2026-10-21 21:13:07.795455+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 2
* **текст**: Можешь ли ты скачать ферму кларксона
## 6b1116496ff50806
обновлено: 2026-10-21 21:12:56.695974+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: infra
* **номер**: 1
* **текст**: Посмотри есть ли критические проблемы
## 665bc3b1b8096a07
обновлено: 2026-10-20 08:36:04.886173+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 3
* **текст**: посоветуй фильм про космос
## d1449144fbb41ec4
обновлено: 2026-10-20 08:35:19.767909+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 2
* **текст**: посоветуй фильм про космос
## d3c1cb8c6803de58
обновлено: 2026-10-20 08:30:35.819843+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 1
* **текст**: граф
## 6438d460b153a934
обновлено: 2026-10-19 18:29:42.601848+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 9
* **текст**: входящие
## 4c399eb8d186a040
обновлено: 2026-10-19 18:28:03.538302+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 8
* **текст**: входящие
## 206625a9dc2ef302
обновлено: 2026-10-19 18:26:35.573683+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 7
* **текст**: входящие
## 7c71ec9ef6710266
обновлено: 2026-10-19 18:26:07.531245+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 6
* **текст**: входящие
## 7bd8e6589111cdcf
обновлено: 2026-10-19 17:13:05.235512+00:00
* **от**: @polina:matrix.buryans.ru
* **бот**: media
* **номер**: 5
* **текст**: хочу сериал про космос
## wish-002
обновлено: 2026-10-19 17:11:24.853757+00:00
* **от**: Сергей
* **бот**: cam
* **текст**: добавить камеры во двор
## wish-001
обновлено: 2026-10-19 17:11:24.834397+00:00
* **от**: Полина
* **бот**: media
* **текст**: хочу мультфильмы про кота
+120
View File
@@ -0,0 +1,120 @@
# wishes
записей: 17
## 6142b62696f75e5f
обновлено: 2026-10-23 19:28:30.340791+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 3
* **текст**: Эти не интересные подскажи тупую американскую комедию типо очень страшного кино
## bfcc2b4db98ec7d8
обновлено: 2026-10-23 19:24:18.456461+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 2
* **текст**: Эти не интересные подскажи тупую американскую комедию типо очень страшного кино
## f0085c5bb1791665
обновлено: 2026-10-23 19:23:09.587491+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 1
* **текст**: Эти не интересные подскажи тупую американскую комедию типо очень страшного кино
## 912c925de49dcfd5
обновлено: 2026-10-21 21:15:53.853541+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 4
* **текст**: Ок
## 58be02cd2c676000
обновлено: 2026-10-21 21:14:43.197072+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 3
* **текст**: Скачай
## 14f8cf062dc523a1
обновлено: 2026-10-21 21:13:07.795455+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 2
* **текст**: Можешь ли ты скачать ферму кларксона
## 6b1116496ff50806
обновлено: 2026-10-21 21:12:56.695974+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: infra
* **номер**: 1
* **текст**: Посмотри есть ли критические проблемы
## 665bc3b1b8096a07
обновлено: 2026-10-20 08:36:04.886173+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 3
* **текст**: посоветуй фильм про космос
## d1449144fbb41ec4
обновлено: 2026-10-20 08:35:19.767909+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 2
* **текст**: посоветуй фильм про космос
## d3c1cb8c6803de58
обновлено: 2026-10-20 08:30:35.819843+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 1
* **текст**: граф
## 6438d460b153a934
обновлено: 2026-10-19 18:29:42.601848+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 9
* **текст**: входящие
## 4c399eb8d186a040
обновлено: 2026-10-19 18:28:03.538302+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 8
* **текст**: входящие
## 206625a9dc2ef302
обновлено: 2026-10-19 18:26:35.573683+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 7
* **текст**: входящие
## 7c71ec9ef6710266
обновлено: 2026-10-19 18:26:07.531245+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 6
* **текст**: входящие
## 7bd8e6589111cdcf
обновлено: 2026-10-19 17:13:05.235512+00:00
* **от**: @polina:matrix.buryans.ru
* **бот**: media
* **номер**: 5
* **текст**: хочу сериал про космос
## wish-002
обновлено: 2026-10-19 17:11:24.853757+00:00
* **от**: Сергей
* **бот**: cam
* **текст**: добавить камеры во двор
## wish-001
обновлено: 2026-10-19 17:11:24.834397+00:00
* **от**: Полина
* **бот**: media
* **текст**: хочу мультфильмы про кота
+120
View File
@@ -0,0 +1,120 @@
# wishes
записей: 17
## 6142b62696f75e5f
обновлено: 2026-10-23 19:28:30.340791+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 3
* **текст**: Эти не интересные подскажи тупую американскую комедию типо очень страшного кино
## bfcc2b4db98ec7d8
обновлено: 2026-10-23 19:24:18.456461+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 2
* **текст**: Эти не интересные подскажи тупую американскую комедию типо очень страшного кино
## f0085c5bb1791665
обновлено: 2026-10-23 19:23:09.587491+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 1
* **текст**: Эти не интересные подскажи тупую американскую комедию типо очень страшного кино
## 912c925de49dcfd5
обновлено: 2026-10-21 21:15:53.853541+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 4
* **текст**: Ок
## 58be02cd2c676000
обновлено: 2026-10-21 21:14:43.197072+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 3
* **текст**: Скачай
## 14f8cf062dc523a1
обновлено: 2026-10-21 21:13:07.795455+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 2
* **текст**: Можешь ли ты скачать ферму кларксона
## 6b1116496ff50806
обновлено: 2026-10-21 21:12:56.695974+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: infra
* **номер**: 1
* **текст**: Посмотри есть ли критические проблемы
## 665bc3b1b8096a07
обновлено: 2026-10-20 08:36:04.886173+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 3
* **текст**: посоветуй фильм про космос
## d1449144fbb41ec4
обновлено: 2026-10-20 08:35:19.767909+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 2
* **текст**: посоветуй фильм про космос
## d3c1cb8c6803de58
обновлено: 2026-10-20 08:30:35.819843+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 1
* **текст**: граф
## 6438d460b153a934
обновлено: 2026-10-19 18:29:42.601848+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 9
* **текст**: входящие
## 4c399eb8d186a040
обновлено: 2026-10-19 18:28:03.538302+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 8
* **текст**: входящие
## 206625a9dc2ef302
обновлено: 2026-10-19 18:26:35.573683+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 7
* **текст**: входящие
## 7c71ec9ef6710266
обновлено: 2026-10-19 18:26:07.531245+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 6
* **текст**: входящие
## 7bd8e6589111cdcf
обновлено: 2026-10-19 17:13:05.235512+00:00
* **от**: @polina:matrix.buryans.ru
* **бот**: media
* **номер**: 5
* **текст**: хочу сериал про космос
## wish-002
обновлено: 2026-10-19 17:11:24.853757+00:00
* **от**: Сергей
* **бот**: cam
* **текст**: добавить камеры во двор
## wish-001
обновлено: 2026-10-19 17:11:24.834397+00:00
* **от**: Полина
* **бот**: media
* **текст**: хочу мультфильмы про кота
+120
View File
@@ -0,0 +1,120 @@
# wishes
записей: 17
## 6142b62696f75e5f
обновлено: 2026-10-23 19:28:30.340791+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 3
* **текст**: Эти не интересные подскажи тупую американскую комедию типо очень страшного кино
## bfcc2b4db98ec7d8
обновлено: 2026-10-23 19:24:18.456461+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 2
* **текст**: Эти не интересные подскажи тупую американскую комедию типо очень страшного кино
## f0085c5bb1791665
обновлено: 2026-10-23 19:23:09.587491+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 1
* **текст**: Эти не интересные подскажи тупую американскую комедию типо очень страшного кино
## 912c925de49dcfd5
обновлено: 2026-10-21 21:15:53.853541+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 4
* **текст**: Ок
## 58be02cd2c676000
обновлено: 2026-10-21 21:14:43.197072+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 3
* **текст**: Скачай
## 14f8cf062dc523a1
обновлено: 2026-10-21 21:13:07.795455+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: media
* **номер**: 2
* **текст**: Можешь ли ты скачать ферму кларксона
## 6b1116496ff50806
обновлено: 2026-10-21 21:12:56.695974+00:00
* **от**: @akadmin:matrix.buryans.ru
* **бот**: infra
* **номер**: 1
* **текст**: Посмотри есть ли критические проблемы
## 665bc3b1b8096a07
обновлено: 2026-10-20 08:36:04.886173+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 3
* **текст**: посоветуй фильм про космос
## d1449144fbb41ec4
обновлено: 2026-10-20 08:35:19.767909+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 2
* **текст**: посоветуй фильм про космос
## d3c1cb8c6803de58
обновлено: 2026-10-20 08:30:35.819843+00:00
* **от**: неизвестно
* **бот**: media
* **номер**: 1
* **текст**: граф
## 6438d460b153a934
обновлено: 2026-10-19 18:29:42.601848+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 9
* **текст**: входящие
## 4c399eb8d186a040
обновлено: 2026-10-19 18:28:03.538302+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 8
* **текст**: входящие
## 206625a9dc2ef302
обновлено: 2026-10-19 18:26:35.573683+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 7
* **текст**: входящие
## 7c71ec9ef6710266
обновлено: 2026-10-19 18:26:07.531245+00:00
* **от**: неизвестно
* **бот**: infra
* **номер**: 6
* **текст**: входящие
## 7bd8e6589111cdcf
обновлено: 2026-10-19 17:13:05.235512+00:00
* **от**: @polina:matrix.buryans.ru
* **бот**: media
* **номер**: 5
* **текст**: хочу сериал про космос
## wish-002
обновлено: 2026-10-19 17:11:24.853757+00:00
* **от**: Сергей
* **бот**: cam
* **текст**: добавить камеры во двор
## wish-001
обновлено: 2026-10-19 17:11:24.834397+00:00
* **от**: Полина
* **бот**: media
* **текст**: хочу мультфильмы про кота
+215
View File
@@ -0,0 +1,215 @@
# Полный аудит Buryan Hub — передача в новую сессию
Составлено 28.10.2026 по итогам марафона. Всё в документе проверено командами;
где не проверено — помечено отдельно.
---
## 1. Что это за система
Домашняя инфраструктура `buryans.ru` на Proxmox VE 9 (хост `192.168.1.10`, плата
ASRock H610D4-P1/TPM, CPU i5-13400, 16 ГБ DDR4, 33 LXC + 1 VM), ~161 контейнер
(74 «сервиса» без служебных агентов), единый вход Authentik, медиасервер Jellyfin,
Home Assistant, боты Matrix, агентский слой, наблюдение Prometheus + Kuma + Loki.
Владелец — Роман (`@akadmin`), общается по-русски, требует проверенных фактов.
---
## 2. Доступы
| Что | Как |
|---|---|
| Хост Proxmox | `ssh root@192.168.1.10` (ключ `buryan-vps`, вход по паролю для root запрещён) |
| VPS | `ssh root@193.233.210.184`, Tailscale `100.64.0.2` |
| SSOT-репозиторий | `/root/buryan-infra` на хосте, remote — Gitea `192.168.1.140:3000` (`agent-qwen/buryan-infra`) |
| Секреты | **Vaultwarden** `https://vault.buryans.ru` (129 записей), дубли — файлами в `/root/.*` как аварийный путь |
| Локальная папка | `D:\Buryans Hub` (Windows) |
Секреты в чат не выводить. Файл импорта в Vaultwarden удалён и с сервера, и с диска.
---
## 3. Что сделано в марафоне 27–28.10
### 3.1 Железо и хранилище
| Работа | Результат |
|---|---|
| Установлены диски | NVMe 1 ТБ (GIGABYTE, был Windows+BitLocker) → `/mnt/media`; HDD 1 ТБ (TOSHIBA) → `/mnt/archive` |
| Медиатека переехала | 41 ГБ → NVMe, системный диск освободился с 51% до **12%** |
| Общее хранилище | `/mnt/media`: series 35 ГБ, movies, nextcloud 3.4 ГБ, models 2.5 ГБ, music 2.3 ГБ, books, photos (Immich через **NFS**), matrix 77 МБ, documents (Paperless), downloads, frigate |
| Бэкапы | vzdump → `/mnt/archive/backups` (HDD), конфиги и дампы БД тоже на HDD |
| Ночная копия медиатеки | `archive_copy.py` + таймер 04:10 на HDD |
| Swap | 8 ГБ LV + 16 ГБ swapfile на `/mnt/media` + zram 7.7 ГБ, итого 31 ГБ |
| fsck корня | вылечены повреждения (14 групп bitmap + orphan) через initramfs |
### 3.2 Инцидент и его причины
- Корень монтировался **read-only** из-за повреждений ext4 → падали `pve-cluster`, `lxcfs`, `docker`.
- **Сумма лимитов памяти CT была 75 ГБ при 15 ГБ RAM** → трэшинг, load 2800.
- `authorized_keys` был **симлинком на `/etc/pve/priv/`** → при падении pve-cluster пропадал SSH. Заменён обычным файлом.
- zram (swap в RAM) при нехватке памяти вредил — отключён.
- Автозапуск 30 контейнеров замаскирован (`pve-guests`), подъём по группам с контролем памяти через юнит `hub-boot-recover`.
### 3.3 Безопасность (P0)
| Что | Состояние |
|---|---|
| fail2ban | **установлен и активен**, тюрьма `sshd`: 4 попытки → бан 1 ч, LAN в белом списке |
| SSH root | **`PermitRootLogin prohibit-password`**, `MaxAuthTries 4`, `LoginGraceTime 30` |
| 2FA | **решено НЕ внедрять** (только как общая задача для всей семьи, иначе никак) — см. `docs/DECISION-2FA.md` |
| Vaultwarden | развёрнут, SSO через Authentik, **129 записей**, 9 пользователей |
| Компенсация без 2FA | SSO, fail2ban, ключи, Vaultwarden, план: Tailscale-only для админки |
### 3.4 Hermes — шина событий и планировщик (новое)
`/opt/hermes/`, порт **9130**, `hermes.service`, SQLite, код в `ops/hermes/`.
| Функция | Детали |
|---|---|
| API | `POST /event`, `POST /alertmanager`, `GET /events`, `/approvals`, `/health`, `/metrics`, `POST /jobs/<name>/run` |
| Алерты | цепочка **Alertmanager → Hermes → хаб `/notify` → Matrix** проверена живым critical-алертом |
| Дедуп | 15 минут, тихие часы 23:30–07:30 (critical проходит всегда) |
| Задания | `backup-heartbeat` (30 мин), `updates-check` (6 ч), `disk-trend`, `verify-services`, `update-plan` (08:45), `home-heartbeat` (5 мин → VPS) |
| Метрики | `hermes_events_total`, `hermes_job_fails{job}`, `hermes_quiet_active`; скрейпит Prometheus |
### 3.5 Наблюдение
| Что | Состояние |
|---|---|
| Prometheus (CT134) | 37 таргетов, **0 down**, алертов **0** |
| Grafana (CT113) | работает, 200 |
| Loki (CT113) | retention **30 дней** + compactor |
| Kuma (CT107) | 61 монитор, **0 down**; push-мониторы починены (интервалы и токены) |
| Heartbeat бэкапов | `backup-heartbeat.sh` в Hermes, пингует Kuma по свежести |
| Внешний сторож | на **VPS**: 5 URL раз в 5 мин → Telegram, dead-man switch (нет heartbeat 15 мин → «дом пропал») |
| Проверка обновлений | переписана: все CT + хост, **132 образа, 26 обновлений** |
### 3.6 Обновления
`update_plan.py` → `/var/lib/hub-agents/update-plan.md`: группы 1) агенты 12,
2) UI 1, 3) медиа 6, 4) приложения 5, 5) инфраструктура, 6) **вручную** (Postgres,
Authentik, Gitea, Synapse — stateful). Окно: первая суббота месяца 03:00–07:00,
снапшот перед каждой группой, откат описан.
### 3.7 Сервисы
- **Jellystat** развёрнут в CT103, порт 3100, healthy, БД `jellystat` в Postgres CT151.
Ждёт Jellyfin API-ключ в интерфейсе (шаг владельца).
- **Plex (CT116) и Tautulli (CT122)** остановлены, `onboot 0`, выведены из реестра/Kuma.
- **Immich ML** запущен (лежал 6 дней), Immich добавлен в **ежедневный** бэкап.
- **Nextcloud, Paperless, Matrix media, Ollama-модели** переехали в общее хранилище.
### 3.8 Matrix
- 91 комната → удалены **19 пустых**, созданы пространства: **Личные (12), Боты (8),
Работа (4), Дом (2), Медиа (4)**; ранее были Buryan Hub и Telegram.
- Отключены 6 легаси-ботов: `bot_adm, bot_alert, bot_auth, bot_books, bot_media, bot_work`.
Оставлены 11 ботов из конфига + `comms_agent`.
- Ошибок в логах Synapse за сутки: **0**.
- Семья приглашена в пространства — **приглашения нужно принять** (шаг владельца).
### 3.9 Репозиторий и порядок
- **Реестр автоматизаций** `ops/automations/registry.yaml` — **112 заданий** (crontab 18,
cron.d ~50, systemd 33, Hermes 6).
- **Индекс документации** `docs/INDEX.md` — 116 документов.
- Убраны старые `cron.d/*.bak`, бэкапы правил Prometheus.
- Гигиена: очищены висячие образы и кэш на хосте и 32 CT, journal ограничен.
### 3.10 CI в Gitea
- Actions включены в `app.ini`, runner `ct140-runner` зарегистрирован
(образ `gitea/act_runner`, `--security-opt apparmor=unconfined`, т.к. AppArmor CT140
блокировал загрузку профиля), метки `ubuntu-latest/24.04/22.04`.
- Workflow `.gitea/workflows/lint.yml`: линт YAML/compose, поиск закоммиченных
секретов, наличие обязательных файлов.
- **Не закрыто:** подтвердить итог первого прогона (runner брал задачу, статус не снят).
---
## 4. Текущее проверенное состояние
| Показатель | Значение |
|---|---|
| Сервисы хаба | **74 из 74** (после фильтра sidecar; всего контейнеров 161) |
| Prometheus | 37 таргетов, down 0, алертов 0 |
| Kuma | 61 монитор, down 0 |
| Контейнеры | 31 CT + VM Immich (Ollama выключен, Plex/Tautulli остановлены) |
| Упавших юнитов | 0 |
| Диск `/` | 12% |
| Общее хранилище | ~875 ГБ свободно |
| Память | 11 из 15 ГБ, swap 9.7 из 31 ГБ |
| Бэкапы | HDD: 37 дампов, конфиги, базы; offsite restic 113 снимков, 80.9 ГБ |
| Restore-тест | **5 из 5 пройдено** (был баг `pipefail` + `grep -q`) |
---
## 5. Открытые задачи (приоритет)
| # | Задача | Кто | Заметка |
|---|---|---|---|
| 1 | Подтвердить прогон CI, ослабить правило секретов при ложных срабатываниях | агент | `docker logs gitea-runner` в CT140 |
| 2 | Перенос `hub-*` cron в Hermes по группам | агент | начать с `export-service-metrics`, `direct-health-check`, `check-services`, `swarm-watchdog` |
| 3 | Compose-файлы в `deploy/` репозитория | агент | по одному CT, Git = источник истины |
| 4 | Jellystat: ввести Jellyfin API-ключ | **владелец** | `http://192.168.1.103:3100` |
| 5 | Принять приглашения в пространства Matrix | **семья** | Element |
| 6 | Вторая планка DDR4 16 ГБ | **владелец** | не критично, swap есть |
| 7 | MCore 4 Pro NonOS: DDR5 16 ГБ, BIOS, установка Proxmox (`mc-ai`, 192.168.1.30) | **владелец** | дальше агент настраивает Ollama + NFS + мониторинг |
| 8 | Окно обновлений (26 образов) | вместе | первая суббота месяца |
| 9 | Голос | отложено | нет железа |
| 10 | Centralization: compose в git, cron в Hermes, HA-автоматизации в git | агент | |
---
## 6. Ловушки, уже пойманные (не повторять)
1. **`pct exec` обязателен** для путей внутри контейнеров: `rsync` по хостовому пути
скопирует пустоту (Paperless).
2. **Unprivileged CT**: uid внутри = host uid + 100000 (1000→101000, 33→100033,
999→100999). Копировать с `--numeric-owner`, затем `chown`.
3. **`yaml.safe_dump`** убирает отступы списка — парсер хаба ждёт `" - key:"`,
поэтому реестр сервисов править генератором с проверкой `grep -c '^ - key:'`.
4. **Alertmanager/Prometheus** править только YAML-парсером: строковая замена
молча не применяется при несовпадении отступов.
5. **`set -o pipefail` + `grep -q`** даёт SIGPIPE → ложный провал теста
(restore-test «падал» на живых данных).
6. **fsck нельзя запускать без консоли**: при ошибках ФС он ждёт человека,
сервер жив по ping, но недоступен.
7. **`authorized_keys` не должен быть симлинком на `/etc/pve`** — иначе SSH
зависит от pve-cluster.
8. **AppArmor в CT** мешает вложенному Docker: нужен `--security-opt apparmor=unconfined`.
9. **PowerShell + ssh**: длинные команды ломаются на кавычках/`2>/dev/null` —
писать скрипт файлом, `scp`, затем `bash`.
10. **zram при нехватке RAM вредит**, а не помогает.
---
## 7. Где что лежит
```
/root/buryan-infra SSOT (docs/, ops/, deploy/, .gitea/workflows)
/opt/hub-core ядро хаба (8120→9120): status, catalog, intent, ask, notify
/opt/hermes Hermes: шина, планировщик, SQLite, jobs.yaml
/opt/hub-bots боты Matrix (секретарь + профильные)
/opt/buryan-hub/scripts служебные скрипты (backup, health, kuma-notify, restore-test)
/mnt/media общее хранилище 938 ГБ
/mnt/archive бэкапы: backups/{dump,configs,db}, media (ночная копия), old/
/mnt/backups старое LV (отключено, оставлено на неделю)
```
Mentальные артефакты этой сессии: `docs/plan/FINISH-LINE.md`,
`docs/DECISION-2FA.md`, `docs/P0-P1-2026-10-28.md`,
`ops/ops/INCIDENT-2026-10-28.md`, `ops/ops/SHARED-STORAGE.md`,
`ops/hermes/README.md`, `ops/automations/registry.yaml`, `docs/INDEX.md`.
---
## 8. Как начинать новую сессию
1. `ssh root@192.168.1.10`, `uptime`, `free -h`, `pct list | grep -c running`.
2. `curl -s http://127.0.0.1:9120/status.json | head -c 200` — хаб.
3. `systemctl --failed` — должно быть 0.
4. Kuma/Prometheus: 0 down, 0 алертов.
5. Взять задачу из раздела 5 по порядку и **проверять результат командами**.
+43 -21
View File
@@ -1,32 +1,54 @@
# Бэкапы: что есть и что проверено
Дата: 19.10.2026.
Обновлено: 23.10.2026, 12:20.
| Бэкап | Когда | Куда | Проверка восстановления |
## Карта бэкапов
| Что | Когда | Куда | Проверено |
|---|---|---|---|
| PostgreSQL (все базы) | 02:00 | `/mnt/backups/postgresql` | **есть** — сверка таблиц с живой базой (02:40) |
| База ядра `hub_core` | 02:30 | `/mnt/backups/hub-core` | **есть** — разворот в тестовую базу, 68 карточек |
| Данные ботов | 02:45 | `/mnt/backups/hub-bots` | **есть** — распаковка, целостность индекса (03:05) |
| Matrix: база, файлы, конфиг | 03:00 | `/root/matrix-backups` (существовал до спринта) | **есть** — разворот в тестовую базу (03:20) |
| Matrix: офсайт | 03:20 | VPS `/var/backups/matrix` | копия проверяется наличием на VPS |
| LXC-контейнеры | 01:00 | по расписанию `lxc-backup.sh` | не проверялось |
| vzdump | 06:30 | ротация `vzdump-rotate.sh` | не проверялось |
| Офсайт важного | 04:00 | `/mnt/backups/offsite-important` | не проверялось |
| **Образы гостей** (vzdump) | 02:00 ежедневно | `/mnt/backups/dump` (33 архива, 60 ГБ) | ✅ догон 24 гостей, целостность 0 битых |
| Тяжёлые гости (104, 115, 160) | вс 03:00 | там же | — |
| **Конфиги сервисов** | 03:45 | `/mnt/backups/configs` (128 файлов, 248 МБ) | ✅ распаковка 350 файлов |
| **Хостовые конфиги** | 03:45 | там же: `host/host-nginx` (94), `host/host-pve`, `host/host-systemd` (51) | ✅ в архиве |
| **Дампы баз** | 03:15 | `/mnt/backups/db` (5 баз) | ✅ учения 5/5 |
| PostgreSQL все базы | 02:00 | `/mnt/backups/postgresql` | ✅ (ранее) |
| hub_core | 02:30 | `/mnt/backups/hub-core` | ✅ (ранее) |
| Боты | 02:45 | `/mnt/backups/hub-bots` | ✅ (ранее) |
| Matrix | 03:00 | `/root/matrix-backups` | ✅ (ранее) |
| **Конфиги VPS** | 04:20 | `/mnt/backups/vps` (212 nginx + 51 renewal) | ✅ содержимое проверено |
| **Offsite (restic)** | 04:00 | `sftp:root@100.64.0.2:/backup/restic-repo` | ✅ 33 снапшота, 69.5 ГБ |
## Как устроены уведомления
## Проверки, которые работают автоматически
Результат каждой проверки уходит событием в ядро:
| Когда | Что |
|---|---|
| 01:45 | pre-prune: удаление старых архивов + `pct fstrim` по всем CT |
| вс 04:30 | чистка CT: висячие образы Docker, журналы, fstrim |
| вс 05:30 | целостность: `zstd -t`, `gzip -t`, `tar -tzf` (58 файлов) |
| 08:00 | ночная проверка: 11 пунктов (свежесть, пул, сертификаты…) |
| 3-го 05:00 | учения: разворот дампов 5 баз в черновые базы |
| 04:10 | синхронизация сертификатов VPS → дом, перезагрузка nginx |
* `backup.done` — бэкап на месте и восстанавливается;
* `backup.failed` — есть проблема.
## Главная ловушка (стоила двух ночей)
Дальше маршрутизация отправляет это боту Инфраструктура. Плюс сторож
расписаний следит, что сами проверки не перестали запускаться.
**Удаление файлов внутри LXC не освобождает место в тонком пуле.**
Без `pct fstrim` пул растёт монотонно; при 81% vzdump перестаёт
создавать снапшоты и бэкап делает только часть гостей.
Лечение: `pct fstrim` по всем CT (вернул 58 ГБ) + ежедневный fstrim
в pre-prune + недельная чистка.
## Учения: что проверено
| Проверка | Результат |
|---|---|
| Дампы 5 баз | ✅ 5/5 |
| Архив конфигов | ✅ 350 файлов |
| **Целый гость из vzdump** | ✅ восстановлен в ID 251, запущен, удалён |
| Сертификаты VPS → дом | ✅ сквозной тест |
| Целостность | ✅ 58 файлов, 0 битых |
| Offsite restic | ✅ 33 снапшота, 69.5 ГБ |
## Что осталось непроверенным
* LXC-контейнеры (vzdump/lxc-backup) — восстановление не тестировалось;
* офсайт важного — только наличие файлов.
Это следующие кандидаты: проверка восстановления контейнера в отдельный
CT — самая дорогая по времени, но и самая ценная.
- Восстановление конфигов VPS на чистый сервер (нужен чистый VPS).
- Offsite: наличие снапшотов проверено, пробное восстановление — нет.
+46
View File
@@ -0,0 +1,46 @@
# Решение по 2FA: пока не внедряем (28.10.2026)
## Решение владельца
2FA рассматривается **только как общая задача для всех членов семьи** либо не
внедряется совсем. Вариант «2FA только для владельца» отклонён: он создаёт
ложное чувство защищённости и разделяет людей на два класса доступа.
Итог: **пока не делаем**.
## Почему
1. Второй фактор по определению персональный: за человека его не настроить.
Включение политики сразу лишило бы доступа тех, кто не поставил приложение.
2. Без нормальных уникальных паролей 2FA — театр: секреты сейчас лежат файлами
в `/root`, а не в хранилище.
3. Почта отсутствует, коды через Matrix — циклическая зависимость, через
Telegram — возможно (бот вне бриджа), но это кастомная стадия Authentik и
защита слабее TOTP.
## Что компенсирует отсутствие 2FA (сделано или делается)
| Мера | Состояние |
|---|---|
| fail2ban (ssh, 4 попытки → бан 1 ч) | **работает** |
| SSH: вход root только по ключу (`prohibit-password`) | **включено** |
| SSO вместо локальных паролей (52 приложения) | работает |
| Vaultwarden для уникальных паролей | развёрнут, **ждёт наполнения** |
| Ограничение админ-доступа через Tailscale | план |
| Ограничение времени сессий в Authentik | план |
## Когда вернуться к вопросу
Условия, при которых 2FA снова обретает смысл:
1. Все секреты перенесены в Vaultwarden и пароли уникальны.
2. Есть согласованное окно, когда вся семья может настроить приложение.
3. Выбран канал резерва: бумажные коды (офлайн) + сброс админом.
4. Готов break-glass: консоль Proxmox и локальный админ вне SSO-контура.
## Что делать вместо этого сейчас
1. Наполнить Vaultwarden (мастер-пароль задаёт владелец, далее импорт секретов).
2. CI в Gitea (линт конфигов до применения).
3. Перенос `hub-*` cron в Hermes — централизация автоматизаций.
4. Blackbox/внешний сторож — **уже развёрнут** на VPS с Telegram и dead-man switch.
+122
View File
@@ -0,0 +1,122 @@
# Индекс документации Buryan Hub
Сгенерировано автоматически, файлов: 116
| Документ | О чём |
|---|---|
| [AGE-KEY-AND-RESTORE.md](docs/AGE-KEY-AND-RESTORE.md) | Ключ шифрования копий (age) и восстановление |
| [ALERTS-WORKING.md](docs/ALERTS-WORKING.md) | Тревоги: почему их не было и как включены |
| [ARCHITECTURE.md](docs/ARCHITECTURE.md) | 🏗️ Архитектура Buryan Hub |
| [AUDIT-2026-10-14-STATUS.md](docs/AUDIT-2026-10-14-STATUS.md) | АУДИТ 2026-10-14 — СТАТУС НА 2026-10-17 |
| [AUDIT-2026-10-17.md](docs/AUDIT-2026-10-17.md) | ПОЛНЫЙ АУДИТ ХОЗЯЙСТВА |
| [AUDIT-FULL-2026-10-19.md](docs/AUDIT-FULL-2026-10-19.md) | Полный аудит Buryans Hub — 19.10.2026 |
| [AUTHENTIK-2026-5.md](docs/AUTHENTIK-2026-5.md) | Authentik: 2025.4 → 2026.5.7, и почему 2026.8 упирается |
| [AUTHENTIK-2026-8-DONE.md](docs/AUTHENTIK-2026-8-DONE.md) | Authentik 2026.8.4: обновление завершено |
| [AUTHENTIK-UPGRADED.md](docs/AUTHENTIK-UPGRADED.md) | Authentik обновлён: 2025.4 → 2025.12.6 |
| [AUTHENTIK-WINDOW-2026-10-17.md](docs/AUTHENTIK-WINDOW-2026-10-17.md) | Окно обновления Authentik 17.10.2026: что выяснено |
| [AUTOMATION-2026-10-17.md](docs/AUTOMATION-2026-10-17.md) | Автоматика: профиль безопасности, уборка, проверка входа |
| [BACKUP-STATE-2026-10-18.md](docs/BACKUP-STATE-2026-10-18.md) | Резервные копии: проверено, работает (задача 4.4.2) |
| [BACKUPS-STATUS.md](docs/BACKUPS-STATUS.md) | Бэкапы: что есть и что проверено |
| [BOOK-BOT.md](docs/BOOK-BOT.md) | Книжный бот в Matrix (18.10.2026) |
| [BOOK-FINDER.md](docs/BOOK-FINDER.md) | Поиск книг, которых нет в библиотеке (18.10.2026) |
| [BOOKS-LIBRARY.md](docs/BOOKS-LIBRARY.md) | Онлайн-библиотека книг (18.10.2026) |
| [BOOKS-TELEGRAM.md](docs/BOOKS-TELEGRAM.md) | Загрузка книг из Telegram (18.10.2026) |
| [BOTS-PERSONAL.md](docs/BOTS-PERSONAL.md) | Личные боты: режим проверки |
| [BOTS-ROLES.md](docs/BOTS-ROLES.md) | Зоны ответственности ботов и доступ |
| [BOTS.md](docs/BOTS.md) | Реестр Telegram-ботов |
| [CALIBRE-SINGLE-LOGIN.md](docs/CALIBRE-SINGLE-LOGIN.md) | Calibre: убран второй вход (18.10.2026) |
| [CALL-FIX-2026-10-18.md](docs/CALL-FIX-2026-10-18.md) | Звонки: почему соединялось не с первого раза и не шёл контент |
| [CENTRAL-AUTH.md](docs/CENTRAL-AUTH.md) | Централизация входа: Jellyfin, Vaultwarden, Plex, Overseerr |
| [COMMANDS.md](docs/COMMANDS.md) | Справочник команд |
| [CT111-IP-CHANGED.md](docs/CT111-IP-CHANGED.md) | CT 111: адрес сменён, интернет заработал |
| [CT111-NO-INTERNET.md](docs/CT111-NO-INTERNET.md) | CT 111: нет выхода в интернет (найдено 17.10.2026) |
| [DASHY-START-PAGE.md](docs/DASHY-START-PAGE.md) | Dashy: стартовая страница со всеми службами (задача 5.8) |
| [DATA-API.md](docs/DATA-API.md) | API данных: боты пишут в папку проекта |
| [DATABASE-STANDARD.md](docs/DATABASE-STANDARD.md) | Стандарт баз данных |
| [DATABASES-SHARED.md](docs/DATABASES-SHARED.md) | Общие базы: состояние и план (18.10.2026) |
| [DISKS-ARR-2026-10-18.md](docs/DISKS-ARR-2026-10-18.md) | Место в медиаслужбах: было 80%, стало 70% |
| [DOMAINS-AUDIT-2026-10-17.md](docs/DOMAINS-AUDIT-2026-10-17.md) | Все домашние домены: проверка (задача 2.4) |
| [ELEMENT-CALL-DONE.md](docs/ELEMENT-CALL-DONE.md) | Element Call: звонки подняты на VPS |
| [ELEMENT-CALL-ON-VPS.md](docs/ELEMENT-CALL-ON-VPS.md) | Element Call на VPS: оценка выполнимости |
| [FINAL-REPORT.md](docs/FINAL-REPORT.md) | Buryan Hub: итог спринта |
| [FINDINGS-2026-10-17.md](docs/FINDINGS-2026-10-17.md) | Находки 17.10.2026 (второй проход) |
| [FIX-500-LOGIN.md](docs/FIX-500-LOGIN.md) | Почему был 500 на всех сервисах с единым входом (18.10.2026) |
| [FIX-500-ROOT-CAUSE.md](docs/FIX-500-ROOT-CAUSE.md) | Настоящая причина 500 на новых сервисах (19.10.2026) |
| [FIX-INTERNAL-URLS.md](docs/FIX-INTERNAL-URLS.md) | Почему после входа открывалась «картинка» вместо сервиса |
| [FIXES-2026-10-18-EVENING.md](docs/FIXES-2026-10-18-EVENING.md) | Исправления вечера 18.10.2026 |
| [HOME-ASSISTANT-SSO-DONE.md](docs/HOME-ASSISTANT-SSO-DONE.md) | Home Assistant: вход через Authentik — сделано |
| [HOME-ASSISTANT-SSO-STATUS.md](docs/HOME-ASSISTANT-SSO-STATUS.md) | Home Assistant: почему вход через Authentik не заработал и что сделано |
| [HOME-SERVICES-INTEGRATION.md](docs/HOME-SERVICES-INTEGRATION.md) | Интеграция домашних сервисов: Nextcloud и Home Assistant (18.10.2026) |
| [HUB-BOTS.md](docs/HUB-BOTS.md) | Buryan Hub: флот ботов и контентная платформа |
| [HUB-CORE-PROJECT.md](docs/HUB-CORE-PROJECT.md) | Buryan Hub Core: один механизм вместо 35 сервисов |
| [INCIDENTS.md](docs/INCIDENTS.md) | 🚨 Трекер инцидентов |
| [INDEXERS-ROOTCAUSE.md](docs/INDEXERS-ROOTCAUSE.md) | Индексаторы: точная причина и обход |
| [INFRASTRUCTURE-MAP.md](docs/INFRASTRUCTURE-MAP.md) | Карта хозяйства |
| [INTEGRATIONS-2026-10-19.md](docs/INTEGRATIONS-2026-10-19.md) | Seerr и карта интеграций (19.10.2026) |
| [LIBRARY-CATALOG-SERVICE.md](docs/LIBRARY-CATALOG-SERVICE.md) | Каталог книг: сервис и статистика (18.10.2026) |
| [LOGIN-SPEED-CACHE.md](docs/LOGIN-SPEED-CACHE.md) | Скорость входа: кэш на VPS (задача 2.1) |
| [MATRIX-TELEGRAM-BRIDGE.md](docs/MATRIX-TELEGRAM-BRIDGE.md) | Telegram-мост: почему в чате было грязно и что с этим делать |
| [MATRIX-UPLOAD-HANG.md](docs/MATRIX-UPLOAD-HANG.md) | Matrix: зависание при отправке контента (18.10.2026) |
| [MEDIA-CHAIN.md](docs/MEDIA-CHAIN.md) | Медиа-цепочка: что собрано |
| [NIGHT-AUDIT.md](docs/NIGHT-AUDIT.md) | Аудит перед ночным спринтом |
| [NIGHT-JOURNAL.md](docs/NIGHT-JOURNAL.md) | Журнал ночного спринта |
| [NIGHT-REPORT.md](docs/NIGHT-REPORT.md) | Отчёт о ночном спринте |
| [NIGHT-SPRINT-PLAN.md](docs/NIGHT-SPRINT-PLAN.md) | Ночной спринт: централизация баз — план и правила |
| [OPENCLAW-ONE-INSTANCE.md](docs/OPENCLAW-ONE-INSTANCE.md) | openclaw: один экземпляр, версия закреплена |
| [PAPERLESS-CLEANUP.md](docs/PAPERLESS-CLEANUP.md) | Уборка после сведения Paperless к одному (18.10.2026) |
| [PAPERLESS-ONE-INSTANCE.md](docs/PAPERLESS-ONE-INSTANCE.md) | Paperless: два экземпляра сведены к одному (задача 5.3) |
| [PLAN.md](docs/PLAN.md) | ПЛАН РАЗВИТИЯ BURYAN-HUB |
| [PORTS.md](docs/PORTS.md) | Карта портов и сетевых точек buryan-hub |
| [README.md](docs/README.md) | buryan-hub — описание хозяйства |
| [RETIRED-SERVICES.md](docs/RETIRED-SERVICES.md) | Убраны две неиспользуемые службы (18.10.2026) |
| [RUNBOOK.md](docs/RUNBOOK.md) | Buryan Hub: дежурная книга |
| [SECRETS-ROTATION-PLAN.md](docs/SECRETS-ROTATION-PLAN.md) | План ротации секретов |
| [SERVICES-CHECKLIST.md](docs/SERVICES-CHECKLIST.md) | Полный список сервисов: домен, вход, перенаправление |
| [SERVICES-REVIEW.md](docs/SERVICES-REVIEW.md) | ПОЛНЫЙ РАЗБОР ВСЕХ СЕРВИСОВ |
| [SERVICES-TABLE.md](docs/SERVICES-TABLE.md) | Сводная таблица сервисов (19.10.2026) |
| [SERVICES.md](docs/SERVICES.md) | 📋 Реестр сервисов |
| [SPRINT-2-REVIEW.md](docs/SPRINT-2-REVIEW.md) | 🎯 Sprint 2 Review: Telegram-алертинг через DPI |
| [SPRINT-2026-10-18-NIGHT.md](docs/SPRINT-2026-10-18-NIGHT.md) | Ночной спринт 18.10.2026: что сделано и что найдено |
| [SPRINT-2026-10-19-SSO-2.md](docs/SPRINT-2026-10-19-SSO-2.md) | Двойной вход: разбор и исправление (вечер 19.10.2026, второй заход) |
| [SPRINT-2026-10-19-SSO-3.md](docs/SPRINT-2026-10-19-SSO-3.md) | Единый вход: третий заход — родной SSO служб (19.10.2026, вечер) |
| [SPRINT-2026-10-19-SSO.md](docs/SPRINT-2026-10-19-SSO.md) | Единый вход: спринт 19.10.2026 (вечер) |
| [SPRINT-3-PLAN.md](docs/SPRINT-3-PLAN.md) | 🎯 Sprint 3 Plan: Умные алерты |
| [SPRINT-STATUS.md](docs/SPRINT-STATUS.md) | Статус спринта (19–20.10.2026) |
| [SPRINTS-BACKLOG.md](docs/SPRINTS-BACKLOG.md) | Задания по спринтам (составлено 19.10.2026) |
| [SSO-ALL-DOMAINS.md](docs/SSO-ALL-DOMAINS.md) | Единый вход на ВСЕ домены (18.10.2026) |
| [SSO-AUDIT-2026-10-18.md](docs/SSO-AUDIT-2026-10-18.md) | Единый вход: почему снаружи его нет (задача 4.1.1) |
| [SSO-CENTRALIZED.md](docs/SSO-CENTRALIZED.md) | Централизованный вход: сделано (задача 4.1.1 / 4.1.3) |
| [SSO-STATE-2026-10-19.md](docs/SSO-STATE-2026-10-19.md) | Единый вход: итоговое состояние (19.10.2026, вечер) |
| [SSO-USERS.md](docs/SSO-USERS.md) | Общие пользователи во всех службах |
| [STRATEGY.md](docs/STRATEGY.md) | СТРАТЕГИЯ РАЗВИТИЯ BURYAN-HUB |
| [TASKS-REMAINING.md](docs/TASKS-REMAINING.md) | Что осталось: полный список (23.10, 19:55) |
| [TASKS.md](docs/TASKS.md) | РЕЕСТР ЗАДАЧ |
| [UPDATE-2026-10-17-SECTION1.md](docs/UPDATE-2026-10-17-SECTION1.md) | Раздел 1: что сделано 17.10.2026 (второй проход) |
| [UPDATE-MANAGER-COVERAGE.md](docs/UPDATE-MANAGER-COVERAGE.md) | Обновления: почему «не работало на многие сервисы» |
| [UPDATE-SPRINT-2026-10-17.md](docs/UPDATE-SPRINT-2026-10-17.md) | Спринт 17.10.2026: обновления и наблюдение |
| [VPN-4-7-FAILOVER-TEST.md](docs/VPN-4-7-FAILOVER-TEST.md) | Проверка автопереключения каналов на шлюзе (VPN-4.7) |
| [VPN-APP-CONFLICTS.md](docs/VPN-APP-CONFLICTS.md) | Почему часть приложений не работает при VPN и как это исправить |
| [VPN-FOR-FAMILY.md](docs/VPN-FOR-FAMILY.md) | VPN — подключение телефона |
| [VPN-SPLIT-ROUTING.md](docs/VPN-SPLIT-ROUTING.md) | Раздельная маршрутизация: туннель несёт только нужное |
| [VPN-STAGE2.md](docs/VPN-STAGE2.md) | VPN Этап 2: три канала, переключение автоматическое |
| [VPN-STAGE3.md](docs/VPN-STAGE3.md) | VPN Этап 3: шлюз в доме — домашнее открывается напрямую |
| [VPS-ROLE.md](docs/VPS-ROLE.md) | Роль VPS: определена (задача 2.6) |
| [ADR-001-local-npm.md](docs/adr/ADR-001-local-npm.md) | ADR-001: Локальный NPM вместо прямого VPS |
| [ADR-002-tailscale-tun.md](docs/adr/ADR-002-tailscale-tun.md) | ADR-002: TUN device для Tailscale в LXC |
| [ADR-003-openclaw-config.md](docs/adr/ADR-003-openclaw-config.md) | ADR-003: OpenClaw gateway.mode |
| [ADR-004-authentik-proxy.md](docs/adr/ADR-004-authentik-proxy.md) | ADR-004: Authentik Outpost с прокси-портами |
| [ADR-005-tailscale-exit-node.md](docs/adr/ADR-005-tailscale-exit-node.md) | ADR-005: Обход DPI через Tailscale exit node + outbound HTTP proxy |
| [TEMPLATE.md](docs/adr/TEMPLATE.md) | ADR-NNN: [Название решения] |
| [backlog-matrix.md](docs/backlog-matrix.md) | Matrix backlog |
| [dr-plan.md](docs/dr-plan.md) | Disaster Recovery Plan — Matrix / buryan-hub |
| [INSTALL-ADMIN.md](docs/library/INSTALL-ADMIN.md) | Библиотека: как всё устроено и как проверить |
| [INSTRUCTION-POLINA.md](docs/library/INSTRUCTION-POLINA.md) | 📚 Твоя библиотека |
| [book-finder-report.md](docs/library/book-finder-report.md) | Поиск книг, которых нет в библиотеке |
| [matrix-sprint-runbook.md](docs/matrix-sprint-runbook.md) | Matrix Sprint Runbook |
| [FINISH-LINE.md](docs/plan/FINISH-LINE.md) | Финишная подготовка Buryan Hub перед локальной LLM (28.10.2026) |
| [PLAN-V3-RECONCILE.md](docs/plan/PLAN-V3-RECONCILE.md) | Сверка плана V3 с фактами (23.10, 22:10) |
| [SPRINTS-NEXT.md](docs/plan/SPRINTS-NEXT.md) | Следующие спринты (план от 23.10) |
| [runbook.md](docs/runbook.md) | 📖 Операционный Runbook |
| [self-healing-architecture.md](docs/self-healing-architecture.md) | Self-Healing Infrastructure (Layered) |
| [troubleshooting.md](docs/troubleshooting.md) | 🔧 Troubleshooting |
| [vpn-clients.md](docs/vpn-clients.md) | Подключение к VPN — рабочий способ |
+39
View File
@@ -0,0 +1,39 @@
# P0–P1: что сделано 28.10
## Безопасность (P0)
| Что | Было | Стало |
|---|---|---|
| fail2ban | не работал | установлен, тюрьма `sshd`, бан 1 ч после 4 попыток, LAN в белом списке |
| SSH root | `PermitRootLogin yes` | **`prohibit-password`** (только ключ), `MaxAuthTries 4`, `LoginGraceTime 30` |
| 2FA | стадия TOTP есть, не привязана | **требуется enrolment владельца** (шаг за вами) |
| Vaultwarden | пустая база (300 КБ) | **развернут, ждёт наполнения** (шаг за вами) |
## Надёжность (P1)
| Что | Было | Стало |
|---|---|---|
| Immich ML | `Exited` 6 дней | запущен, health-check |
| Бэкап Immich | раз в неделю | **ежедневно** (из исключений убран 104) |
| Loki retention | не задан | **30 дней** + compactor |
| Проверка обновлений | «проверено: 0» | переписана: **132 образа, 87 обновлений**, событие в Hermes |
| Внешний мониторинг | нет | отложено (blackbox на VPS) |
## Порядок (P2)
| Что | Результат |
|---|---|
| Реестр автоматизаций | `ops/automations/registry.yaml` — **112 заданий** (cron, таймеры, Hermes) |
| Индекс документации | `docs/INDEX.md` — 116 документов |
| Plex (CT116) | остановлен, автозапуск снят |
| Tautulli (CT122) | остановлен, выведен из реестра и Kuma |
| Каталог сервисов | перегенерирован из факта: **74 сервиса без sidecar-агентов** (всего контейнеров 161) |
## Уроки
1. `yaml.safe_dump` ломает ожидаемый формат парсера хаба — правки реестра
делать построчно или генератором с проверкой `grep -c '^ - key:'`.
2. Alertmanager и Prometheus правятся только через YAML-парсер: строковые
замены молча не применяются (несовпадение отступов).
3. Служебные контейнеры (агенты, экспортёры, прокси) надо исключать из
«сервисов», иначе статус раздувается со 125 до 161.
+44 -2
View File
@@ -5,7 +5,7 @@
---
## Спринт 1. Индексаторы и полный цикл медиа — В РАБОТЕ
## Спринт 1. Индексаторы и полный цикл медиа — ✅ ЗАКРЫТ 23.10
**Проблема:** Prowlarr не может скачать определения индексаторов.
@@ -21,6 +21,11 @@
| Публичные в этой схеме | Knaben, Anidex, Anidub, AnimeZ, RuTracker — **нет** 1337x, YTS, TorrentGalaxy, Nyaa, EZTV |
| Добавление Knaben | таймаут (Prowlarr занят загрузкой) |
**Итог 23.10:** определения на месте (580 файлов, схема 654),
5 индексаторов (Knaben, LimeTorrents, TPB, Torrent9, YTS), поиск
`Dune 2021` → **224 результата**. Radarr видит 4 индексатора, все валидны.
Сквозной цикл пройден: Radarr → qBittorrent → импорт → Jellyfin.
**Задачи:**
1. Починить доставку определений: найти рабочее зеркало архива или
@@ -78,7 +83,12 @@
---
## Спринт 5. Наблюдаемость
## Спринт 5. Наблюдаемость — ✅ ЗАКРЫТ 23.10
**Итог 23.10:** созданы 3 дашборда Grafana (`media-v3`, `backups-v3`,
`infra-v3`) на реальных метриках exportarr + buryan_*; алерты по пулу
и бэкапам работают. Осталось: Uptime Kuma → Prometheus (нужен API-ключ
Kuma) и метрики Home Assistant (нет экспортёра).
1. Uptime Kuma → Prometheus (нужен ключ API).
2. Grafana: дашборды «Медиа», «Дом», «Бэкапы» (нужен ключ).
@@ -93,3 +103,35 @@
2. Второй контур бэкапов (внешнее хранилище).
3. Ротация логов и метрик.
4. Отдельный диск под медиа (сейчас `/mnt/media` на корневом разделе, 87 ГБ).
## Голосовой ассистент — доработки (отложено 23.10)
Работающий прототип уже есть (`ops/home/VOICE-ASSISTANT.md`): правила +
DeepSeek, память диалога, TTS на колонку, `/voice.html` с микрофоном браузера.
Отложено до появления микрофона/времени:
| # | Задача | Зачем |
|---|---|---|
| V-01 | Локальный STT (faster-whisper small) на отдельном узле | без облака для распознавания |
| V-02 | Wake word + постоянно включённый микрофон (ESP32/мик) | «Ассистент» без кнопки |
| V-03 | Мультирум, ответ в комнате вопроса | удобство |
| V-04 | Действия в плеере: пауза, перемотка, продолжение | полный контроль медиа |
| V-05 | Проактивные сценарии («скачался фильм — посмотреть?») | польза без запроса |
| V-06 | Вывести `/voice.html` на домен + SSO | доступ с телефона извне |
| V-07 | Ограничение расходов DeepSeek (лимит/кэш) | контроль стоимости |
| V-08 | Характер и профили семьи (кто что любит) | «свой» ассистент |
---
## Дальше (23.10)
Подробно: `docs/plan/SPRINTS-NEXT.md`
| Спринт | Тема | Нужно от владельца |
|---|---|---|
| 7 | Безопасность: пароли, 2FA, Vaultwarden | решение по 2FA |
| 8 | Работа (большой) | описание процессов и доступы |
| 9 | Home Assistant: Xiaomi, реле, лампы | сброс реле, токены Mi |
| 10 | Диск 1 ТБ SSD | установить диск в корпус |
| 2 | Telegram-каналы | список от Полины |
+57
View File
@@ -0,0 +1,57 @@
# Что осталось: полный список (23.10, 19:55)
## Готово сегодня
| Пункт | Результат |
|---|---|
| K-07 бэкап конфигов | 46 целей (было 41) |
| M-04 профили качества | REMUX/CAM запрещены, лимиты 90–180 МБ/мин |
| Спринт 5: дашборд «Дом» | 12 панелей на метриках HA |
| M-20 Trakt | подключён через PIN, аккаунт привязан |
| SSO | 52 приложения, админский доступ восстановлен |
| Jellyfin | кнопка Authentik, вход проверен |
| Диск | 41 ГБ освобождено, авточистка раздач |
| Самовосстановление | таймер 15 мин, класс B |
| Книги | Calibre 13 → 41 |
| Автоматизации HA | 0 → 12 |
## Задачи, требующие решения владельца
| # | Задача | Что нужно | Приоритет |
|---|---|---|---|
| 1 | **Plex** — установлен и работает (CT116:32400), но библиотека пустая и он не привязан к медиатеке | решить: подключать или вывести из эксплуатации | высокий |
| 2 | **Tautulli ↔ Plex** — не привязан, истории 0 | Plex-токен (если Plex оставляем) | средний |
| 3 | **Uptime Kuma → Prometheus** | API-ключ Kuma | средний |
| 4 | **S-10 2FA** — кастомная стадия Authentik | ваше «да» | низкий |
| 5 | **Раздел «Работа»** — Cockpit не развёрнут, `vks/matrix.md` нет | ваше время/решение | отложено вами |
| 6 | **MCore4 Pro** — как использовать | ваше решение (ИИ-узел или Frigate) | отложено |
| 7 | **Голосовой ассистент** V-01…V-08 | спринт целиком | отложено |
| 8 | **Telegram-каналы** (спринт 2) | список каналов от вас | средний |
## Задачи, которые можно делать без вас
| # | Задача | Статус |
|---|---|---|
| 9 | M-16 коллекции Jellyfin | нужен 2-й фильм франшизы (Dune Part Two) |
| 10 | Спринт 3: переделка ботов (намерения, роли, пожелания) | можно начинать |
| 11 | Спринт 6: тест восстановления из копии | можно |
| 12 | Спринт 6: ротация логов и метрик | можно |
| 13 | Спринт 6: второй контур бэкапов | нужен диск/облако |
| 14 | Спринт 6: отдельный диск под медиа | только железо (M-25) |
| 15 | 24 недоступных сущности в HA | разобрать, что отвалилось |
| 16 | Свет не управляется (4 лампы, `supported_features=0`) | разобраться с интеграцией |
| 17 | Книги: докачать оставшиеся, импортировать | идёт (132/181) |
| 18 | Проверка Trakt на просмотре | после первого фильма |
| 19 | Спринт 4: наполнение (рецепты Mealie, сериалы) | можно |
## Про Plex — факты
* контейнер `plex` живёт 3 дня, порт 32400 отвечает 200;
* база библиотеки есть (459 КБ), но `/opt/plex/media` весит **4 КБ** — медиа не подключено;
* `plex.buryans.ru` → 302 (SSO);
* API без токена отдаёт 401 — нужен `X-Plex-Token`;
* Tautulli без Plex-токена бесполезен.
**Вопрос:** Plex дублирует Jellyfin. Если он нужен (клиенты на ТВ, шаринг), надо
привязать его к plex.tv и подсунуть библиотеку `/data`. Если нет — выключить
и убрать из реестра, чтобы не тратить ресурсы.
+160
View File
@@ -0,0 +1,160 @@
# Финишная подготовка Buryan Hub перед локальной LLM (28.10.2026)
Аудит проведён по фактам: 33 LXC + VM, 43 сервиса в реестре, 61 монитор Kuma,
36 таргетов Prometheus, 20 systemd-таймеров, 42 файла в `/etc/cron.d`,
740 коммитов в SSOT-репозитории.
---
## 1. Уровень зрелости по направлениям
| Направление | Оценка | Обоснование (проверено) |
|---|---|---|
| **Резервное копирование** | ★★★★★ | 3-2-1: HDD (дампы+конфиги+базы), restic offsite на VPS (113 снимков, 80.9 ГБ), Kuma-heartbeat по свежести, ежемесячный restore-тест 5/5 |
| **Мониторинг** | ★★★★☆ | Prometheus 36 таргетов/0 down, Grafana, Loki, Alertmanager, Kuma 61 монитор/0 down. Минус: проверка обновлений не работает |
| **SSO и доступы** | ★★★★☆ | Authentik, 52 приложения, группы семьи. Минус: 2FA не включён, Vaultwarden пуст |
| **Медиа** | ★★★★★ | Prowlarr → Radarr/Sonarr → qBittorrent → импорт → Jellyfin, профили качества, 50 ГБ медиатеки на NVMe, аудиокниги, книги, музыка |
| **Дом** | ★★★☆☆ | HA + Zigbee2MQTT + Frigate, автоматизации есть. Минус: часть устройств не подключена (реле, Xiaomi/Tuya) |
| **Данные и хранилище** | ★★★★★ | Общее хранилище 938 ГБ (11 сервисов), архив на HDD, btrfs? нет — ext4, осознанно |
| **Автоматизации (боты/рой)** | ★★★☆☆ | 11 ботов, таймеры, самовосстановление. Минус: 60+ разрозненных заданий без единого реестра |
| **Безопасность хоста** | ★★☆☆☆ | **fail2ban не работает**, `PermitRootLogin yes`, секреты файлами в `/root` |
| **Инженерные практики** | ★★★☆☆ | Git-SSOT 740 коммитов, ранбуки. Минус: нет CI, нет staging |
---
## 2. Найдено сегодня и требует решения
### P0 — безопасность (сделать до локальной LLM)
| # | Проблема | Факт | Риск |
|---|---|---|---|
| 1 | **fail2ban не установлен/не работает** | `systemctl is-active fail2ban` → inactive | перебор паролей SSH/веб без ограничений |
| 2 | **Вход root по паролю разрешён** | `PermitRootLogin yes` | брутфорс на 22 порт |
| 3 | **2FA не включён** | стадия TOTP есть (`default-authenticator-totp-setup`), у владельца устройства нет | одна утечка пароля = полный доступ |
| 4 | **Vaultwarden пуст** | `/data` = 300 КБ, только `db.sqlite3` | секреты в `/root/.*` незашифрованы |
| 5 | Immich ML выключен | `immich_machine_learning Exited (143) 6 days ago` | нет распознавания лиц/поиска по фото |
### P1 — надёжность
| # | Проблема | Факт |
|---|---|---|
| 6 | **Проверка обновлений сломана** | `check_updates.py` → «проверено: 0», exit 1 |
| 7 | **Immich VM в бэкапе раз в неделю** | weekly job `vmid 104,115,160` — RPO 7 дней для фото |
| 8 | **Loki без политики хранения** | конфиг без `retention`, data растёт (269 МБ и вверх) |
| 9 | Нет внешнего synthetic-мониторинга | Kuma внутри сети; снаружи проверяется только VPS TCP 443 |
| 10 | Нет CI в Gitea | Actions не настроены (0 файлов) |
### P2 — порядок и актуальность
| # | Что | Действие |
|---|---|---|
| 11 | **CT116 Plex** — работает только beszel/promtail, Plex не запущен, память 4 ГБ | остановить и удалить или вернуть в строй осознанно |
| 12 | **CT122 Tautulli** — бесполезен без Plex (303) | заменить на Jellystat для статистики Jellyfin |
| 13 | **42 файла `/etc/cron.d`** + 20 таймеров | свести в реестр, убрать остатки `.bak` |
| 14 | 104 документа в `docs/`, 423 в `ops/` (84 МБ) | ввести индекс и правило «один документ на тему» |
| 15 | Секреты файлами в `/root` | перенести в Vaultwarden, файлы оставить как аварийный путь |
---
## 3. Порядок в автоматизациях (предложение)
Сейчас задания размазаны по четырём местам: `crontab`, `/etc/cron.d` (42 файла),
systemd-таймеры (~20), встроенные циклы ботов. Ни один список не является полным.
**Что предлагаю:**
1. **Единый реестр** `ops/automations/registry.yaml` — для каждого задания:
имя, расписание, что делает, владелец, что делать при падении, как проверить.
2. **Нормализация имён**: `hub-<домен>-<действие>` (например `hub-media-cleanup`,
`hub-backup-configs`), без разнобоя `backup.sh` / `check-services.sh` / `swarm-watchdog.sh`.
3. **Окна по домену**: бэкапы 01:00–05:00, чистки 05:00–06:00, отчёты 07:00–09:00,
мониторинг — постоянно. Это уже почти так, надо зафиксировать в реестре.
4. **Dead man switch**: если задание не запускалось дольше 2× интервала —
алерт в Kuma/Prometheus. Сейчас такое есть только у бэкапов (heartbeat).
5. **Один лог**: `journalctl` для systemd + `/var/log/hub/<задача>.log` для cron,
с ротацией; сейчас логи в трёх разных местах.
6. **Удалить дубли**: `buryan-cleanup` и `hub-dl-cleanup` (проверить, что не одно и то же),
`buryan-monitor` и `buryan-monitoring`.
---
## 4. Что стоит добавить (мои рекомендации)
| Приоритет | Что | Зачем |
|---|---|---|
| **P0** | fail2ban + `PermitRootLogin prohibit-password` | закрыть брутфорс |
| **P0** | 2FA в Authentik + принудительная политика для владельца | реальная защита входа |
| **P0** | Заполнить Vaultwarden, перенести секреты | единое хранилище, автозаполнение, отзыв |
| **P1** | Дублировать бэкап Immich ежедневно (место есть) | RPO 7 дней → 1 день |
| **P1** | Починить `check_updates.py` и вывести «есть обновления» в Grafana | не пропускать уязвимости |
| **P1** | Retention в Loki (30 дней) | контролируемый рост |
| **P1** | Blackbox exporter на VPS: внешние проверки 5 ключевых URL | видеть отказ, когда лежит и сеть, и сервер |
| **P2** | Jellystat вместо Tautulli | статистика просмотров Jellyfin |
| **P2** | Gitea Actions: линт YAML/compose и проверка «все контейнеры поднялись» | CI без внешних сервисов |
| **P2** | Ежемесячный отчёт «инвентаризация»: что изменилось, что устарело | порядок без ручной работы |
| **P3** | Голосовой ассистент (V-01…V-08) | после локальной LLM |
---
## 5. MCore 4 Pro (NonOS): что нужно от владельца
### Шаг 1. Железо (30 минут)
- [ ] Второй модуль памяти DDR5 SODIMM: **16 ГБ** (будет 32 ГБ) — обязательно для моделей 14B.
Больше 64 ГБ не нужно: платформа Ultra 5 125H ограничена.
- [ ] Кабель Ethernet в свободный порт коммутатора.
- [ ] Резерв IP в роутере: предлагаю **192.168.1.30**, имя `mc-ai`.
- [ ] USB-флешка ≥ 8 ГБ для установщика.
### Шаг 2. BIOS (10 минут)
- [ ] Вход в BIOS (Del/F2 при старте).
- [ ] Включить **VT-x** и **VT-d** (виртуализация) — понадобится, если захотим пробросить iGPU.
- [ ] **Above 4G Decoding** — включить.
- [ ] Boot: USB первым, Secure Boot можно оставить включённым (Proxmox подписан).
- [ ] Сохранить и выйти.
### Шаг 3. Установка (30 минут, делаете вы или я по вашей команде с консоли)
Рекомендую **Proxmox VE 9** (как на основном сервере): снапшоты, LXC, единый подход.
Альтернатива — Debian 12 + Docker (легче, но без снапшотов).
- [ ] Скачать ISO: `proxmox.com/en/downloads` → Proxmox VE 9 ISO.
- [ ] Записать на флешку (Rufus / balenaEtcher).
- [ ] Установить: hostname `mc-ai`, IP `192.168.1.30/24`, шлюз `192.168.1.1`, DNS `192.168.1.1`.
- [ ] После установки зайти на `https://192.168.1.30:8006`.
### Шаг 4. Что сделаю я после установки
1. Обновление системы, базовые пакеты, `qemu-guest-agent`.
2. Подключение к Tailscale (`tailscale up`), чтобы был доступ извне.
3. NFS-клиент к `/mnt/media/models` с основного сервера — модели не дублируются.
4. Установка Ollama + `open-webui` (или LXC с Docker).
5. Загрузка моделей: `qwen2.5:7b` (секретари), `qwen2.5:14b` (работа), `bge-m3` (RAG), `whisper` (транскрипция).
6. Регистрация в мониторинге (Kuma + Prometheus + node_exporter).
7. Бэкап конфигурации в общий контур (vzdump на HDD).
8. Перевод ботов-секретарей на локальный роутер намерений (с откатом на облако).
### Шаг 5. Проверка (после, 15 минут)
- [ ] `curl http://192.168.1.30:11434/api/tags` — список моделей.
- [ ] Тест скорости: 7B на iGPU vs CPU.
- [ ] Ответ секретаря в Matrix без обращения к облаку.
- [ ] Мониторы Kuma зелёные, алертов 0.
---
## 6. Порядок работ (предлагаю)
| Этап | Что | Время | Кто |
|---|---|---|---|
| 1 | Безопасность: fail2ban, запрет root-пароля, 2FA, Vaultwarden | 3–4 ч | я + вы (2FA-скан) |
| 2 | Надёжность: Immich ежедневно, check_updates, Loki retention, blackbox на VPS | 3 ч | я |
| 3 | Порядок: реестр автоматизаций, чистка CT116/122, индекс документов | 4 ч | я |
| 4 | MCore: железо + BIOS + установка | 1–2 ч | вы |
| 5 | MCore: Ollama, модели, интеграция с ботами | 3 ч | я |
| 6 | Jellystat, Gitea Actions, голос (по желанию) | по спросу | я |
**Итог:** проект уже на уровне «крепкий домашний прод». До «крутого» не хватает
трёх вещей: **безопасности (P0)**, **единого реестра автоматизаций** и
**локальной LLM**. Первые две делаются без железа — можно начать сразу.
+79
View File
@@ -0,0 +1,79 @@
# Сверка плана V3 с фактами (23.10, 22:10)
Проверено запросами к API, а не по памяти. Wiki `Plan.md` обновлён до 3.1.
## Фундамент (K-01…K-09, A-01…A-08) — закрыт
| Проверка | Факт |
|---|---|
| Реестр | 127 записей (в плане 111) |
| Секретарей | 7 (в плане 6) — добавлен automaton |
| Раннер | 30 мин, работает |
| Мозг DeepSeek | ежечасно, работает |
| Заявки C | цикл проверен: заявка → одобрение → перезапуск |
| TTL заявок | 24 ч, авто-истечение проверено |
## Медиа: 25 задач
| ID | В плане | Факт 23.10 | Действие |
|---|---|---|---|
| M-01 | ✅ | ✅ прокси CT161 | — |
| **M-02** | 🔄 не найден | ✅ **клиент qBittorrent в Radarr, enabled** | закрыт |
| **M-03** | ⏳ | ✅ **Interstellar + Two Towers скачаны** | закрыт |
| M-04…M-08 | ✅ | ✅ | — |
| M-09…M-12 | ✅ | ✅ | — |
| M-13 | ✅ | ✅ | — |
| **M-14** | ✅ | ⚠️ **Tautulli не отвечает (000), Plex без библиотеки** | пересмотреть |
| M-15 | ✅ | ✅ | — |
| **M-16** | ⏳ | ⏳ 2 фильма с файлами, коллекций **0** | ждёт 2-го фильма франшизы |
| M-17…M-19 | ✅ | ✅ | — |
| **M-20** | ⛔ аккаунт | ✅ **Trakt подключён (PIN), Scrobble=true** | закрыт |
| M-21…M-24 | ✅ | ✅ | — |
| M-25 | ⛔ железо | ⛔ | отложен |
**Итог:** 22 закрыто, 1 почти (M-16), 1 спорный (M-14), 1 железо (M-25).
## Метрики: план vs факт
| Метрика | В плане | Факт |
|---|---|---|
| Фильмов с файлами | 0 из 14 | **2 из 15** |
| Сериалов с эпизодами | 0 из 5 | **1 из 6** |
| Мониторов | 65 | **62 активных, 0 недоступных** |
| Автоматических сбоев | ~0 | selfheal 15 мин + класс B |
| Книг в библиотеке | — | **41** |
## Блокеры
| Блокер | В плане | Факт |
|---|---|---|
| Роутер `.63` | включить питание | ✅ **отвечает** |
| qBittorrent | не найден | ✅ **работает** |
| Frigate | камеры | ⛔ нет RTSP |
| Paperless → Firefly | чеки | ⛔ нет документов |
| 2FA | решение | ⛔ TOTP-стадия удалена |
## Чего в плане не было, а сделано
| Что | Где |
|---|---|
| Спринт 3: каталог, намерения, роли, пожелания, оркестрирование | `ops/ops/SPRINT-3-BOTS.md`, `ORCHESTRATION.md` |
| Спринт 6: восстановление, второй контур, ротация | `ops/ops/SWARM-FINAL.md` |
| Kuma → Prometheus (свой экспортёр, 0 недоступных) | `ops/ops/KUMA-PROMETHEUS.md` |
| AdGuard восстановлен в HA (14/14) | `ops/home/HA-CLEANUP.md` |
| Мост Яндекс → MQTT (23 устройства) | `ops/home/YANDEX-BRIDGE.md` |
| План миграции устройств из Яндекса | `ops/home/YANDEX-MIGRATION.md` |
| Навык Алисы (вебхук) | `ops/media/PLAYBACK-AND-ALICE.md` |
| Запуск фильма по команде (Chromecast) | там же |
| Словарь алиасов (90 названий) | `ops/media/ALIASES.md` |
## Что действительно осталось
1. **M-16** — дождаться двух фильмов одной франшизы (Властелин Колец уже 2 с файлами, третий качается).
2. **M-14** — решить: подключать Plex или выключать.
3. **S-10 2FA** — ваша команда.
4. **Sprint 2** — список Telegram-каналов (приёмник готов).
5. **Раздел «Работа»** — отложен вами.
6. **Xiaomi/Yandex устройства** — нужны токены Mi или сброс реле.
7. **M-25** — диск.
8. **Frigate** — камеры.
+109
View File
@@ -0,0 +1,109 @@
# Следующие спринты (план от 23.10)
## Спринт 7. Безопасность и доступы
Формируется отдельно. Что уже известно:
| Тема | Состояние сейчас |
|---|---|
| Vaultwarden | развёрнут (`vault.buryans.ru`), но не используется как хранилище |
| 2FA (S-10) | кастомная стадия Authentik — не сделана, TOTP-устройство удалено |
| Пароли сервисов | лежат файлами в `/root/.*` (не в менеджере) |
| Аудит доступа | политика `family`, но без регулярного отчёта |
| Гостевые ключи | `alextest`, ключи Яндекса в `/root/.yandex-keys.json` |
План: смена всех сервисных паролей, перенос в Vaultwarden, 2FA для владельца,
отзыв старых токенов, отчёт «кто куда заходил».
## Спринт 8. Работа (большой)
Владелец просил глубоко разобраться в его работе и построить максимум
инструментов. Нужно: описание процессов, доступы к рабочим системам,
шаблоны КП/ТЗ, транскрипция встреч, поиск по базе. Каркас уже есть
(`infrastructure/buryan-work`, `!пресейл`, `meeting-transcribe`).
## Спринт 9. Home Assistant: устройства
| Задача | Что нужно |
|---|---|
| 4 «яндекс»-лампы | мост восстановлен (состояния идут), управление — после токена с правом записи |
| Реле YNDX-00538 (2 шт) | сброс + подключение к Zigbee2MQTT (окно продлевается, ждём сброса) |
| Xiaomi (увлажнитель, ночник, датчики) | токены Mi Home для локального доступа |
| Tuya / Dreame | local key |
| 24 недоступные сущности | разобраны до 11, остальное — служебные |
## Спринт 10. Диск: 1 ТБ SSD
### Что проверено на сервере
| Факт | Значение |
|---|---|
| Плата | **H610D4-P1/TPM** (десктопная, mATX) |
| Накопитель | один NVMe 476.9 ГБ (`KPART512GBC2DVT`) |
| SATA-контроллер | **есть**: `Intel Alder Lake-S PCH SATA Controller [AHCI]` |
| Разметка | LVM: `pve-root` 111 ГБ, `pve-data-tpool` 348.8 ГБ, из неё `pve-backups` 100 ГБ |
### Вывод: решение работает
SATA-контроллер на плате присутствует, значит **2.5″ SATA SSD физически
подключается**. Нужно проверить только две вещи в корпусе:
1. свободный SATA-порт на плате (обычно 4);
2. свободный разъём питания SATA от блока питания.
### Два сценария
**S1 — диск как хранилище медиа (рекомендую).**
```
NVMe 477 ГБ → система, контейнеры, базы (как сейчас)
SSD 1 ТБ → /mnt/media (фильмы, сериалы, музыка, книги)
```
* без переустановки, простой ~1 час;
* медиа переезжает `rsync`, затем меняется точка монтирования;
* освобождает ~80 ГБ на системном диске сразу.
**S2 — полный перенос системы на 1 ТБ.**
* требует переустановки Proxmox и восстановления 33 контейнеров;
* простой — часы, риск потери настроек;
* смысл только если нужен большой системный раздел.
**Рекомендация: S1.** Полный перенос даёт мало выгоды и много риска.
### План S1 (когда диск будет в руках)
1. Установить SSD, проверить `lsblk`.
2. Разметить: GPT + один раздел, `mkfs.ext4`, метка `media`.
3. Смонтировать в `/mnt/media-new`, `rsync -a` с текущего `/mnt/media`.
4. Остановить *arr/Jellyfin, досинхронизировать, переключить `/etc/fstab`.
5. Проверить права (uid 1000/100911), запустить сервисы, прогнать скан.
6. Старое место освободить, `pct fstrim` + `fstrim` на NVMe.
## Спринт 2. Telegram (в работе)
Приёмник, правила и команда `!канал` готовы. Ждём список каналов от Полины —
инструкция ей отправлена в личку Matrix.
---
## Обновление: Властелин Колец снят (23.10, 23:00)
Владелец попросил не ставить трилогию. Удалено полностью:
* очередь Radarr — 2 записи;
* фильмы из Radarr — 3 записи, включая импортированные «Две крепости»;
* файлы на диске и остатки загрузок;
* Jellyfin пересканирован.
Диск: было **86%**, стало **62%** (свободно 40 ГБ).
### M-16 («Коллекции») — отложено до отдельной задачи
Задача остаётся в плане, но с другим кандидатом. Лучший вариант —
**«Матрица»**: три фильма уже в Radarr, все в одном качестве, суммарно
меньше 12 ГБ (против 20+ у трилогии).
Как только владелец скажет — качаем два фильма, создаём коллекцию
одним вызовом API Jellyfin.
+20 -17
View File
@@ -16,43 +16,46 @@
| B-03 | **Beszel** | ✅ 35 из 35 гостей с метриками | — |
| B-04 | **Dozzle** | 🔄 CT110:9998 + SSO-прокси; ждёт DNS `logs` | — |
| B-05 | **Проверка обновлений** | ✅ `check_updates.py` + таймер 05:40 (нужны digest'ы) | — |
| B-06 | **Audiobookshelf** | аудиокниги для семьи | средняя |
| B-07 | **Kavita** | комиксы и манга (Calibre — книги) | средняя |
| B-08 | **gPodder** | подкасты | низкая |
| B-09 | **NetBox** | инвентарь как код (замена ручного реестра) | высокая |
| B-10 | **Renovate** | обновления зависимостей как PR в Gitea | высокая |
| B-11 | **Memex/RAG** (pgvector) | семантический поиск по документам | высокая |
| B-12 | **Monica** | CRM семьи: дни рождения, контакты | средняя |
| B-13 | **Outline/Docmost** | база знаний для работы | высокая |
| B-06 | **Audiobookshelf** | ✅ развёрнут (CT111:13378) | — |
| B-07 | **Kavita** | ✅ развёрнута (CT111:5000) | — |
| B-08 | **Подкасты** | ✅ Podfetch (CT103:3003) вместо неподдерживаемого gPodder | — |
| B-09 | **NetBox** | ✅ развёрнут; импорт — после токена из UI (`ops/ops/NETBOX-IMPORT.md`) | — |
| B-10 | **Renovate** | ✅ таймер 03:30, 4 файла и 3 зависимости найдены | — |
| B-11 | **RAG** | ✅ pgvector + nomic-embed-text, `/rag?q=`, `ops/hub/RAG.md` | — |
| B-12 | **Monica** | ✅ развёрнута (CT110:8081) | — |
| B-13 | **Docmost** | ✅ развёрнут (CT103:3001), в дампах и учениях | — |
## A2. Доработки существующего
| # | Задача | Что даёт |
|---|---|---|
| B-14 | Страница «Моё» | ✅ погода + задачи + просмотр/покупки/документы/книги | — |
| B-15 | Недельный отчёт «что изменилось» в вики | история проекта |
| B-16 | Заполнить шаблонные карточки сервисов реальными описаниями | документация |
| B-15 | Недельный отчёт | ✅ `hub-weekly.timer`, отчёт в `ops/reports/` | — |
| B-16 | Карточки сервисов | ✅ 97 карточек, заглушек нет | — |
| B-17 | n8n: убрать `hub-login`, перейти на OIDC | единый вход |
| B-18 | Immich: автоальбомы по датам и местам | порядок в фото |
| B-19 | Пофайловый бэкап +10 сервисов | ✅ 26 целей, архив 30 МБ, 107 файлов | — |
| B-20 | Агенты: включить класс B без сухого прогона | меньше ручной чистки |
| B-21 | Агенты: обучение на истории — запоминать решения | умнее диагнозы |
| B-19 | Бэкапы | ✅ 31 цель, 4 дампа, учения восстановления 4/4 (`ops/backup/RESTORE-DRILL.md`) | — |
| B-20 | Класс B без сухого прогона | ✅ `HUB_ACTIONS_DRY_RUN=0`, работает | — |
| B-21 | Агенты: обучение и подсказки | ✅ дедуп причин, словарь решений `ops/agents/LEARNING.md` | — |
| B-22 | Алерты Prometheus → Matrix | ✅ `/alert` + вебхук Alertmanager | — |
| B-23 | Grafana: дашборд «Инфраструктура» | ✅ uid `buryan-infra`, + node_exporter на хосте | — |
| B-24 | Поиск: добавить фильтры по типу и дате | удобство |
| B-24 | Фильтры поиска | ✅ `source` и `limit` в `/search`, документация в индексе | — |
| B-25 | Шаблоны задач | ✅ 5 чек-листов, `!шаблон` в Matrix | — |
## A3. Спринт F6 (остатки из плана)
| # | Задача | Статус |
|---|---|---|
| B-26 | Rollback-drill задокументирован | нужен прогон |
| B-27 | Тег v1.4 в Gitea | после закрытия |
| B-26 | Rollback-drill | ✅ пройден, найдена и исправлена дыра с HA | — |
| B-27 | Тег v1.4 | ✅ создан и отправлен | — |
## A4. Мост Matrix ↔ Telegram
| # | Задача | Что нужно |
|---|---|---|
| M-01 | **Matrix: секретарь** | ✅ единое окно, маршрутизация, история, пожелания (`ops/bots/MATRIX-BOTS.md`) | — |
| M-02 | Matrix: распознавание действий | ✅ «включи музыку» → команда, «что есть» → справка | — |
| M-03 | Matrix: статусы пожеланий | ⏳ new → принято → сделано | низкая |
| B-28 | Двусторонний мост | **новый Telegram Bot Token** — без него никак |
| B-29 | Автоперезапуск моста | после B-28 |
@@ -62,7 +65,7 @@
|---|---|---|
| B-30 | Nextcloud SSO | отложено вами («как Freegate») |
| B-31 | Аудит доменов | ✅ 44/44 с HTTP-редиректом — `ops/ops/DOMAIN-AUDIT.md` |
| B-32 | Парольная политика Authentik: минимальная длина, сложность | безопасность |
| B-32 | Парольная политика Authentik | ⏸ решение владельца: можно заблокировать вход со старыми паролями | — |
---
+75
View File
@@ -0,0 +1,75 @@
# Что сделать утром (после ночного спринта)
## Новые сервисы — первый вход
| Сервис | Адрес | Что сделать |
|---|---|---|
| Kavita | **https://kavita.buryans.ru** | создать админа, затем включить OIDC |
| Audiobookshelf | **https://audio.buryans.ru** | создать админа, затем OIDC |
| NetBox | **https://netbox.buryans.ru** | вход через SSO (или `admin` / `Netbox2026!`) |
| Monica | **https://monica.buryans.ru** | зарегистрировать аккаунт |
| **Docmost** | **https://docmost.buryans.ru** | вход через SSO, создать пространство «Работа» |
| **Podfetch** | **https://podfetch.buryans.ru** | вход через SSO |
## Требует вашего решения
1. **Домены для новых сервисов.** Нужны A-записи:
`kavita`, `audio`, `netbox`, `monica` → `193.233.210.184`.
После этого я выпущу сертификаты и поставлю SSO.
2. **NetBox: импорт инвентаря.** Создайте API-токен
(меню пользователя → API Tokens), положите в `/root/.netbox-token`
на хосте — дальше импорт запускается сам.
3. **RAG-генерация.** Поиск работает (12–14 с), генерация ответов
на CPU слишком медленная. Варианты: оставить только поиск,
перейти на `qwen2.5:0.5b` (уже стоит, но медленно из-за нагрузки),
или ждать GPU.
4. **Telegram Bot Token** — для моста Matrix ↔ Telegram (B-28).
5. **2FA** — отложено вами ранее; включать?
6. **Парольная политика Authentik** — не включал: можно заблокировать
вход тем, у кого старый короткий пароль.
## Что изменилось в бэкапах
- Ежедневный бэкап 02:00 теперь **без тяжёлых гостей**:
`104` (Immich), `115` (OpenClaw), `160` (LLM) — они в отдельном
задании **вс 03:00**.
- В **01:45** запускается `hub-pre-prune`: удаляет прошлый набор
архивов и делает `fstrim`, чтобы thin pool не переполнялся.
- Хранение: **1 копия** на гостя. Пул сейчас 77%.
## Что проверено этой ночью
- Реестр: **75/75** сервисов.
- Алерты: **0** активных.
- Бэкапы: vzdump, конфиги (31 цель), логические дампы 4 баз.
- RAG-поиск: находит документы за 12–14 с.
- Таймеры: 16 активны (добавлены Renovate, RAG, дампы, снимок).
## Что отключено и почему
- **hub-brain (мозг агентов)** — таймер выключен: выдавал ложные тревоги
из-за несовпадения имён контейнеров и сервисов, дошёл до заявки
«перезапустить postgres». Все 7 заявок отменены.
- **immich_machine_learning** — остановлен: 0 фото, а держал 2 ядра.
## Что исправлено под утро
- **CT110** (офис: memos, stirling, grocy, vikunja, monica…) жил в лимите
2 ГБ и постоянно гонял страницы через своп — из-за этого `load average`
доходил до 190. Лимит поднят до **3 ГБ**, своп до 768 МБ.
- **VM104 (Immich)**: память 8 → 4 ГБ (фото пока нет).
- Renovate «висел» 30 минут именно из-за этого; сейчас — 13 секунд.
## Известные ограничения
- **Своп заполнен на 80%** (12.9 ГБ из 16). Машина работает, но
при одновременной тяжёлой работе (индексация + LLM) нагрузка
поднималась до 19. Остановлены: `immich_machine_learning`,
модели Ollama выгружены, `vm.swappiness` снижен до 10.
- **Vikunja SSO**: причина найдена (пустой `redirect_uri`),
включён regex-режим — проверьте вход через Authentik.
+42
View File
@@ -0,0 +1,42 @@
# Ночной спринт 21–22.10.2026
## Что сделано без участия владельца
### Исправления
| Что | Результат |
|---|---|
| Vikunja: «поставщик OpenID не предоставил email» | scope был только `openid` → добавлены `profile email` |
| Бэкап: Home Assistant отсутствовал | лимит 60 МБ → 200 МБ, пропуски логируются |
| Ложный алерт zigbee2mqtt | правильный порт (8098), метрика 0 → 1 |
| Дашборд Grafana: домен не работал | выпущен сертификат, опубликованы vhost'ы |
| AdGuard rewrites | попытка откачена, DNS восстановлен, риск задокументирован |
### Новое
| Что | Результат |
|---|---|
| Недельный отчёт | `hub-weekly.timer` (вс 09:00), первый отчёт — 438 коммитов за неделю |
| Класс B агентов | включён без сухого прогона: prune образов, чистка /tmp |
| Вики | 3 новые страницы: Мониторинг, Бэкапы, Единый вход — всего 28 |
| Карточки | dozzle, beszel |
| Страница «Моё» | ссылки на мониторинг, логи, графики |
| Поиск | фильтр по источнику и лимиту |
| Тег | v1.4 отправлен в Gitea |
### Учения восстановления
- Архив разворачивается: 115 файлов, 237 МБ.
- Найдена дыра: HA не попадал в бэкап (62 МБ при лимите 60).
- Ротация: конфиги 30 → 14 дней; vzdump keep-daily=7, keep-weekly=4.
## Что осталось владельцу
| Задача | Почему |
|---|---|
| Регистрация в Beszel | сделана вами ранее, агенты подключены |
| Проверить Vikunja SSO | вход через Authentik |
| Проверить Grafana | вход через Authentik после публикации |
| DNS для новых сервисов | если понадобятся (Audiobookshelf, Kavita и т. д.) |
| Telegram Bot Token | для моста Matrix ↔ Telegram |
| 2FA | по вашему решению |
+50
View File
@@ -0,0 +1,50 @@
# Ночной спринт 22.10.2026 (вторая часть)
## Развёрнуто новых сервисов
| Сервис | Где | Порт | Что даёт |
|---|---|---|---|
| **Kavita** | CT111 | 5000 | читалка комиксов, манги, epub |
| **Audiobookshelf** | CT111 | 13378 | аудиокниги и подкасты |
| **NetBox** | CT103 | 8080 | инвентарь сети как код |
| **Monica** | CT110 | 8081 | семейная CRM: контакты, даты |
Все четыре в реестре, в метриках, с карточками и в пофайловом бэкапе.
Реестр: **75/75** сервисов.
## Автоматизация
| Что | Результат |
|---|---|
| **Renovate** | таймер 03:30, нашёл 4 файла и 3 зависимости в репозитории |
| **RAG-поиск** | pgvector + `nomic-embed-text`, `/rag?q=...&mode=find` — 12–14 с |
| **Обучение агентов** | подсказки по типовым сбоям, дедуп причин |
## Мониторинг
- Алерт **ВысокийСвоп** (>80% на 30 минут).
- Нагрузочный алерт ограничен **хостом** — раньше один и тот же сигнал
приходил 25 раз от всех CT.
- Панель «Сервисы: недоступные» в Grafana.
- Агент теперь показывает процент свопа.
## Проблема, которую нашёл
**Машина ушла в своп: 12.8 ГБ из 16 ГБ, load average 19.**
Причина — одновременная индексация RAG, модель `qwen2.5:3b` в памяти
и 33 контейнера. После остановки индексации и выгрузки моделей
(`keep_alive=0`) нагрузка упала до 7.
Вывод: **генерация ответов RAG на CPU непрактична** при такой загрузке.
Поиск работает, генерацию включать только на свободной машине
или с моделью `qwen2.5:0.5b`.
## Что осталось владельцу
| Задача | Почему |
|---|---|
| Домены для Kavita/Audiobookshelf/NetBox/Monica | нужны DNS-записи |
| Первый вход в новые сервисы | создать админов |
| RAG-генерация | решить: облегчить модель или подождать GPU |
| B-28 Telegram-мост | нужен Bot Token |
| B-32 парольная политика | можно заблокировать вход — нужно ваше решение |
+232
View File
@@ -0,0 +1,232 @@
# Аудит ночного спринта 21–22.10.2026
_Составлен 22.10.2026, 01:55. Спринт: 23:15 → 08:15._
## 1. Состояние системы сейчас
| Показатель | Значение | Оценка |
|---|---|---|
| Сервисы | **75/75** | ✅ |
| Активных алертов | **0** | ✅ |
| CT / VM | 33 / 1 | ✅ |
| RAM | 12.2 / 15.7 ГБ | ⚠️ 78% |
| Своп | 12.0 / 16.0 ГБ | ⚠️ 75% |
| Thin pool | **74.7%** (было 81.5%) | ⚠️ |
| Диск / | 25 из 109 ГБ | ✅ |
| Бэкапы vzdump | 14 файлов, 38 ГБ, 47 ГБ свободно | ✅ |
| Дампы баз | 4 файла | ✅ |
| Архивы конфигов | 9 | ✅ |
| Таймеры | 16 активны | ✅ |
| Коммитов за спринт | 16 | ✅ |
## 2. Что сделано
### Новые сервисы (4)
| Сервис | Адрес | Состояние |
|---|---|---|
| Kavita | `192.168.1.240:5000` | ✅ работает, библиотека подключена |
| Audiobookshelf | `192.168.1.240:13378` | ✅ работает, ждёт аудиофайлы |
| NetBox | `192.168.1.103:8080` | ✅ работает, `admin`/`Netbox2026!` |
| Monica | `192.168.1.110:8081` | ✅ работает |
Все четыре: в реестре, в метриках (`buryan_service_up=1`), карточки,
пофайловый бэкап.
### Автоматизация (5)
| Что | Как работает | Проверено |
|---|---|---|
| Renovate | таймер 03:30, Gitea | нашёл 4 файла, 3 зависимости |
| RAG-поиск | `/rag?q=…&mode=find` | 6–14 с, находит нужные документы |
| Логические дампы | 03:15, 4 базы | 1.8 МБ, все 4 ОК |
| Ежедневный снимок | 09:00, коммит в репозиторий | создан `snapshot-2026-10-22.md` |
| Обучение агента | подсказки по сбоям | работает |
### Мониторинг и алерты (4)
- Алерт **ВысокийСвоп** — только по хосту (было 13 копий от всех CT).
- Алерт **ВысокаяНагрузка** — только по хосту (было 25 копий).
- Панель «Сервисы: недоступные» в Grafana.
- **node_exporter на хосте** — PVE раньше не попадал в метрики.
### Документация
| Документ | Содержание |
|---|---|
| `ops/MORNING.md` | утренний чек-лист |
| `ops/hub/RAG.md` | как устроен поиск и его ограничения |
| `ops/backup/DB-DUMPS.md` | дампы, восстановление, ловушки |
| `ops/ops/INCIDENT-2026-10-22.md` | инциденты ночи |
| `ops/ops/NETBOX-IMPORT.md` | импорт инвентаря |
| `ops/agents/LEARNING.md` | как агент учится |
| `ops/NIGHT-2026-10-22.md` | отчёт по спринту |
| Вики | 30 страниц, включая Operations и Monitoring |
## 3. Инциденты, найденные и исправленные
### Инцидент 1: thin pool переполнен, бэкапы падали
**Было**: `vzdump` не мог создать снапшот (`Insufficient free space`),
пул 81.5%, LV `backups` занимал 90% от 100 ГБ.
**Сделано**: `pct fstrim` на 33 CT + `fstrim /mnt/backups` (освободило
32 ГБ), оставлена 1 копия vzdump на гостя (22 файла/65 ГБ → 14/38 ГБ),
`prune-backups keep-last=1`. Тестовый `vzdump 140` прошёл.
**Остаток риска**: пул 74.7%. Нужно расширение диска или сокращение
списка гостей в ежедневном бэкапе.
### Инцидент 2: hub-brain падал и выдавал ложные тревоги
**Было**: `AttributeError: no attribute 'read_yaml'`; после починки —
ложные «5 из 9 контейнеров лежат» и заявка `restart_container postgres`.
**Сделано**: добавлены `read_yaml`, `status`, `check_group`, `notify`,
карта контейнеров; группы берутся из реестра. Но ложные срабатывания
остались (сервисы вроде `immich_*` живут в VM104 и не видны проверке).
**Решение**: `hub-brain.timer` **отключён**, 7 ложных заявок отменены,
очередь уведомлений очищена. Включать после выравнивания инвентаря.
### Инцидент 3: logrotate падал
Дублирование `/var/log/nginx/*.log` в двух конфигах. Пакетный убран
в `/etc/logrotate-disabled/`. Сейчас 0 ошибок.
### Инцидент 4: Vikunja SSO
Причина: Vikunja 2.7.1 не передаёт `redirect_uri`, Authentik отклоняет
как `invalid_client`. Включён regex-режим redirect_uris. Требует
проверки владельцем.
## 4. Что осталось
### Требует владельца (без него нельзя)
| ID | Задача | Что нужно |
|---|---|---|
| — | Домены Kavita/Audiobookshelf/NetBox/Monica | 4 A-записи |
| B-09 | Импорт инвентаря в NetBox | API-токен из UI в `/root/.netbox-token` |
| B-28/29 | Мост Matrix ↔ Telegram | Bot Token |
| B-32 | Парольная политика | решение (риск блокировки) |
| — | 2FA | ваше решение |
| — | RAG-генерация | решение: только поиск / ждать GPU |
| B-30 | Nextcloud SSO | отложено вами |
| — | Смена пароля NetBox | `admin`/`Netbox2026!` временный |
| — | Расширение диска | thin pool 74.7% |
### Можно делать без владельца (следующая очередь)
| Что | Оценка |
|---|---|
| Включить hub-brain после выравнивания инвентаря | 1–2 ч |
| Сократить список гостей в vzdump или расширить пул | 1 ч |
| Индексировать больше документов в RAG (ночью, по частям) | 2–3 ч |
| Настроить SSO для новых сервисов (после доменов) | 2 ч |
| Проверить восстановление из дампа баз на практике | 1 ч |
| Docmost / Outline (B-13) — новое хранилище знаний | 3–4 ч, нужна память |
| gPodder (B-08) — нет поддерживаемого образа, требует выбора | — |
## 5. Известные ограничения
1. **Память**: 78% RAM, 75% свопа. Машина работает, но тяжёлые задачи
(LLM + индексация) одновременно запускать нельзя.
2. **RAG-генерация** на CPU: ответ дольше 10 минут. Поиск — 6–14 с.
3. **hub-brain отключён** — до выравнивания имён сервисов и контейнеров.
4. **Thin pool 74.7%** — при следующем росте может снова упереться.
5. **NetBox** — токен только через UI (в NetBox 4 нет `drf_create_token`).
## 6. Как проверить самостоятельно
```bash
# сервисы и группы
curl -s http://127.0.0.1:9120/status.json | python3 -m json.tool | head -40
# алерты
curl -s http://192.168.1.134:9093/api/v2/alerts
# thin pool
lvs -o lv_name,data_percent pve/data
# бэкапы
ls -lh /mnt/backups/db /mnt/backups/configs
# RAG-поиск
curl -s 'http://127.0.0.1:9120/rag?q=бекапы&mode=find'
# новые сервисы
curl -s -o /dev/null -w '%{http_code}\n' http://192.168.1.240:5000/
curl -s -o /dev/null -w '%{http_code}\n' http://192.168.1.103:8080/login/
```
## 7. Итог
**Спринт дал**: 4 новых сервиса, RAG-поиск, Renovate, дампы баз,
ежедневные снимки, чистые алерты, 8 документов.
**Главная ценность ночи** — найдены и устранены два тихих инцидента:
переполнение thin pool (падали бэкапы) и ложные тревоги агента,
которые могли привести к перезапуску базы данных.
**Главный риск** — память и thin pool на пределе. Нужно решение
владельца: расширять диск или сокращать состав.
---
## Дополнение 03:00 — бэкап восстановлен
Ночное задание упало на 24 гостях из-за того же переполнения пула.
Догон `catchup3.py` восстановил **все 22 отсутствовавшие копии**,
дубли удалены, `fstrim` освободил 8.4 ГБ.
Постоянное решение: **`hub-pre-prune.timer` в 01:45** удаляет прошлый
набор архивов и освобождает место до старта задания, чтобы пик пула
был равен только новому набору.
Итоговое состояние:
| Показатель | Значение |
|---|---|
| Сервисы | 75/75 |
| Алерты | 0 |
| Упавшие юниты | 0 |
| Архивы бэкапов | **34 из 34 гостей** |
| Thin pool | 77.4% |
| Таймеров | 18 |
---
## Дополнение 04:45 — стабилизация памяти
Найдена и устранена причина ночного `load average 190`:
**CT110 жил в лимите 2048 МБ и постоянно вытеснял страницы в своп**
(занято 2019/2048, своп 255/256). Хостовый своп заполнился, диск был
занят на 78% времени, всё ждало I/O.
| Действие | Результат |
|---|---|
| CT110: память 2048 → 3072, своп 256 → 768 | внутри 1347/3072 |
| VM104: 8192 → 4096 МБ | своп −1.6 ГБ |
| immich_machine_learning (хост) остановлен | −2 ядра |
| `vm.swappiness` 20 → 10 | меньше вытеснения |
| drop_caches | сброшены кэши |
**Load: 190 → 9.9.** Renovate, который «висел» 30 минут, теперь
завершается за **13 секунд** — это был симптом нагрузки, не баг.
Итог ночи:
| Показатель | Значение |
|---|---|
| Сервисы | 75/75 |
| Алерты | 0 |
| Упавшие юниты | 0 |
| Архивы бэкапов | 34/34 |
| Конфиги | 253 МБ, 124 файла |
| Дампы баз | 4 (08 файлов с историей) |
| Ночная проверка | 7/7 |
| Thin pool | 77.7% |
| Load average | 9.9 |
+129
View File
@@ -0,0 +1,129 @@
# Итоговый аудит спринта 21–22.10.2026
_Ночной автономный спринт: 23:15 → 08:15 (9 часов)._
## 1. Что сделано
### Новые сервисы (5)
| Сервис | Адрес | Назначение |
|---|---|---|
| Kavita | 192.168.1.240:5000 | книги, комиксы, манга |
| Audiobookshelf | 192.168.1.240:13378 | аудиокниги |
| NetBox | 192.168.1.103:8080 | инвентарь сети как код |
| Monica | 192.168.1.110:8081 | семейная CRM |
| Docmost | 192.168.1.103:3001 | рабочие заметки |
Все: в реестре, в метриках, с карточками, в бэкапах.
### Автоматизация (11 новых таймеров)
| Время | Что |
|---|---|
| 01:45 | pre-prune архивов + fstrim |
| 03:15 | дампы 5 баз |
| 03:30 | Renovate |
| 05:30 (вс) | проверка целостности (58 файлов) |
| 08:00 | ночная проверка (10 пунктов) |
| 09:00 | снимок состояния в git |
| 3-го 05:00 | учения восстановления баз |
| вс 04:00 | переиндексация RAG |
| вс 09:00 | недельный отчёт |
| + | RAG-поиск, /health |
### Исправленные инциденты (6)
| Инцидент | Причина | Решение |
|---|---|---|
| Бэкапы падали (24 гостя) | thin pool 80% | fstrim, 1 копия, pre-prune 01:45 |
| load average 190 | CT110 в 2 ГБ, thrash | память 3 ГБ + swappiness |
| Stirling убивался OOM | JVM без лимита | `-Xmx768m` |
| hub-brain ложные тревоги | разные реестры | единый реестр (124) |
| logrotate падал | дубль nginx-логов | пакетный конфиг убран |
| Vikunja SSO | нет `redirect_uri` | regex-режим в Authentik |
### Поиск и знания
- RAG: pgvector + `nomic-embed-text`, **292 фрагмента**, поиск 14 с
- Hub-поиск: документация в индексе (**373 записи** + 13 книг)
- Docmost для рабочих заметок, Wiki.js для публичной документации
### Бэкапы
| Проверка | Результат |
|---|---|
| vzdump | 34/34 гостей |
| Конфиги | 126 файлов, 244 МБ, хранение 7 дней |
| Дампы баз | 5 баз (NetBox, Nextcloud, Authentik, Monica, Docmost) |
| Учения восстановления | **5/5** |
| Целостность | **58 файлов, битых 0** |
| Учения по конфигам | 121 файл, 62 вложенных архива, битых 0 |
## 2. Состояние на 08:07 (финальная сверка)
| Показатель | Значение |
|---|---|
| Сервисов в статусе | **124/124** |
| В реестре | 125 (ML отключён) |
| Метрик сервисов | 41 |
| Алерты | 0 |
| Упавшие юниты | 0 |
| Таймеры | 21 |
| Коммитов за спринт | 46 |
| Документов создано | 54 |
| Load average | ~2 |
| Thin pool | 78% |
| Диск / | 25 из 109 ГБ |
| Бэкапы | 76 из 98 ГБ (34 архива, 12 конфигов, 13 дампов) |
| Вики | 33 страницы, 83 карточки |
## 3. Что осталось — требует вас
| # | Задача | Почему без вас нельзя |
|---|---|---|
| 1 | Домены для 5 сервисов | нужны A-записи у регистратора |
| 2 | Первые входы: Kavita, Audio, NetBox, Monica, Docmost | создать аккаунты |
| 3 | Токен NetBox | создаётся только в UI |
| 4 | Telegram Bot Token | для моста Matrix |
| 5 | 2FA и парольная политика | можно заблокировать вход |
| 6 | Thin pool 78% | расширять диск или сокращать бэкапы |
| 7 | VPN: один пароль на всех + он в истории git | ротация и пересборка профилей |
| 8 | RAG-генерация | нужен GPU или вынос LLM |
| 9 | Nextcloud SSO | отложено вами |
## 4. Что можно делать без вас (очередь)
- Дозаполнить RAG новыми документами
- Проверить восстановление конфигов в реальный сервис
- Сузить 3–4 порта до `127.0.0.1`
- Добавить SSO новым сервисам (после доменов)
## 5. Документы, созданные за спринт
| Документ | О чём |
|---|---|
| `ops/SPRINT-AUDIT-2026-10-22.md` | промежуточный аудит |
| `ops/SPRINT-FINAL-AUDIT.md` | этот файл |
| `ops/MORNING.md` | что сделать утром |
| `ops/STATUS-CURRENT.md` | цифры и таймеры |
| `ops/ops/INCIDENT-2026-10-22.md` | все инциденты |
| `ops/ops/BESZEL.md`, `DOZZLE.md`, `GRAFANA.md` | сервисы наблюдения |
| `ops/ops/PORT-AUDIT.md`, `SECURITY-AUDIT.md` | безопасность |
| `ops/backup/RUNBOOK.md`, `RESTORE-DRILL.md`, `DB-DUMPS.md` | бэкапы |
| `ops/hub/RAG.md`, `SEARCH-INDEX.md`, `HEALTH.md` | поиск и здоровье |
| `ops/notify/FILTERS.md` | фильтры уведомлений |
| `ops/registry/REGISTRY-SPLIT.md` | про реестры |
| `ops/agents/LEARNING.md` | обучение агентов |
| + 5 карточек новых сервисов | |
## 6. Итог
Спринт дал: **5 новых сервисов, 11 автоматизаций, 6 исправленных
инцидентов, 3 проверенных вида бэкапов**.
Главная ценность — найдены и устранены **тихие** проблемы:
переполнение thin pool (бэкапы падали 24 ночи подряд), нехватка памяти
CT110 (load 190), единый реестр (ложные тревоги агента, включая
предложение перезапустить postgres).
Система стабильна: **124/124 сервиса, 0 алертов, 0 упавших юнитов, load ~3, ночная проверка 10/10**.
+72
View File
@@ -0,0 +1,72 @@
# Состояние проекта (23.10.2026, 09:50)
## Цифры
| Показатель | Значение |
|---|---|
| Сервисов в статусе | **125** |
| Все работают | 125/125 |
| Гостей (CT + VM) | 33 + 1 |
| Метрик сервисов | 42 |
| Алертов | 0 |
| Упавших юнитов | 0 |
| Таймеров | 22 |
| Load average | ~2 |
| RAM | 11.9 / 15.7 ГБ |
| Thin pool | 78% |
## Автоматизации (таймеры)
| Когда | Что |
|---|---|
| 01:45 | pre-prune: чистка старых архивов + fstrim |
| 02:00 | vzdump: 31 гость (без 104/115/160) |
| 03:15 | дампы 5 баз |
| 03:30 | Renovate (Gitea) |
| 03:45 | бэкап конфигов (31 цель) |
| 04:40 | класс B: гигиена (образы, логи) |
| 05:30 (вс) | проверка целостности архивов |
| 05:40 | проверка обновлений образов |
| 06:20 | индекс поиска |
| 08:00 | ночная проверка (9 пунктов) |
| 09:00 | снимок состояния в репозиторий |
| 09:15 | финансы |
| 11:50 | «глава» агентов |
| 12:00 | семейный дайджест |
| 1-го 04:30 | учения: восстановление бэкапов |
| 3-го 05:00 | учения восстановления баз (5/5) |
| вс 03:00 | vzdump тяжёлых гостей |
| вс 04:00 | полная переиндексация RAG |
| вс 05:30 | целостность архивов |
| вс 09:00 | недельный отчёт |
| вс 11:00 | обслуживание медиа |
## Сервисы, добавленные за спринт
| Сервис | Адрес | Состояние |
|---|---|---|
| Kavita | 192.168.1.240:5000 | ✅ работает |
| Audiobookshelf | 192.168.1.240:13378 | ✅ ждёт аудио |
| NetBox | 192.168.1.103:8080 | ✅ нужен токен для импорта |
| Monica | 192.168.1.110:8081 | ✅ ждёт аккаунт |
| Docmost | 192.168.1.103:3001 | ✅ ждёт владельца |
| **Podfetch** | 192.168.1.103:3003 | ✅ подкасты, вход roman |
| Renovate | таймер | ✅ 4 файла, 3 зависимости |
| RAG-поиск | /rag | ✅ 292 фрагмента |
## Бэкапы
| Что | Объём | Проверено |
|---|---|---|
| vzdump (34 гостя) | 38 ГБ | целостность 0 битых |
| Конфиги (31 цель) | 253 МБ | tar ok |
| Дампы 5 баз | 1.8 МБ | восстановление 5/5 |
## Открытые вопросы (к владельцу)
1. Домены для 5 новых сервисов → SSO и сертификаты.
2. Токен NetBox для импорта инвентаря.
3. Telegram Bot Token (мост Matrix).
4. 2FA и парольная политика.
5. Thin pool 78% — расширять диск или сокращать бэкапы.
6. VPN: один пароль на всех, он есть в истории git.
+7
View File
@@ -130,3 +130,10 @@
| # | Задача | Статус | Приоритет |
|---|---|---|---|
| A-21 | Покрытие SSO и бэкапов | ✅ | средний |
| A-31 | Kavita и Audiobookshelf | ✅ | CT111:5000 и :13378, карточки и бэкап |
| A-32 | NetBox | ✅ | CT103:8080, импорт — после токена из UI |
| A-33 | Monica | ✅ | CT110:8081, семейная CRM |
| A-34 | Renovate | ✅ | таймер 03:30, 4 файла и 3 зависимости |
| A-35 | RAG-поиск | ✅ | `/rag?mode=find` 12–14 с; генерация ограничена CPU |
| A-36 | Логические дампы баз | ✅ | 03:15, 4 базы, `/mnt/backups/db` |
| A-37 | Алерты: своп и нагрузка | ✅ | своп >80% + нагрузка только по хосту |
+35
View File
@@ -0,0 +1,35 @@
# Обучение агента: подсказки по повторяющимся сбоям (B-21)
## Что добавлено
1. **Дедупликация причин.** Раньше в памяти копилось
`["docker state: exited", "docker state: exited", ...]` —
теперь одинаковые подряд не дублируются.
2. **Словарь решений `SOLUTIONS`.** Для типовых сбоев агент печатает
подсказку рядом с проблемой.
3. **Поле `hint` в отчёте** (`/var/lib/hub-agents/journal/<дата>-runner.json`).
## Таблица подсказок
| Причина | Подсказка |
|---|---|
| `exited` | перезапустить контейнер; если повторяется — смотреть логи и память CT |
| `restarting` | чаще всего права на том или конфликт порта |
| `no space` | `docker system prune` и ротация логов |
| `permission denied` | `chown` тома после пересоздания контейнера |
| `connection refused` | сервис не слушает порт: проверить процесс и `ss -ltn` |
| `не в статусе` | нет `/health`: проверить nginx-прокси и порт |
| `cert` | `certbot renew` и копирование в `/etc/nginx/certs` |
## Пример вывода
```
✗ freshrss (CT111, сбоев 3): docker state: exited
→ перезапустить контейнер: healthcheck в CT делает это сам;
если повторяется — смотреть docker logs и память CT
```
## Что дальше
- Копить статистику: какая подсказка реально помогла (флаг `resolved_by`).
- Ограничить автоматические действия классом B (уже сделано в `actions.py`).
+31
View File
@@ -0,0 +1,31 @@
# Снимок состояния: 2026-10-22
_Автоматически, 09:00._
## Сервисы
| Показатель | Значение |
|---|---|
| Сервисы | **124/124** |
| Активных алертов | 0 |
| CT / VM | 33 / 1 |
## Ресурсы
| Показатель | Значение |
|---|---|
| RAM | 12008/15754 МБ |
| Своп | 12227/16069 МБ |
| Диск / | 25G из 109G (24%) |
## Бэкапы
| Что | Значение |
|---|---|
| vzdump | 6.3 ч назад |
| Дампы баз | 13 файлов |
| Конфиги | 12 архивов |
## Версия
Коммит: `c7d38a0 chore(audit): auto-snapshot and CHANGELOG update 2026-10-22`
+31
View File
@@ -0,0 +1,31 @@
# Снимок состояния: 2026-10-23
_Автоматически, 09:00._
## Сервисы
| Показатель | Значение |
|---|---|
| Сервисы | **124/124** |
| Активных алертов | 0 |
| CT / VM | 33 / 1 |
## Ресурсы
| Показатель | Значение |
|---|---|
| RAM | 12376/15754 МБ |
| Своп | 12775/16069 МБ |
| Диск / | 25G из 109G (24%) |
## Бэкапы
| Что | Значение |
|---|---|
| vzdump | 6.9 ч назад |
| Дампы баз | 18 файлов |
| Конфиги | 13 архивов |
## Версия
Коммит: `f187095 chore(audit): auto-snapshot and CHANGELOG update 2026-10-23`
+31
View File
@@ -0,0 +1,31 @@
# Снимок состояния: 2026-10-24
_Автоматически, 09:00._
## Сервисы
| Показатель | Значение |
|---|---|
| Сервисы | **124/125** |
| Активных алертов | 2 |
| CT / VM | 33 / 1 |
## Ресурсы
| Показатель | Значение |
|---|---|
| RAM | 12561/15754 МБ |
| Своп | 13729/16069 МБ |
| Диск / | 52G из 109G (51%) |
## Бэкапы
| Что | Значение |
|---|---|
| vzdump | 6.5 ч назад |
| Дампы баз | 23 файлов |
| Конфиги | 4 архивов |
## Версия
Коммит: `01e0633 chore(audit): auto-snapshot and CHANGELOG update 2026-10-24`
+31
View File
@@ -0,0 +1,31 @@
# Снимок состояния: 2026-10-25
_Автоматически, 09:00._
## Сервисы
| Показатель | Значение |
|---|---|
| Сервисы | **?/?** |
| Активных алертов | 4 |
| CT / VM | 33 / 1 |
## Ресурсы
| Показатель | Значение |
|---|---|
| RAM | 12786/15754 МБ |
| Своп | 13951/16069 МБ |
| Диск / | 52G из 109G (51%) |
## Бэкапы
| Что | Значение |
|---|---|
| vzdump | 3.5 ч назад |
| Дампы баз | 28 файлов |
| Конфиги | 5 архивов |
## Версия
Коммит: `f191cc9 [A-26] Недельный отчёт 2026-W43`
+31
View File
@@ -0,0 +1,31 @@
# Снимок состояния: 2026-10-26
_Автоматически, 09:00._
## Сервисы
| Показатель | Значение |
|---|---|
| Сервисы | **124/125** |
| Активных алертов | 2 |
| CT / VM | 33 / 1 |
## Ресурсы
| Показатель | Значение |
|---|---|
| RAM | 12584/15754 МБ |
| Своп | 13898/16069 МБ |
| Диск / | 52G из 109G (51%) |
## Бэкапы
| Что | Значение |
|---|---|
| vzdump | 6.5 ч назад |
| Дампы баз | 33 файлов |
| Конфиги | 6 архивов |
## Версия
Коммит: `3b74a6f chore(audit): auto-snapshot and CHANGELOG update 2026-10-26`
+31
View File
@@ -0,0 +1,31 @@
# Снимок состояния: 2026-10-27
_Автоматически, 09:00._
## Сервисы
| Показатель | Значение |
|---|---|
| Сервисы | **?/?** |
| Активных алертов | 3 |
| CT / VM | 33 / 1 |
## Ресурсы
| Показатель | Значение |
|---|---|
| RAM | 12613/15754 МБ |
| Своп | 14082/16069 МБ |
| Диск / | 53G из 109G (51%) |
## Бэкапы
| Что | Значение |
|---|---|
| vzdump | 5.0 ч назад |
| Дампы баз | 38 файлов |
| Конфиги | 7 архивов |
## Версия
Коммит: `c1fbcc8 chore(audit): auto-snapshot and CHANGELOG update 2026-10-27`
+31
View File
@@ -0,0 +1,31 @@
# Снимок состояния: 2026-10-28
_Автоматически, 09:00._
## Сервисы
| Показатель | Значение |
|---|---|
| Сервисы | **124/125** |
| Активных алертов | 0 |
| CT / VM | 33 / 1 |
## Ресурсы
| Показатель | Значение |
|---|---|
| RAM | 11616/15754 МБ |
| Своп | 10428/32453 МБ |
| Диск / | 28G из 109G (27%) |
## Бэкапы
| Что | Значение |
|---|---|
| vzdump | нет |
| Дампы баз | 43 файлов |
| Конфиги | 8 архивов |
## Версия
Коммит: `7683fbe chore(audit): auto-snapshot and CHANGELOG update 2026-10-28`
File diff suppressed because it is too large. Load diff
+4
View File
@@ -2,3 +2,7 @@
Создание Issue в Gitea...
✅ Issue в Gitea создан!
🎉 Еженедельный отчет успешно сгенерирован!
📊 Генерация еженедельного отчета...
Создание Issue в Gitea...
✅ Issue в Gitea создан!
🎉 Еженедельный отчет успешно сгенерирован!
+390
View File
@@ -0,0 +1,390 @@
generated: '2026-10-28'
total: 112
automations:
- schedule: '* * * * *'
command: /opt/buryan-hub/scripts/swarm-watchdog.sh >> /var/log/swarm-watchdog.log
2>&1
source: crontab
- schedule: '*/5 * * * *'
command: python3 /opt/buryan-hub/scripts/direct-health-check.py >> /var/log/direct-health-check.log
2>&1
source: crontab
- schedule: 0 2 * * *
command: /opt/buryan-hub/scripts/pg-backup-ct151.sh >> /var/log/buryan-hub/backups/cron-pg.log
2>&1
source: crontab
- schedule: 0 3 * * *
command: /root/matrix-backups/backup-matrix.sh >> /var/log/buryan-hub/backups/cron-matrix.log
2>&1
source: crontab
- schedule: 30 3 * * *
command: /root/buryan-infra/ops/backup.sh >> /root/buryan-infra/ops/backups/backup.log
2>&1
source: crontab
- schedule: 0 4 * * *
command: /opt/buryan-hub/scripts/offsite-backup.sh >> /var/log/buryan-hub/backups/cron-offsite.log
2>&1
source: crontab
- schedule: 0 5 * * 0
command: /root/weekly-backup-cleanup.sh >> /var/log/buryan-hub/backups/cron-cleanup.log
2>&1
source: crontab
- schedule: 30 6 * * *
command: /opt/buryan-hub/scripts/vzdump-rotate.sh >> /var/log/buryan-hub/backups/cron-vzdump-rotate.log
2>&1
source: crontab
- schedule: 0 9 * * *
command: /root/buryan-infra/ops/audit.sh >> /root/buryan-infra/ops/audit/audit-cron.log
2>&1
source: crontab
- schedule: 0 20 * * 0
command: /root/buryan-infra/ops/weekly-report.sh >> /root/buryan-infra/ops/audit/weekly-report.log
2>&1
source: crontab
- schedule: 0 */6 * * *
command: /root/buryan-infra/ops/scripts/version-watch.sh >> /root/buryan-infra/ops/audit/version-watch.log
2>&1
source: crontab
- schedule: '* * * * *'
command: /root/buryan-infra/ops/update-manager/update-runner.sh >/dev/null 2>&1
source: crontab
- schedule: 5 3 * * *
command: /root/buryan-infra/ops/update-manager/nightly-report.sh >> /root/buryan-infra/ops/update-manager/runner.log
2>&1
source: crontab
- schedule: 0 6 * * 0
command: /opt/buryan-hub/scripts/verify-backups.sh >> /var/log/buryan-hub/backups/cron-verify.log
2>&1
source: crontab
- schedule: '*/5 * * * *'
command: /opt/buryan-hub/scripts/check-services.sh >/dev/null 2>&1
source: crontab
- schedule: 30 1 * * *
command: /opt/buryan-hub/scripts/photos-backup.sh >/dev/null 2>&1
source: crontab
- schedule: 0 4 * * 0
command: /root/buryan-infra/ops/vpn/vpn-backup-config.sh >> /var/log/buryan-hub/vpn-backup.log
2>&1
source: crontab
- schedule: 0 6 1 * *
command: /opt/buryan-hub/scripts/restore-test.sh >> /var/log/buryan-hub/backups/cron-restore-test.log
2>&1
source: crontab
- schedule: 45 3 * * *
command: /usr/local/bin/backup-configs >> /var/log/backup-configs.log 2>&1
source: backup-configs
- schedule: 0 4 * * 0
command: /opt/buryan-hub/scripts/cleanup-leftovers.sh >> /var/log/buryan-hub/cleanup-leftovers.log
2>&1
source: buryan-cleanup
- schedule: 0 6 * * *
command: for id in $(pct list | tail -n +2 | awk '{print $1}'); do pct exec $id
-- bash -s < /opt/buryan-hub/scripts/fix-logs.sh >/dev/null 2>&1; done
source: buryan-log-hygiene
- schedule: '*/5 * * * *'
command: . /root/.buryan-monitor.env && /usr/bin/python3 /opt/buryan-hub/scripts/check_thin_pool.py
>> /var/log/thin-pool-monitor.log 2>&1
source: buryan-monitor
- schedule: 0 4 * * *
command: . /root/.buryan-monitor.env && /usr/bin/psql -h 192.168.1.151 -U buryan_monitor
-d buryan_monitoring -c 'SELECT cleanup_thin_pool_metrics();' >> /var/log/thin-p
source: buryan-monitor
- schedule: 0 * * * *
command: . /root/.buryan-monitor.env && python3 /opt/buryan-hub/scripts/check_disk.py
>> /var/log/buryan-monitor.log 2>&1
source: buryan-monitoring
- schedule: 30 8 * * *
command: . /root/.buryan-monitor.env && python3 /opt/buryan-hub/scripts/check_certs.py
>> /var/log/buryan-monitor.log 2>&1
source: buryan-monitoring
- schedule: '*/2 * * * *'
command: /usr/bin/python3 /opt/buryan-hub/scripts/export-service-metrics.py >/dev/null
2>&1
source: buryan-service-metrics
- schedule: 30 3 * * 0
command: /opt/buryan-hub/scripts/trim-containers.sh
source: buryan-trim
- schedule: 15 6 * * *
command: /usr/local/bin/docker-config-check >> /var/log/docker-config-check.log
2>&1
source: docker-config-check
- schedule: 30 3 * * 0
command: test -e /run/systemd/system || SERVICE_MODE=1 /usr/libexec/e2fsprogs/e2scrub_all_cron
source: e2scrub_all
- schedule: 10 3 * * *
command: test -e /run/systemd/system || SERVICE_MODE=1 /sbin/e2scrub_all -A -r
source: e2scrub_all
- schedule: 30 2 * * *
command: /usr/bin/bash /opt/hub-core/backup.sh >> /var/log/hub-backup.log 2>&1
source: hub-backup
- schedule: 45 2 * * *
command: /usr/bin/bash /opt/hub-core/backup_bots.sh >> /var/log/hub-backup.log 2>&1
source: hub-backup-bots
- schedule: 5 3 * * *
command: /bin/bash /opt/hub-core/bots_verify.sh >> /var/log/hub-bots-verify.log
2>&1
source: hub-bots-verify
- schedule: 30 4 * * 0
command: /usr/bin/python3 /opt/hub-core/camera_discover.py >> /var/log/hub-cam-scan.log
2>&1
source: hub-cam-scan
- schedule: 15 4 * * *
command: set -a; . /etc/hub-core/connectors.env; set +a; /usr/bin/python3 /opt/hub-core/library_sync.py
>> /var/log/hub-catalog.log 2>&1
source: hub-catalog
- schedule: '*/10 * * * *'
command: set -a; . /etc/hub-core/connectors.env; set +a; /usr/bin/python3 /opt/hub-core/connectors.py
>> /var/log/hub-connectors.log 2>&1
source: hub-connectors
- schedule: '*/30 * * * *'
command: /opt/music-tools/venv/bin/python /opt/hub-core/device_ident.py >> /var/log/hub-devices.log
2>&1
source: hub-devices
- schedule: 0 9 * * *
command: cd /opt/hub-bots && HUB_ENV=/etc/hub-bots/bots.env /usr/bin/python3 digest.py
>> /var/log/hub-digest.log 2>&1
source: hub-digest
- schedule: 30 8 * * *
command: set -a; . /etc/hub-core/connectors.env; set +a; /usr/bin/python3 /opt/hub-core/events_digest.py
>> /var/log/hub-digest.log 2>&1
source: hub-events-digest
- schedule: 0 23 * * *
command: /usr/bin/bash /opt/hub-core/export_all.sh >> /var/log/hub-export.log 2>&1
source: hub-export
- schedule: 45 4 * * *
command: set -a; . /etc/hub-core/connectors.env; set +a; /usr/bin/python3 /opt/hub-core/content_graph.py
>> /var/log/hub-graph.log 2>&1
source: hub-graph
- schedule: 30 23 * * *
command: /usr/bin/curl -s --max-time 20 http://127.0.0.1:9120/snapshot > /var/log/hub-graph-history.log
2>&1
source: hub-graph-history
- schedule: 0 8 * * 1
command: /bin/bash -c 'set -a; . /etc/hub-core/connectors.env; set +a; /usr/bin/python3
/opt/hub-core/identity_audit.py' >> /var/log/hub-identity.log 2>&1
source: hub-identity
- schedule: 15 */3 * * *
command: cd /opt/hub-bots && HUB_ENV=/etc/hub-bots/bots.env /usr/bin/python3 reindex.py
>> /var/log/hub-index.log 2>&1
source: hub-index
- schedule: 30 7 * * *
command: set -a; . /etc/hub-core/connectors.env; set +a; /usr/bin/python3 /opt/hub-core/inventory.py
>> /var/log/hub-inventory.log 2>&1
source: hub-inventory
- schedule: 45 3 * * *
command: set -a; . /etc/hub-core/connectors.env; set +a; /usr/bin/python3 /opt/hub-core/linker.py
>> /var/log/hub-linker.log 2>&1
source: hub-linker
- schedule: 0 5 * * 0
command: /bin/bash /opt/hub-core/lxc_verify.sh >> /var/log/hub-lxc-verify.log 2>&1
source: hub-lxc-verify
- schedule: 20 3 * * *
command: /bin/bash /opt/hub-core/matrix_verify.sh >> /var/log/hub-matrix-backup.log
2>&1
source: hub-matrix-backup
- schedule: '*/30 * * * *'
command: set -a; . /etc/hub-core/connectors.env; set +a; /usr/bin/python3 /opt/hub-core/media_hub.py
>> /var/log/hub-media.log 2>&1
source: hub-media
- schedule: 0 9 * * 1
command: set -a; . /etc/hub-core/connectors.env; . /etc/hub-bots/bots.env; . /etc/hub-bots/dm.env;
set +a; NOTIFY_TOKEN="$MEDIA_TOKEN" NOTIFY_ROOM="$MEDIA" /usr/bin/pyth
source: hub-media-digest
- schedule: 0 6 * * 0
command: /bin/bash /opt/hub-core/offsite_verify.sh >> /var/log/hub-offsite-verify.log
2>&1
source: hub-offsite-verify
- schedule: 40 2 * * *
command: /bin/bash /opt/hub-core/pg_verify_cron.sh >> /var/log/hub-pg-verify.log
2>&1
source: hub-pg-verify
- schedule: 30 3 * * *
command: set -a; . /etc/hub-core/connectors.env; set +a; /usr/bin/python3 /opt/hub-core/reconcile.py
>> /var/log/hub-reconcile.log 2>&1
source: hub-reconcile
- schedule: 0 19 * * *
command: set -a; . /etc/hub-core/connectors.env; set +a; /usr/bin/python3 /opt/hub-core/resume.py
>> /var/log/hub-resume.log 2>&1
source: hub-resume
- schedule: '*/15 * * * *'
command: set -a; . /etc/hub-core/telegram.env; set +a; [ -n "$TG_API_ID" ] && /usr/bin/python3
/opt/hub-core/telegram_userbot.py >> /var/log/hub-telegram.log 2>&1
source: hub-telegram
- schedule: 30 9 * * 1
command: cd /opt/hub-bots && HUB_ENV=/etc/hub-bots/bots.env /usr/bin/python3 weekly.py
>> /var/log/hub-weekly.log 2>&1
source: hub-weekly
- schedule: 0 20 * * 0
command: set -a; . /etc/hub-core/connectors.env; set +a; /usr/bin/python3 /opt/hub-core/weekly.py
>> /var/log/hub-weekly-core.log 2>&1
source: hub-weekly-core
- schedule: 30 5 * * *
command: set -a; . /etc/hub-core/connectors.env; set +a; /opt/music-tools/venv/bin/python
/opt/hub-core/sync_users.py 3 >> /var/log/hub-yandex-sync.log 2>&1
source: hub-yandex-music
- schedule: 0 1 * * *
command: /usr/local/bin/lxc-backup.sh 108 daily >> /var/log/lxc-backup.log 2>&1
source: lxc-backups
- schedule: 30 1 * * *
command: /usr/local/bin/lxc-backup.sh 140 daily >> /var/log/lxc-backup.log 2>&1
source: lxc-backups
- schedule: 0 2 * * *
command: /usr/local/bin/lxc-backup.sh 155 daily >> /var/log/lxc-backup.log 2>&1
source: lxc-backups
- schedule: 30 2 * * *
command: /usr/local/bin/lxc-backup.sh 115 daily >> /var/log/lxc-backup.log 2>&1
source: lxc-backups
- schedule: 0 3 */2 * *
command: /usr/local/bin/lxc-backup.sh 110 daily >> /var/log/lxc-backup.log 2>&1
source: lxc-backups
- schedule: 30 3 */2 * *
command: /usr/local/bin/lxc-backup.sh 114 daily >> /var/log/lxc-backup.log 2>&1
source: lxc-backups
- schedule: 0 4 */2 * *
command: /usr/local/bin/lxc-backup.sh 109 daily >> /var/log/lxc-backup.log 2>&1
source: lxc-backups
- schedule: 0 4 * * 0
command: /usr/local/bin/lxc-backup.sh 105 weekly >> /var/log/lxc-backup.log 2>&1
source: lxc-backups
- schedule: 30 4 * * 0
command: /usr/local/bin/lxc-backup.sh 113 weekly >> /var/log/lxc-backup.log 2>&1
source: lxc-backups
- schedule: 0 5 * * 0
command: /usr/local/bin/lxc-backup.sh 139 weekly >> /var/log/lxc-backup.log 2>&1
source: lxc-backups
- schedule: 30 5 * * 0
command: /usr/local/bin/lxc-backup.sh 201 weekly >> /var/log/lxc-backup.log 2>&1
source: lxc-backups
- schedule: 0 5 * * 0
command: /usr/local/bin/lxc-backup.sh 104 weekly >> /var/log/lxc-backup.log 2>&1
source: lxc-backups
- schedule: 15 5 * * 0
command: /usr/local/bin/lxc-backup.sh 111 weekly >> /var/log/lxc-backup.log 2>&1
source: lxc-backups
- schedule: '*/5 * * * *'
command: /opt/music-tools/venv/bin/python /opt/hub-core/mesh_watch.py >> /var/log/mesh-watch.log
2>&1
source: mesh-watch
- schedule: 30 3 * * *
command: /usr/local/bin/backup-n8n >> /var/log/n8n-backup.log 2>&1
source: n8n-backup
- schedule: 24 0 1-7 * *
command: if [ $(date +\%w) -eq 0 ] && [ -x /usr/lib/zfs-linux/trim ]; then /usr/lib/zfs-linux/trim;
fi
source: zfsutils-linux
- schedule: 24 0 8-14 * *
command: if [ $(date +\%w) -eq 0 ] && [ -x /usr/lib/zfs-linux/scrub ]; then /usr/lib/zfs-linux/scrub;
fi
source: zfsutils-linux
- schedule: systemd 4min
command: systemd unit hub-mesh.timer
source: systemd
- schedule: systemd 4min
command: systemd unit hub-inbox.timer
source: systemd
- schedule: systemd 5min
command: systemd unit hub-tg-ingest.timer
source: systemd
- schedule: systemd 5min
command: systemd unit hub-selfheal.timer
source: systemd
- schedule: systemd 14min
command: systemd unit hub-agents.timer
source: systemd
- schedule: systemd 14min
command: systemd unit hub-brain.timer
source: systemd
- schedule: systemd 14min
command: systemd unit hub-storage-metrics.timer
source: systemd
- schedule: systemd 1h
command: systemd unit hub-chief.timer
source: systemd
- schedule: systemd 1h
command: systemd unit hub-digest.timer
source: systemd
- schedule: systemd 14h
command: systemd unit hub-pre-prune.timer
source: systemd
- schedule: systemd 16h
command: systemd unit hub-db-dumps.timer
source: systemd
- schedule: systemd 16h
command: systemd unit hub-renovate.timer
source: systemd
- schedule: systemd 17h
command: systemd unit hub-archive-copy.timer
source: systemd
- schedule: systemd 17h
command: systemd unit hub-cert-sync.timer
source: systemd
- schedule: systemd 17h
command: systemd unit hub-vps-backup.timer
source: systemd
- schedule: systemd 17h
command: systemd unit hub-actions.timer
source: systemd
- schedule: systemd 17h
command: systemd unit hub-dl-cleanup.timer
source: systemd
- schedule: systemd 18h
command: systemd unit hub-jf-collections.timer
source: systemd
- schedule: systemd 18h
command: systemd unit hub-updates.timer
source: systemd
- schedule: systemd 19h
command: systemd unit hub-search-index.timer
source: systemd
- schedule: systemd 21h
command: systemd unit hub-nightly-check.timer
source: systemd
- schedule: systemd 21h
command: systemd unit hub-goals.timer
source: systemd
- schedule: systemd 22h
command: systemd unit hub-snap-clean.timer
source: systemd
- schedule: systemd 22h
command: systemd unit hub-snapshot.timer
source: systemd
- schedule: systemd 22h
command: systemd unit hub-finance.timer
source: systemd
- schedule: systemd 3
command: systemd unit hub-rag.timer
source: systemd
- schedule: systemd 3
command: systemd unit hub-ct-cleanup.timer
source: systemd
- schedule: systemd 3
command: systemd unit hub-drill.timer
source: systemd
- schedule: systemd 3
command: systemd unit hub-second-contour.timer
source: systemd
- schedule: systemd 3
command: systemd unit hub-integrity.timer
source: systemd
- schedule: systemd 3
command: systemd unit hub-weekly.timer
source: systemd
- schedule: systemd 4
command: systemd unit hub-media-maint.timer
source: systemd
- schedule: systemd 5
command: systemd unit hub-restore-drill.timer
source: systemd
- schedule: каждые 1800с
command: /usr/local/bin/backup-heartbeat.sh
source: hermes/backup-heartbeat
- schedule: каждые 21600с
command: /opt/music-tools/venv/bin/python /opt/hub-core/check_updates.py
source: hermes/updates-check
- schedule: каждые 3600с
command: df -h / /mnt/media /mnt/archive | tail -3
source: hermes/disk-trend
- schedule: каждые 3600с
command: 'curl -s --max-time 20 http://127.0.0.1:9120/status.json | /opt/music-tools/venv/bin/python
-c "import json,sys; d=json.load(sys.stdin); bad=[s[''name''] for s in '
source: hermes/verify-services
+100
View File
@@ -0,0 +1,100 @@
# Логические дампы баз
## Зачем
vzdump копирует машины целиком, но не даёт быстрого восстановления
отдельной базы. Логические дампы закрывают это: `.sql.gz` можно залить
в чистую базу за минуты.
## Что дампится
| База | CT | Контейнер | Размер |
|---|---|---|---|
| netbox | 103 | netbox-postgres | 88 КБ |
| nextcloud | 109 | files_db | 514 КБ |
| monica | 110 | monica-db | 24 КБ |
| authentik | 114 | authentik-security-postgresql-1 | 1.1 МБ |
| docmost | 103 | docmost-db | 12 КБ |
Скрипт: `/opt/hub-core/db_dumps.py`
Расписание: `hub-db-dumps.timer`, ежедневно **03:15**
Каталог: `/mnt/backups/db`, хранение **14 дней**
## Как проверить
```bash
/opt/music-tools/venv/bin/python /opt/hub-core/db_dumps.py
ls -lh /mnt/backups/db
```
## Восстановление (пример для NetBox)
```bash
gunzip -c /mnt/backups/db/netbox-DATE.sql.gz | \
pct exec 103 -- docker exec -i netbox-postgres psql -U netbox -d netbox
```
## Ловушки
1. **MariaDB-контейнеры не хранят пароль в переменной `MYSQL_ROOT_PASSWORD`**
в едином виде — скрипт читает обе переменные и подставляет в `-p`.
2. **`mariadb-dump -uroot` без пароля** даёт `Access denied` — тихая
ошибка, дамп просто не создаётся.
3. Redis не дампим: это кэш, восстановление не требуется.
## Контроль thin pool (добавлено 22.10)
`agent_runner.py` теперь считает занятость `pve/data` (`thin_pool_pct`)
и печатает её в отчёте. При **≥85%** отправляется уведомление
(не чаще раза в сутки) — потому что при переполнении пула vzdump
перестаёт создавать снапшоты.
Проверка вручную:
```bash
lvs -o lv_name,data_percent pve/data
```
## Хостовые конфиги (23.10)
В архив добавлены каталоги хоста — раньше их не было вовсе:
| В архиве | Что |
|---|---|
| `host/host-nginx/` | все vhost'ы, сертификаты-ссылки (94 файла) |
| `host/host-pve/` | `jobs.cfg`, `storage.cfg`, `firewall/`, `user.cfg` |
| `host/host-systemd/` | юниты и таймеры `hub-*` |
| `host/host-vzdump-conf` | настройки vzdump |
Проверка распаковкой: 459 записей, nginx-конфиги и pve-конфиги на месте.
**Почему это важно**: при потере `/etc/nginx` пришлось бы вручную
восстанавливать 44 домена, редиректы и привязки к сертификатам.
## Бэкап VPS (23.10)
VPS — точка входа для 48 доменов. Его конфиги теперь тоже сохраняются:
| Что | Где |
|---|---|
| `/etc/nginx` (212 файлов) | `/mnt/backups/vps/vps-nginx-*.tar.gz` |
| `certbot renewal` (51 конфиг) | там же |
| Расписание | `hub-vps-backup.timer`, ежедневно 04:20 |
| Хранение | 14 дней |
Размер ~120 КБ. Забирается по SSH с VPS.
## Синхронизация сертификатов (23.10)
`hub-cert-sync.timer` (ежедневно 04:10) копирует обновлённые сертификаты
с VPS в `/etc/nginx/certs/<домен>/` и перезагружает nginx, если что-то
изменилось.
**Проверено сквозным тестом**: принудительно обновил сертификат
`grafana.buryans.ru` на VPS (`certbot renew --force-renewal`), затем
запустил синхронизацию — дома сертификат обновился, `nginx -t` прошёл,
сайт отдал 302 (редирект на SSO). Контрольные суммы дома и на VPS совпали.
Без этой синхронизации через ~59 дней домены начали бы отдавать
просроченный сертификат: certbot на VPS обновлял файлы в
`/etc/letsencrypt/live/`, а домашний nginx использует свои копии.
+68
View File
@@ -0,0 +1,68 @@
# Учения восстановления (21.10.2026, ночной спринт)
## Что проверяли
Разворачивание пофайлового бэкапа конфигов «с нуля» во временный каталог.
## Ход
1. Взят свежий архив `configs-20261021-2251.tar.gz`.
2. Распакован в `/tmp/rollback-drill/restored`.
3. Проверено наличие ключевых конфигов.
4. Сверена контрольная сумма архива.
## Результат
```
файлов: 115
размер: 237 МБ
```
| Конфиг | Есть |
|---|---|
| homeassistant-config | ✅ |
| gitea-conf | ✅ |
| grocy-config | ✅ |
| memos-data | ✅ |
| beszel-data | ✅ |
| paperless-data | ✅ |
## Что нашли и исправили
**Home Assistant не попадал в бэкап.** В скрипте стоял лимит
`ct_size_mb > 60 → пропуск`, а конфиг HA занимает 62 МБ. Пропуск был
**молчаливым** — в логе ничего.
Исправлено:
- лимит поднят до **200 МБ**;
- пропуски теперь **логируются** (`пропуск <имя>: <размер> > 200 МБ`).
После правки архив вырос с 29 до 237 МБ и HA внутри.
## Что ещё выяснилось
Три цели больше 200 МБ и остаются вне архива:
| Цель | Размер |
|---|---|
| `uptime_kuma-data` | 545 МБ |
| `files_db-data` | 236 МБ |
| `loki-data` | 216 МБ |
Это данные, а не конфиги: они попадают в `vzdump` целиком.
## Ротация
| Что | Было | Стало |
|---|---|---|
| Конфиги | 30 дней | **14 дней** |
| vzdump | без ограничения (22 копии, 65 ГБ) | **keep-daily=7, keep-weekly=4** |
Диск бэкапов: 98 ГБ, занято 66 ГБ (71%). После ограничения освободится
место при следующем прогоне в 02:00.
## Вывод
Бэкап **разворачивается**, ключевые конфиги на месте. Найденная дыра
(HA вне бэкапа) — серьёзная, исправлена.
+104
View File
@@ -0,0 +1,104 @@
# Учения восстановления баз (автоматические)
## Что делает
Таймер **`hub-restore-drill.timer`, 3-го числа в 05:00** запускает
`/opt/hub-core/restore_drill.py`:
1. Берёт самый свежий дамп каждой базы.
2. Создаёт **черновую** базу (`<имя>_drill`) на том же сервере.
3. Заливает дамп, считает таблицы и ошибки.
4. Удаляет черновую базу — рабочие не трогаются.
Если хоть одна база не восстановилась — уведомление с пометкой `high`.
## Результат прогона 22.10
```
учения восстановления: 4/4
✅ netbox: таблиц 208, ошибок 0
✅ authentik: таблиц 165, ошибок 0
✅ monica: таблиц 95, ошибок 0
✅ nextcloud: таблиц 204, ошибок 0
✅ docmost: таблиц 48, ошибок 0
```
Отчёт: `/var/lib/hub-agents/journal/YYYY-MM-DD-restore-drill.json`.
## Ловушки (все пойманы на практике)
1. **Postgres в контейнере Authentik:** переменная `POSTGRES_USER`
содержит `authentik_user`, но **такой роли нет** — рабочая роль
называется `authentik`. Проверять `select current_user`.
2. **В контейнере `postgres` нет роли `postgres`** — суперпользователь
задаётся при инициализации и может называться иначе.
3. **MariaDB: `-p$VAR` внутри `pct exec ... sh -c` не раскрывается** —
пароль нужно подставлять литералом, читая его из `docker inspect`.
4. **Права:** пользователь БД может не иметь права `CREATE DATABASE`
(Monica, Nextcloud) — создавать черновую базу надо под root.
5. **Подсчёт таблиц**: кавычки в SQL внутри вложенных `sh -c`
ломаются; надёжнее запускать `psql/mariadb` с `-c` и двойными
кавычками вокруг всего запроса.
## Ручной прогон
```bash
/opt/music-tools/venv/bin/python /opt/hub-core/restore_drill.py
```
---
## Учения по конфигам (22.10, 05:50)
Развернул последний архив конфигов во временный каталог и проверил
читаемость вложенных архивов.
```
архив: configs-20261022-0532.tar.gz (244 МБ)
распаковано: 121 файл
вложенных .tgz: 62, битых 0
```
Ключевые цели на месте:
| Файл | Есть |
|---|---|
| homeassistant-config.tgz | ✅ (16 yaml внутри) |
| gitea-conf.tgz | ✅ |
| grocy-config.tgz | ✅ |
| memos-data.tgz | ✅ |
| beszel-data.tgz | ✅ |
| vikunja-db.tgz | ✅ |
| docmost-data.tgz | ✅ |
**Вывод**: архив конфигов не только создаётся, но и разворачивается
целиком, все вложенные архивы читаются.
---
## Учения: восстановление целого гостя (23.10, 12:25)
Проверен последний непроверенный путь — разворот **контейнера** из архива.
```
архив: vzdump-lxc-161-2026_10_23-02_07_17.tar.zst (224 МБ)
команда: pct restore 251 <архив> --storage local-lvm --hostname drill-restore
результат: 756 МБ прочитано (547 МБ/с), конфиг слит
запуск: running, hostname=drill-restore, файловая система читается
удаление: pct destroy 251 → том освобождён
пул после: 76.69% (как до учений)
```
**Вывод**: архив vzdump не только создаётся и проходит `zstd -t`,
но и разворачивается в работающий контейнер. Рабочие гости не тронуты —
учения шли на отдельном ID 251.
## Сводка всех учений
| Учения | Результат |
|---|---|
| Дампы баз (5) | ✅ 5/5, таблицы совпадают |
| Архив конфигов | ✅ 350 файлов, 62 вложенных архива |
| Целый гость из vzdump | ✅ запустился, данные на месте |
| Синхронизация сертификатов | ✅ принудительное обновление дошло до дома |
| Целостность (58 файлов) | ✅ 0 битых |
+115
View File
@@ -0,0 +1,115 @@
# Бэкапы: как делать и как восстанавливать
## Что где лежит
| Что | Где | Расписание | Хранение |
|---|---|---|---|
| Образы гостей (vzdump) | `/mnt/backups/dump` | 02:00 ежедневно | **1 копия** на гостя |
| Конфиги сервисов | `/mnt/backups/configs` | 03:45 | 14 дней |
| Дампы баз (SQL) | `/mnt/backups/db` | 03:15 | 14 дней |
## Проверить состояние
```bash
# сколько копий и сколько места
ls -lh /mnt/backups/dump | tail -5
df -h /mnt/backups
# важно: тонкий пул
lvs -o lv_name,data_percent pve/data
```
**Тонкий пул — критичное место.** Он общий для дисков гостей и для
LV `backups` (100 ГБ). Если пул заполнится, гости зависнут, а vzdump
перестанет создавать снапшоты.
## Если пул выше 85%
1. Проверить, не идёт ли бэкап: `pvesh get /nodes/pve/tasks --limit 5`
2. Освободить место:
```bash
# удалить самые старые архивы (по одному!)
ls -t /mnt/backups/dump/*.zst | tail -1 | xargs rm -f
fstrim -v /mnt/backups
```
3. Если не помогает — `pct fstrim <id>` на всех CT:
```bash
for id in $(pct list | awk 'NR>1{print $1}'); do pct fstrim $id; done
```
## Ручной бэкап одного гостя
```bash
vzdump 140 --storage backups --compress zstd --mode snapshot
```
## Восстановить гостя из архива
```bash
# посмотреть содержимое
zstd -dc /mnt/backups/dump/vzdump-lxc-140-YYYY_MM_DD-HH_MM_SS.tar.zst | tar -tf - | head
# восстановить под новым ID (безопасно, не затирает старый)
pct restore 240 /mnt/backups/dump/vzdump-lxc-140-*.tar.zst --storage local-lvm
```
## Восстановить базу из дампа
```bash
gunzip -c /mnt/backups/db/netbox-YYYYMMDD-HHMM.sql.gz | \
pct exec 103 -- docker exec -i netbox-postgres psql -U netbox -d netbox
gunzip -c /mnt/backups/db/monica-*.sql.gz | \
pct exec 110 -- docker exec -i monica-db mariadb -umonica -pMonicaPwd2026 monica
```
## Проверить, что бэкап читается
```bash
# целостность архива
zstd -t /mnt/backups/dump/vzdump-lxc-140-*.zst
# дампа
gunzip -t /mnt/backups/db/*.sql.gz && echo "дампы ок"
```
## Проверка целостности
Раз в неделю (вс 05:30) `hub-integrity.timer` прогоняет:
| Что | Команда |
|---|---|
| архивы гостей | `zstd -t` |
| дампы баз | `gzip -t` |
| конфиги | `tar -tzf` |
Результат: `/var/lib/hub-agents/journal/YYYY-MM-DD-integrity.json`,
при битых файлах — уведомление. Прогон 22.10: **58 файлов, битых 0**.
## Сторож пула
На время ночного бэкапа запускается `thin_watch.py`: каждые 30 секунд
смотрит занятость пула и при 88% удаляет самый старый архив, чтобы
гости не встали. Журнал: `/var/log/thin-watch.log`.
## Ловушки (проверено на практике)
1. **`prune-backups keep-last=1`** — иначе 34 гостя × 2 копии не влезают
в 100 ГБ LV.
2. **fstrim освобождает место только если ФС примонтирована с discard**
или вызван явно; после удаления архивов нужно `fstrim /mnt/backups`.
3. **Снапшот требует свободного места в пуле**, а не только в LV бэкапов.
4. **`pct fstrim` работает не на всех ФС** — на 33 CT прошёл, но если
ядро старое, команда молча вернёт ошибку.
## Возврат места в пул (важно!)
**Удаление файлов внутри CT не освобождает место в тонком пуле.**
Нужен явный `fstrim` внутри контейнера.
| Когда | Что делает |
|---|---|
| ежедневно 01:45 | `pre_prune.py`: удаляет старые архивы, затем `pct fstrim` по всем CT |
| еженедельно вс 04:30 | `ct_cleanup.py`: висячие образы Docker, кэш сборки, журналы, `pct fstrim` |
Без этого пул растёт монотонно. 22–23.10 он дошёл до **81%**, и vzdump
перестал создавать снапшоты: бэкап сделал только **9 гостей из 33**.
Ручной `pct fstrim` вернул **58 ГБ**, пул упал до 63.8%, после догона — 76.5%.
+39
View File
@@ -0,0 +1,39 @@
# Каталог чтения (home_library_audit.json)
Источник: файл владельца `home_library_audit.json` (17.10.2026, 114 КБ).
Скопирован в репозиторий: `ops/books/home_library_audit.json`,
в систему: `/opt/hub-core/data/books.json`.
## Что внутри
| Показатель | Значение |
|---|---|
| Прочитанных книг | **181** |
| Серий | **45** |
| Книг с привязкой к серии | 102 |
| Без привязки | 79 (владелец намеренно не угадывал серии) |
| Подтверждено за 2026 год | 3 |
Поля книги: `author`, `title`, `reading_status`, `read_year`, `series`,
`ru_status`, `metadata_confidence`, `needs_manual_verification`.
Поля серии: `name`, `authors`, `read_titles`, `read_count`,
`publication_status`, `personal_status`, `next`.
## Куда встроено
1. **Общий поиск** — источник `book`: 239 записей (226 из каталога +
13 из Calibre). Проверено: «Court of Ravens» находит серию и книги,
«Моронова» — двух авторов.
2. **Бот** — две новые команды:
* `!книги` — сводка (181 книга, 45 серий, 3 за 2026);
* `!книги <слово>` — поиск по названию/автору;
* `!серия <название>` — что прочитано, статус, что дальше.
## Чего каталог не делает
Это **история чтения**, а не файлы. Чтобы книги появились в Kavita,
нужны сами файлы (epub/pdf) — их можно положить в `/opt/books/ingest`
(Calibre подхватит автоматически) или в `/opt/books/library`.
В каталоге 79 книг без привязки к серии и 178 без года чтения —
это отмечено в `audit_issues` самого файла, заполнять вручную.
+45
View File
@@ -0,0 +1,45 @@
# Загрузка книг из каталога (23.10)
## Задача
Скачать все 181 книгу из `home_library_audit.json` и положить в библиотеку.
## Решение
**Источник:** Flibusta (`flibusta.is`) через VPN-прокси `192.168.1.161:7890`.
Прямой доступ с хоста не работает (000), через прокси — 200.
**Почему не Telegram:**
* глобальный поиск файлов (`SearchGlobal` + `InputMessagesFilterDocument`)
по книгам ничего не даёт — фильтр ищет только документы в публичных чатах,
а книжные каналы публикуют **архивы** (`f.usr-*.zip` по 4 ГБ, `*.cbr`);
* книжные боты недоступны: `@flibustafreebookbot` → «unavailable due to
copyright infringement», остальные — каналы без права писать;
* юзербот всё равно полезен: он уже умеет `files`/`save`, добавлены
`gsearch` и `gsave`, индекс файлов — `/var/lib/telegram-files.db` (2982 файла).
## Как работает загрузчик
`/opt/hub-core/flib_dl3.py`:
1. берёт книгу из каталога (автор + название);
2. поиск на Flibusta: сначала по названию, затем «автор название», затем автор;
3. страница книги открывается только для правдоподобных кандидатов;
4. скачивает **fb2** (Calibre сам конвертирует в epub);
5. уже скачанные пропускает (можно прерывать и продолжать);
6. журнал: `/opt/hub-core/data/book_downloads.json`.
## Ловушки
1. **Путь редиректа не угадывать** — Flibusta отдаёт `/b/<id>/fb2`, страница
книги нужна для ссылки; поиск по одному названию часто даёт мусор,
поэтому проверяем автора и слова названия на странице.
2. **`pkill -f flib_dl` убивает собственную SSH-команду** (шаблон совпадает
с текстом команды) — останавливать через `pgrep` и `kill` по PID.
3. **fb2 — это ZIP**, `file` показывает «Zip archive»; для Calibre это норма.
## Статус
Загрузка идёт в фоне (`nohup`), старт в 16:26. Прогресс:
`tail -f /tmp/books3.log`, файлы — `/opt/books/ingest`.
Часть книг не находится: это новые/нишевые романы (например, Айла Дэвон),
которых нет в Flibusta. Их список будет в журнале со статусом `fail`.
File diff suppressed because it is too large. Load diff
+122
View File
@@ -0,0 +1,122 @@
# Боты в Matrix: архитектура
Обновлено 23.10.2026.
## Принцип: одно входное окно
```
человек → @secretary → (понимает запрос) → профильный бот → ответ
↓ если не понял
поиск по документации (RAG)
↓ если и там нет
пожелание владельцу (@akadmin)
```
**Секретарь** (`@secretary:matrix.buryans.ru`) — единственный, кому пишут
люди. Он не дублирует функции, а маршрутизирует.
## Кто есть
| Бот | Задача | Отвечает |
|---|---|---|
| `@secretary` | единое окно, маршрутизация, пожелания | всем из allowlist |
| `@media` | музыка, фильмы, ТВ, колонки | медиа-запросы |
| `@book` | книги, библиотека | книжные запросы |
| `@photo` | фото, альбомы | фото-запросы |
| `@home` | дом, сценарии, свет | бытовые команды |
| `@infra` | бэкапы, сервисы, диски | инфраструктура |
| `@search` | поиск по всему | поисковые запросы |
| `@digest` | что нового за период | дайджесты |
| `@cam` | камеры | видео |
## Маршруты секретаря
| Слова | Кому |
|---|---|
| музык, фильм, кино, сериал, тв, колонк, алис, включи | MEDIA |
| книг, чита, библиотек, автор | BOOK |
| фото, снимк, альбом, immich | PHOTO |
| дом, свет, сценар, утро, ночь, ушли | HOME |
| бэкап, сервис, диск, место, статус, логи, агент | INFRA |
| что нового, дайджест, новинк | DIGEST |
| найди, поиск, где лежит | SEARCH |
## История: у каждого своя
`/var/lib/hub-bots/secretary.db`, таблица `history(user, ts, role, text)`.
Ключ — полный Matrix-ID пользователя. Чужие сообщения не попадают
в чужой контекст: истории физически разделены.
Проверено: два разных человека пишут секретарю — записи лежат с разными
`user`, бот не смешивает.
## Пожелания
Если секретарь не нашёл ответа, он пишет в `wishes(user, ts, text, status)`
и отправляет личное сообщение владельцу. Владелец разбирает список:
```bash
sqlite3 /var/lib/hub-bots/secretary.db \
"select id, user, text, status from wishes where status='new'"
```
## Чего НЕ делаем (и почему)
**Не создаём нового бота на каждый запрос.** Раньше это приводило к спаму
и зоопарку аккаунтов. Все профильные боты — фиксированный набор из 9
аккаунтов, они уже существуют и не пересоздаются.
**Не даём профильным ботам инициативу.** Они только отвечают на
маршрутизированный запрос, не пишут первыми.
## Как это устроено в коде
| Файл | Роль |
|---|---|
| `/opt/hub-bots/hub/secretary.py` | секретарь: маршруты, история, пожелания |
| `/opt/hub-bots/hub/matrix.py` | базовый класс `Bot`, `poll_loop` |
| `/opt/hub-bots/hub/main.py` | запуск флота, связывание секретаря с профильными |
| `/etc/hub-bots/bots.env` | токены, `ALLOWED_USERS` |
Секретарь получает ссылки на профильных ботов (`peers`) и вызывает
их `dispatch()` напрямую — без пересылки сообщений между комнатами,
поэтому в Matrix не появляется лишних сообщений.
**Флаг `any_room = True`**: обычные боты слушают только свою личку,
секретарь — любую комнату, куда его пригласили (чтобы человек мог
написать из своей личной комнаты).
## Проверено вживую
| Сценарий | Результат |
|---|---|
| «включи музыку на кухне» | маршрут MEDIA, ответ пришёл |
| «хочу учёт семейных расходов» | пожелание записано, владельцу ушло сообщение |
| два пользователя | истории раздельные |
## Распознавание действий (23.10)
Раньше «включи музыку» возвращало справку. Теперь секретарь различает
**действие** и **вопрос**:
| Фраза | Что делает |
|---|---|
| включи музыку на кухне | команда `музыка` у MEDIA (запуск) |
| включи телевизор в спальне | команда `тв` у MEDIA |
| покажи что есть в медиатеке | справка MEDIA (`stats`) |
| найди книгу дюна | BOOK |
| когда последний бэкап | INFRA |
Проверено юнит-тестом без Matrix: маршрут и выбор команды корректны.
## Команды секретаря
`!помощь` · `!хочу <идея>` · `!история` · `!кто` · `!пожелания` (только владелец)
## Что дальше
1. `!пожелания` показывает новые записи; нужны статусы
(new → принято → сделано) и ответ «вам пришло пожелание» автору.
2. Профильные боты всё ещё отвечают только владельцу в своей личке —
после маршрута от секретаря это неважно, но стоит унифицировать.
3. Словарь маршрутов расширять по мере реальных фраз.
+94
View File
@@ -0,0 +1,94 @@
# Централизация ИИ: что можно перенести на MCore4 Pro (23.10)
## Что уже есть в стеке (факты)
| Задача | Где сейчас | Ресурсы | GPU |
|---|---|---|---|
| LLM (Ollama) | CT160 `llm-lxc` | 2 ядра, 4 ГБ | **нет** (`/dev/dri` отсутствует) |
| Frigate | CT126 `frigate-lxc` | 2 ядра, 2 ГБ | **нет**, Coral нет, камер нет |
| Paperless OCR | CT105 | CPU | нет |
| Immich ML | в реестре есть, не развёрнут | — | — |
| DeepSeek (облако) | внешний API | — | — |
Отсюда 121 секунда на 3B-модель: **2 ядра без GPU**.
## Что можно перенести на MCore4 Pro
| Нагрузка | Пойдёт? | Комментарий |
|---|---|---|
| LLM 7B (Q4) | ✅ отлично | ~4.5 ГБ, iGPU/NPU |
| LLM 14B (Q4) | ✅ при 32 ГБ RAM | ~9 ГБ |
| Whisper STT | ✅ | small/medium в реальном времени |
| Piper TTS | ✅ | копейки по ресурсам |
| Эмбеддинги (RAG) | ✅ | ~0.5 ГБ |
| Frigate-детекция | ✅ с **Coral USB** | иначе съест iGPU |
| Frigate-декодирование | ✅ Arc (VAAPI) | лучше, чем CPU |
| Immich ML | ⚠️ лучше рядом с фото | всплесковая нагрузка |
| Paperless OCR | ⚠️ можно, но незачем | CPU-задача, места мало |
## Хватит ли 16 ГБ
| Комбинация | RAM | Вывод |
|---|---|---|
| LLM 7B + Whisper + TTS + эмбеддинги | ~7 ГБ | ✅ свободно |
| LLM 14B + Whistper + TTS | ~12 ГБ | ✅ впритык, но можно |
| LLM 7B + Frigate с 3 камерами + Whisper | ~10 ГБ | ⚠️ зависит от разрешения |
| Всё сразу + Immich ML | 16 ГБ | ❌ будет swap |
**Вывод:** 16 ГБ хватает на «ИИ-хаб» (LLM+STT+TTS). Для 14B-моделей
и камер одновременно нужно **32 ГБ** (2×16 DDR5 SO-DIMM, два слота есть).
## Как устроен (что проверить при вскрытии)
Корпус 188×188×47.5 мм, крепление VESA, нижняя крышка на винтах.
| Узел | Ожидание | Что проверить |
|---|---|---|
| RAM | 2× SO-DIMM DDR5, оба заняты 8+8 | есть ли запас по объёму (до 64/96 ГБ) |
| SSD | M.2 NVMe 2280, 256 ГБ | длина слота, Key M, есть ли второй слот 2242 |
| Coral | — | **M.2-слот занят SSD** → брать Coral **USB** |
| Охлаждение | активный вентилятор | шум в гостиной |
| BIOS | UEFI, Secure Boot, TPM 2.0 | можно ли отключить Secure Boot для Linux |
## Два варианта архитектуры
### A. ИИ-узел (рекомендую)
```
MCore4 Pro
├── Ollama (7B/14B, OpenAI-совместимый API) ← единая точка для всех
├── faster-whisper
├── Piper TTS
└── эмбеддинги для RAG
```
Все сервисы (HA, боты, секретарь, поиск, голос) ходят на **один адрес**.
DeepSeek остаётся как fallback для сложных запросов.
Frigate — отдельно, с **Coral USB**, потому что видеопоток — это I/O,
а не ИИ; смешивать с LLM на одной машине рискованно.
### B. Всё на одной машине
MCore4 Pro + SSD 1 ТБ + 32 ГБ RAM + Coral USB: LLM, Frigate, Immich ML.
Плюс — одна точка. Минус — единая точка отказа и 16 ГБ мало без апгрейда.
## Что даёт апгрейд
| Апгрейд | Цена (ориентир) | Что даёт |
|---|---|---|
| RAM 2×16 ГБ DDR5 | 5–8 тыс ₽ | 14B-модели, несколько задач |
| SSD 1 ТБ NVMe | 5–7 тыс ₽ | модели + кэш Frigate + Docker |
| Coral USB | 5–7 тыс ₽ | детекция без нагрузки на CPU/GPU |
**SSD 256 ГБ для ИИ-узла достаточно:** 7B ≈ 4.5 ГБ, 14B ≈ 9 ГБ,
Whisper ≈ 1 ГБ, TTS ≈ 0.2 ГБ. Менять SSD стоит только под Frigate-кэш.
## Как решить без гаданий
1. Загрузиться с USB-флешки в Debian Live (не трогая внутренний SSD).
2. Запустить замеры:
* `ollama run qwen2.5:7b` → токенов в секунду;
* `faster-whisper small` → время на 10-секундную фразу;
* `vainfo`/`intel_gpu_top` → виден ли Arc.
3. Если 7B даёт ≥10 ток/с — узел годится для ассистента.
4. Если ≥20 ток/с — можно думать про 14B.
Пока нет этих цифр, решение — вера, а не инженерия.
+75
View File
@@ -0,0 +1,75 @@
# Yealink MCore4 Pro-NonOS — применение в проекте (23.10)
## Точные характеристики (проверено по документации)
| Параметр | Значение |
|---|---|
| CPU | **Intel Core Ultra 5 125H** (14 ядер: 4P + 8E + 2LP-E, 18 потоков) |
| GPU | **Intel Arc** (интегрированная, 7 Xe-ядер) |
| NPU | **есть** (~11 TOPS, ИИ-ускорение) |
| RAM | **16 ГБ DDR5** (2×8, два слота) |
| SSD | **256 ГБ** |
| ОС | **не установлена (NonOS)** — можно ставить Linux |
| Видеовыходы | HDMI 2.1 ×1, HDMI 2.0 ×2, **HDMI-вход 4K ×1** |
| Прочее | 4× USB 3.0, LAN 1 Гбит, Wi-Fi ax, BT 5.2, TPM 2.0, UEFI Secure Boot |
| Размер | 188 × 188 × 47.5 мм, крепление на стену/за ТВ |
Источник: [yea-rus.ru](https://www.yea-rus.ru/yealink_mcore4_pro-nonos).
## Почему это меняет вывод
В прошлой версии документа я считал, что там i5-1145G7E (11-е поколение).
С Ultra 5 125H появляется то, чего нет у основного сервера:
* **NPU** — аппаратное ускорение ИИ;
* **Arc iGPU** — OpenVINO/Vulkan, локальные модели;
* **AV1 encode/decode** — лучше QuickSync 11-го поколения.
Главное: **проблема «локальный ИИ отвечает 121 секунду» решается этим железом.**
## Сценарии (обновлено)
### 1. Узел локального ИИ — ★★★★★ (главный)
* Ollama / IPEX-LLM на Arc iGPU: 7B-модель в Q4, ориентир 10–25 ток/с;
* **faster-whisper small/medium** для распознавания речи в реальном времени;
* **Piper** — быстрый локальный TTS (русский голос);
* итог: голосовой ассистент без облака и без задержек DeepSeek.
16 ГБ хватает: модель 7B Q4 ≈ 4.5 ГБ + Whisper ≈ 1 ГБ + система.
### 2. Узел Frigate с OpenVINO — ★★★★★ (когда приедут камеры)
Детекция на Arc/NPU вместо CPU, записи — на медиа-диск по NFS.
256 ГБ локально — только кэш и конфиг.
### 3. Транскодинг Jellyfin — ★★★★☆
Arc тянет 4K HEVC → 1080p и умеет **AV1** (наш основной сервер — нет).
### 4. Терминал в гостиной — ★★★☆☆
Chromium-киоск с `/voice.html`, HDMI в ТВ, USB-микрофон.
Уступает варианту 1: там ассистент живёт целиком на этом же железе.
### 5. Ещё один узел Proxmox — ★★☆☆☆
256 ГБ хватит на 3–5 лёгких LXC, но смысл теряется: это лучший ИИ-узел.
## Рекомендуемая схема
```
MCore4 Pro (Debian/Proxmox, 16 ГБ, Arc+NPU)
├── Ollama (7B Q4, iGPU) — «мозг» ассистента, локально
├── faster-whisper (small) — распознавание речи
├── Piper TTS — голос
├── Frigate + OpenVINO — когда приедут камеры
└── (опционально) Jellyfin-транскодер
```
Основной сервер остаётся хранилищем и оркестратором, MCore — вычислительным
узлом для ИИ и видео.
## Что проверить после установки ОС
1. `lscpu` — точная модель и ядра.
2. `lsblk` — тип SSD (M.2 NVMe?), есть ли свободный слот.
3. `sudo dmidecode -t memory` — 2×8 ГБ, есть ли ещё слоты.
4. Замеры: токены/с у Ollama 7B, скорость Whisper, FPS детекции Frigate.
Без этих цифр любые обещания по скорости — гадание.
+47
View File
@@ -0,0 +1,47 @@
# Hermes — шина событий, планировщик и агентский слой
Запущен 28.10.2026, порт **9130**, systemd-юнит `hermes.service`,
код `/opt/hermes/`, состояние в SQLite `hermes.db`.
## Что уже забрал на себя
| Функция | Было | Стало |
|---|---|---|
| Приём алертов Prometheus | Alertmanager слал сразу в Matrix и вебхук | **Alertmanager → Hermes → хаб → Matrix**: дедуп 15 мин, тихие часы 23:30–07:30, приоритеты |
| Свежесть бэкапов | cron `buryan-backup-heartbeat` | задание Hermes `backup-heartbeat`, каждые 30 мин |
| Проверка обновлений | сломанный скрипт (только CT110, «проверено: 0») | задание `updates-check`, все LXC + хост: **132 образа, 87 обновлений** |
| Журнал событий | нигде | таблица `events`: источник, тип, важность, доставка, дедуп-ключ |
| Статус сервисов | ручной опрос | задание `verify-services` раз в час |
## API
```
POST /event {"source","type","severity","title","body","dedup_key"}
POST /alertmanager вебхук Alertmanager
GET /events?limit=50 журнал
GET /approvals ожидающие решения
GET /health живость + счётчики
GET /metrics Prometheus (hermes_events_total, hermes_job_fails…)
POST /jobs/<name>/run ручной запуск задания
```
## Задания (jobs.yaml)
| Имя | Расписание | Что делает |
|---|---|---|
| `backup-heartbeat` | 30 мин | пингует Kuma по свежести бэкапов |
| `updates-check` | 6 ч | ищет обновления образов, публикует событие |
| `disk-trend` | 1 ч | срез занятого места |
| `verify-services` | 1 ч | проверяет статус хаба |
## Куда развивать
1. **Ротация расписаний** — перенести `hub-*` cron в jobs.yaml, чтобы был один список.
2. **Обновления по подтверждению** — заявка `approvals` → применение с снапшотом и откатом.
3. **Агенты** — задачи «проверь X и предложи Y» с журналом решений.
4. **Голос** — после локальной LLM: событие → короткий ответ в Matrix/колонку.
## Метрики
`hermes_events_total`, `hermes_events_1h`, `hermes_events_undelivered`,
`hermes_quiet_active`, `hermes_job_runs{job,status}`, `hermes_job_fails{job}`.
+137
View File
@@ -0,0 +1,137 @@
#!/usr/bin/env python3
# -*- coding: utf-8 -*-
"""Проверка обновлений образов по всем контейнерам и хосту.
Почему переписано: прошлая версия смотрела только CT110 и отбрасывала образы,
у которых нет RepoDigests (локальные сборки и теги без pull), из-за чего
«проверено: 0». Теперь:
* обходим ВСЕ LXC и хост;
* локальный digest берём из `docker images --digests`;
* локальные сборки честно считаем «не сравнить»;
* считаем статистику по каждому источнику.
"""
import json
import re
import subprocess
import urllib.request
HOST = None
OUT = "/var/lib/hub-agents/updates.json"
def sh(cmd, timeout=90):
try:
r = subprocess.run(cmd, shell=True, capture_output=True, text=True, timeout=timeout)
return (r.stdout or "").strip()
except Exception:
return ""
def list_cts():
out = sh("pct list | awk 'NR>1 && $2==\"running\"{print $1}'")
return [c.strip() for c in out.splitlines() if c.strip().isdigit()]
def images(ct):
base = f"pct exec {ct} -- " if ct else ""
out = sh(base + "docker images --digests --format '{{.Repository}}:{{.Tag}}|{{.Digest}}' 2>/dev/null")
res = {}
for line in out.splitlines():
if "|" not in line:
continue
ref, digest = line.split("|", 1)
if "<none>" in ref:
continue
res[ref.strip()] = digest.strip()
return res
def remote_digest(image):
try:
name, tag = (image.rsplit(":", 1) + ["latest"])[:2]
if "/" not in name:
name = "library/" + name
host = "registry-1.docker.io"
repo = name
if repo.startswith("ghcr.io/"):
host, repo = "ghcr.io", repo[len("ghcr.io/"):]
elif repo.startswith("lscr.io/"):
host, repo = "lscr.io", repo[len("lscr.io/"):]
elif repo.startswith("quay.io/"):
host, repo = "quay.io", repo[len("quay.io/"):]
elif repo.startswith("docker.io/"):
repo = repo[len("docker.io/"):]
if host == "ghcr.io":
token_url = f"https://ghcr.io/token?scope=repository:{repo}:pull&service=ghcr.io"
elif host == "lscr.io":
token_url = f"https://lscr.io/token?scope=repository:{repo}:pull"
elif host == "quay.io":
token_url = f"https://quay.io/v2/auth?scope=repository:{repo}:pull&service=quay.io"
else:
token_url = (f"https://auth.docker.io/token?service=registry.docker.io"
f"&scope=repository:{repo}:pull")
with urllib.request.urlopen(token_url, timeout=12) as r:
data = json.loads(r.read())
tok = data.get("token") or data.get("access_token") or ""
req = urllib.request.Request(
f"https://{host}/v2/{repo}/manifests/{tag}",
headers={"Authorization": f"Bearer {tok}",
"Accept": "application/vnd.oci.image.index.v1+json,"
"application/vnd.docker.distribution.manifest.list.v2+json,"
"application/vnd.oci.image.manifest.v1+json,"
"application/vnd.docker.distribution.manifest.v2+json"})
with urllib.request.urlopen(req, timeout=15) as r:
return r.headers.get("Docker-Content-Digest", "")
except Exception:
return ""
def main():
checked = outdated = nolocal = unreachable = 0
rows = []
targets = [(None, "host")] + [(c, f"CT{c}") for c in list_cts()]
for ct, label in targets:
imgs = images(ct)
for ref, digest in imgs.items():
if ref.endswith(":<none>"):
continue
if not digest or not digest.startswith("sha256:"):
nolocal += 1
continue
remote = remote_digest(ref)
if not remote:
unreachable += 1
continue
checked += 1
if remote != digest:
outdated += 1
rows.append({"where": label, "image": ref, "local": digest[:19],
"remote": remote[:19]})
print(f"проверено: {checked} | обновлений: {outdated} | "
f"локальных сборок: {nolocal} | registry недоступен: {unreachable}")
for r in rows[:12]:
print(f" ↑ {r['image']} ({r['where']})")
if len(rows) > 12:
print(f" … и ещё {len(rows) - 12}")
json.dump(rows, open(OUT, "w"), ensure_ascii=False, indent=1)
if rows:
body = json.dumps({
"title": "Обновления образов",
"message": f"Доступно {len(rows)} обновлений: " + ", ".join(r["image"] for r in rows[:6]),
"priority": "low",
}).encode()
req = urllib.request.Request("http://127.0.0.1:9120/notify", data=body,
method="POST", headers={"Content-Type": "application/json"})
try:
urllib.request.urlopen(req, timeout=10).read()
print("уведомление отправлено")
except Exception as e:
print("notify:", e)
if __name__ == "__main__":
main()
+350
View File
@@ -0,0 +1,350 @@
#!/usr/bin/env python3
# -*- coding: utf-8 -*-
"""Hermes — шина событий, планировщик и агентский слой Buryan Hub.
Зачем: события (алерты, бэкапы, обновления, домашние) сейчас размазаны по
хуку, ботам и cron. Hermes собирает их в один журнал, устраняет дубли,
маршрутизирует в доставку через хаб (/notify) и запускает периодические
задания с ретраями и историей.
Что умеет:
POST /event — принять событие (source, type, severity, title, body)
POST /alertmanager — принять вебхук Alertmanager и превратить в события
GET /events — журнал (limit, severity)
GET /health — состояние
GET /metrics — метрики Prometheus
POST /jobs/<name>/run — ручной запуск задания
GET /approvals — список ожидающих решений
Задания описываются в jobs.yaml (интервал или время суток), ретраи и таймаут.
Доставка — через http://127.0.0.1:9120/notify (хаб знает про Matrix/Telegram).
"""
import json
import os
import re
import sqlite3
import subprocess
import threading
import time
import urllib.error
import urllib.request
from http.server import BaseHTTPRequestHandler, ThreadingHTTPServer
BASE = "/opt/hermes"
DB = f"{BASE}/hermes.db"
JOBS = f"{BASE}/jobs.yaml"
CONF = f"{BASE}/hermes.yaml"
PORT = int(os.environ.get("HERMES_PORT", "9130"))
HOST = os.environ.get("HERMES_HOST", "0.0.0.0")
_lock = threading.Lock()
def conf():
try:
import yaml
return yaml.safe_load(open(CONF, encoding="utf-8")) or {}
except Exception:
return {}
CFG = conf()
NOTIFY_URL = CFG.get("notify_url", "http://127.0.0.1:9120/notify")
QUIET = CFG.get("quiet_hours", []) # [["23:00","08:00"]]
DEDUP_SEC = int(CFG.get("dedup_seconds", 900))
RETENTION_DAYS = int(CFG.get("retention_days", 30))
def db():
conn = sqlite3.connect(DB, timeout=10)
conn.row_factory = sqlite3.Row
return conn
def init():
os.makedirs(BASE, exist_ok=True)
with db() as c:
c.executescript("""
create table if not exists events(
id integer primary key autoincrement,
ts real not null, source text, type text, severity text,
title text, body text, dedup_key text, delivered integer default 0,
delivery text, payload text);
create index if not exists ev_ts on events(ts desc);
create index if not exists ev_dedup on events(dedup_key, ts desc);
create table if not exists jobs(
name text primary key, last_run real, last_status text,
last_ms integer, runs integer default 0, fails integer default 0);
create table if not exists approvals(
id integer primary key autoincrement, ts real, kind text,
title text, details text, status text default 'pending');
""")
def now():
return time.time()
def in_quiet(ts=None):
if not QUIET:
return False
t = time.localtime(ts or now())
cur = t.tm_hour * 60 + t.tm_min
for span in QUIET:
try:
a, b = span
h1, m1 = map(int, a.split(":"))
h2, m2 = map(int, b.split(":"))
start, end = h1 * 60 + m1, h2 * 60 + m2
if start <= end:
if start <= cur < end:
return True
else: # через полночь
if cur >= start or cur < end:
return True
except Exception:
continue
return False
def notify(title, message, priority="normal", dedup_key=None):
"""Доставка через хаб. Возвращает (delivered, note)."""
if in_quiet() and priority != "critical":
return 0, "quiet-hours"
data = json.dumps({"title": title, "message": message, "priority": priority}).encode()
req = urllib.request.Request(NOTIFY_URL, data=data, method="POST",
headers={"Content-Type": "application/json"})
try:
with urllib.request.urlopen(req, timeout=10) as r:
return 1, f"http:{r.status}"
except Exception as e:
return 0, f"error:{str(e)[:60]}"
def add_event(source, etype, severity, title, body="", dedup_key=None, payload=None):
"""Записать событие; при дубле в окне dedup — не доставлять повторно."""
key = dedup_key or f"{source}:{etype}:{title}"
with _lock, db() as c:
prev = c.execute(
"select id, delivered from events where dedup_key=? and ts>? order by ts desc limit 1",
(key, now() - DEDUP_SEC)).fetchone()
if prev and prev["delivered"]:
c.execute("insert into events(ts,source,type,severity,title,body,dedup_key,delivered,delivery,payload)"
" values(?,?,?,?,?,?,?,0,'dedup',?)",
(now(), source, etype, severity, title, body, key,
json.dumps(payload or {}, ensure_ascii=False)))
return False
cur = c.execute(
"insert into events(ts,source,type,severity,title,body,dedup_key,payload)"
" values(?,?,?,?,?,?,?,?)",
(now(), source, etype, severity, title, body, key,
json.dumps(payload or {}, ensure_ascii=False)))
eid = cur.lastrowid
prio = "critical" if severity in ("critical", "high") else "normal"
ok, note = notify(title, body or title, prio, key)
with db() as c:
c.execute("update events set delivered=?, delivery=? where id=?", (ok, note, eid))
return True
# ---------------- задания ----------------
def load_jobs():
try:
import yaml
return yaml.safe_load(open(JOBS, encoding="utf-8")) or {}
except Exception:
return {}
def run_job(name, job):
started = now()
cmd = job.get("command")
timeout = int(job.get("timeout", 600))
retries = int(job.get("retries", 0))
status, out = "ok", ""
for attempt in range(retries + 1):
try:
r = subprocess.run(cmd, shell=True, capture_output=True, text=True, timeout=timeout)
out = ((r.stdout or "") + (r.stderr or "")).strip()
status = "ok" if r.returncode == 0 else f"fail:{r.returncode}"
if status == "ok":
break
except subprocess.TimeoutExpired:
status, out = "timeout", f"таймаут {timeout}с"
except Exception as e:
status, out = "error", str(e)[:150]
time.sleep(2)
ms = int((now() - started) * 1000)
with db() as c:
c.execute("""insert into jobs(name,last_run,last_status,last_ms,runs,fails)
values(?,?,?,?,1,?)
on conflict(name) do update set
last_run=excluded.last_run, last_status=excluded.last_status,
last_ms=excluded.last_ms, runs=runs+1,
fails=fails+excluded.fails""",
(name, started, status, ms, 0 if status == "ok" else 1))
if status != "ok":
add_event("hermes", "job", "medium", f"Задание провалено: {name}", out[:800],
dedup_key=f"job:{name}:{status}")
elif job.get("notify_on_success"):
add_event("hermes", "job", "low", f"Задание выполнено: {name}", out[:400],
dedup_key=f"job-ok:{name}:{int(started)//3600}")
return status, out
def scheduler_loop():
while True:
try:
jobs = load_jobs()
t = time.localtime()
for name, job in (jobs or {}).items():
if not isinstance(job, dict) or not job.get("command"):
continue
with db() as c:
row = c.execute("select last_run from jobs where name=?", (name,)).fetchone()
last = row["last_run"] if row else 0
due = False
if job.get("every_seconds"):
due = (now() - (last or 0)) >= int(job["every_seconds"])
elif job.get("daily_at"):
hh, mm = map(int, job["daily_at"].split(":"))
today = time.mktime((t.tm_year, t.tm_mon, t.tm_mday, hh, mm, 0, 0, 0, -1))
due = now() >= today and (last or 0) < today
if due:
threading.Thread(target=run_job, args=(name, job), daemon=True).start()
time.sleep(1)
except Exception as e:
print("scheduler:", e, flush=True)
time.sleep(30)
def cleanup_loop():
while True:
try:
with db() as c:
c.execute("delete from events where ts < ?", (now() - RETENTION_DAYS * 86400,))
except Exception:
pass
time.sleep(3600)
# ---------------- HTTP ----------------
class Handler(BaseHTTPRequestHandler):
server_version = "hermes/0.1"
def log_message(self, *a):
pass
def _send(self, code, obj):
body = json.dumps(obj, ensure_ascii=False).encode()
self.send_response(code)
self.send_header("Content-Type", "application/json; charset=utf-8")
self.send_header("Content-Length", str(len(body)))
self.end_headers()
self.wfile.write(body)
def _text(self, code, text):
body = text.encode()
self.send_response(code)
self.send_header("Content-Type", "text/plain; charset=utf-8")
self.send_header("Content-Length", str(len(body)))
self.end_headers()
self.wfile.write(body)
def do_GET(self):
p = self.path.split("?")[0]
q = dict(re.findall(r"([^?&=]+)=([^&]*)", self.path))
if p == "/health":
with db() as c:
n = c.execute("select count(*) n from events where ts>?", (now() - 3600,)).fetchone()["n"]
pend = c.execute("select count(*) n from approvals where status='pending'").fetchone()["n"]
return self._send(200, {"status": "ok", "events_1h": n, "approvals_pending": pend,
"quiet": in_quiet()})
if p == "/events":
limit = min(int(q.get("limit", 50)), 500)
with db() as c:
rows = c.execute("select * from events order by ts desc limit ?", (limit,)).fetchall()
return self._send(200, {"count": len(rows), "items": [dict(r) for r in rows]})
if p == "/approvals":
with db() as c:
rows = c.execute("select * from approvals order by ts desc limit 50").fetchall()
return self._send(200, {"count": len(rows), "items": [dict(r) for r in rows]})
if p == "/metrics":
with db() as c:
total = c.execute("select count(*) n from events").fetchone()["n"]
last_h = c.execute("select count(*) n from events where ts>?", (now() - 3600,)).fetchone()["n"]
undel = c.execute("select count(*) n from events where delivered=0").fetchone()["n"]
jobs = c.execute("select name,fails,runs,last_status from jobs").fetchall()
lines = ["# HELP hermes_events_total событий в журнале",
"# TYPE hermes_events_total gauge",
f"hermes_events_total {total}",
f"hermes_events_1h {last_h}",
f"hermes_events_undelivered {undel}",
f"hermes_quiet_active {1 if in_quiet() else 0}"]
for j in jobs:
lines.append(f'hermes_job_runs{{job="{j["name"]}",status="{j["last_status"]}"}} {j["runs"]}')
lines.append(f'hermes_job_fails{{job="{j["name"]}"}} {j["fails"]}')
return self._text(200, "\n".join(lines) + "\n")
return self._send(404, {"error": "not found"})
def do_POST(self):
p = self.path.split("?")[0]
length = int(self.headers.get("Content-Length") or 0)
raw = self.rfile.read(length) if length else b"{}"
try:
data = json.loads(raw or b"{}")
except Exception:
return self._send(400, {"error": "bad json"})
if p == "/event":
ok = add_event(data.get("source", "external"), data.get("type", "info"),
data.get("severity", "low"), data.get("title", "событие"),
data.get("body", ""), data.get("dedup_key"), data)
return self._send(200, {"accepted": True, "delivered": ok})
if p == "/alertmanager":
n = 0
for a in data.get("alerts", []):
if a.get("status") == "resolved":
continue
labels = a.get("labels") or {}
ann = a.get("annotations") or {}
sev = labels.get("severity", "warning")
add_event("prometheus", labels.get("alertname", "alert"),
"critical" if sev == "critical" else "medium",
ann.get("summary") or labels.get("alertname", "алерт"),
ann.get("description", ""),
dedup_key=f"am:{labels.get('alertname')}:{labels.get('instance','')}")
n += 1
return self._send(200, {"accepted": n})
m = re.match(r"^/jobs/([A-Za-z0-9_.-]+)/run$", p)
if m:
name = m.group(1)
jobs = load_jobs() or {}
if name not in jobs:
return self._send(404, {"error": "unknown job"})
threading.Thread(target=run_job, args=(name, jobs[name]), daemon=True).start()
return self._send(202, {"started": name})
return self._send(404, {"error": "not found"})
def main():
init()
threading.Thread(target=scheduler_loop, daemon=True).start()
threading.Thread(target=cleanup_loop, daemon=True).start()
srv = ThreadingHTTPServer((HOST, PORT), Handler)
print(f"hermes слушает {HOST}:{PORT}", flush=True)
add_event("hermes", "start", "low", "Hermes запущен", f"порт {PORT}",
dedup_key=f"hermes-start:{int(now())//600}")
srv.serve_forever()
if __name__ == "__main__":
main()
+13
View File
@@ -0,0 +1,13 @@
# Hermes: конфигурация шины событий
notify_url: "http://127.0.0.1:9120/notify"
dedup_seconds: 900
retention_days: 30
# Тихие часы: события ниже critical не будят
quiet_hours:
- ["23:30", "07:30"]
# Что перекладываем на Hermes в первую очередь:
# - приём алертов Alertmanager (дедуп, тихие часы, доставка через хаб)
# - контроль свежести бэкапов (heartbeat в Kuma)
# - проверка обновлений образов (отчёт + возможное применение по подтверждению)
# - проверка дискового тренда
+25
View File
@@ -0,0 +1,25 @@
# Задания Hermes. Владелец каждого — шина; расписание в одном месте.
backup-heartbeat:
command: "/usr/local/bin/backup-heartbeat.sh"
every_seconds: 1800
timeout: 120
retries: 1
updates-check:
command: "/opt/music-tools/venv/bin/python /opt/hub-core/check_updates.py"
every_seconds: 21600
timeout: 900
retries: 1
disk-trend:
command: "df -h / /mnt/media /mnt/archive | tail -3"
every_seconds: 3600
notify_on_success: false
timeout: 30
retries: 0
verify-services:
command: "curl -s --max-time 20 http://127.0.0.1:9120/status.json | /opt/music-tools/venv/bin/python -c \"import json,sys; d=json.load(sys.stdin); bad=[s['name'] for s in d.get('services',[]) if not s.get('up')]; print('лежат:', bad or 'нет')\""
every_seconds: 3600
timeout: 60
retries: 1
+65
View File
@@ -0,0 +1,65 @@
# Автоматизации дома (23.10)
## Что есть в Home Assistant
| Сущностей | 319 |
|---|---|
| device_tracker | 104 (ping-присутствие) |
| sensor | 110 |
| switch | 37 |
| binary_sensor | 22 |
| media_player | 9 (2 колонки Яндекса работают) |
| light | 4 |
| script | 4 (`утро`, `кино`, `ушли`, `ночь`) |
| **automation** | **было 0 → стало 6** |
## Созданные автоматизации
| Автоматизация | Что делает |
|---|---|
| Роман пришёл — свет и событие | 17:00–24:00: свет в прихожей/тамбуре + уведомление в хаб |
| Роман ушёл — свет выключить | гасит 3 света + уведомление |
| Ночь 23:30 — свет и отчёт | ежедневно гасит свет + уведомление |
| Дождь — голос и уведомление | TTS на колонку «Возьми зонт» + уведомление |
| Узел сети недоступен | `binary_sensor.192.168.1.10` off 5 минут → тревога |
| Свет в прихожей днём > 2 ч | напоминание о забытом свете |
## Мост HA → hub-core
В `configuration.yaml` уже был `rest_command.hub_notify`:
```yaml
rest_command:
hub_notify:
url: "http://192.168.1.10:9120/notify"
method: POST
content_type: "application/json"
payload: '{"title": "{{ title }}", "message": "{{ message }}"}'
```
Автоматизации вызывают `rest_command.hub_notify` → событие попадает
в очередь хаба и уходит в Matrix.
**Проверено:** запуск автоматизации «Роман пришёл» →
`last_triggered` обновился, в очереди хаба появилось
«Дом | Роман пришёл домой».
## Честно про устройства
**Лампы не управляются.** Прямой вызов `light.turn_off` возвращает 200,
но состояние остаётся `on`, `supported_features = 0` — устройства
(4 света) в интеграции есть, а команды до них не доходят.
Поэтому автоматизации со светом корректны, но эффекта пока не дают.
Как только приедут устройства, они заработают без изменений —
логика уже написана.
TTS на колонку вызывается без ошибки (200), но проверить на слух
удалённо нельзя — проверьте, сказала ли колонка «Проверка связи».
## Что можно добавить без нового железа
* присутствие по телефонам (`device_tracker` 104 шт.) — «кто дома»;
* недоступность любого узла сети — тревога в Matrix (сделано для сервера);
* оповещения о погоде по расписанию;
* «ушли все» — по отсутствию всех телефонов.
+86
View File
@@ -0,0 +1,86 @@
# Home Assistant: разбор недоступных сущностей (23.10)
## Итог
| Показатель | Было | Стало |
|---|---|---|
| Недоступных сущностей | 27 | **11** |
| AdGuard-сущностей живых | 2 из 14 | **14 из 14** |
| Свет в коридоре (zigbee) | не управлялся | **переключается** |
## Что починили
### 1. AdGuard Home — 12 сущностей ✅
**Причина:** интеграция в HA хранила неверный пароль (или он менялся).
API отвечал `401 invalid username or password`.
**Решение:**
* заменили bcrypt-хеш пароля в `/opt/network-lxc/adguard/conf/AdGuardHome.yaml`;
* перезапустили контейнер, проверили API → `200`;
* прописали новый пароль в `core.config_entries` HA;
* пароль сохранён: `/root/.adguard-password`.
### 2. SpeedTest — 3 сущности удалены ✅
**Причина:** `Unable to connect to speedtest.net` — сервис недоступен из сети.
Интеграция бессмысленна, удалена из конфигурации.
### 3. Мёртвые медиаплееры ✅
Удалены из реестра: `media_player.server`, `media_player.kabinet_televizor`.
### 4. Корень проблем со светом и Zigbee: MQTT 🎯
`zigbee2mqtt` не мог подключиться к брокеру:
```
z2m: MQTT error: connect ECONNREFUSED 192.168.1.107:1883
```
Mosquitto перезапускался в 21:11, и z2m потерял соединение. Из-за этого:
* `switch.svet_koridor_*` были `unknown`;
* HA терял MQTT и писал «MQTT connection lost».
**Решение:** перезапуск `zigbee2mqtt` → `Connected to MQTT server`,
устройство «СВЕТ Коридор» вернулось.
Проверка: `switch.svet_koridor_1` переключился `off → on` ✅
### 5. Что осталось лежать (11) — и почему это нормально
| Сущность | Причина |
|---|---|
| `conversation.home_assistant` | служебная, состояние `unknown` нормально |
| `event/sensor.backup_*` (4) | HA-бэкапы не настроены |
| `button.*_reboot`, `button.zigbee2mqtt_bridge_restart` (3) | кнопки, `unknown` нормально |
| `media_player.yandex_station_mini` | колонка выключена |
| `media_player.server`, `kabinet_televizor` | пересоздаются из YAML — нужен разбор конфигурации |
## Отдельная проблема: 4 «яндекс»-лампы
`light.svet_v_prikhozhei`, `light.lampa_koridor`, `light.svet_v_tambure`,
`light.kontroller_datchikov_mi` — платформа `mqtt`, `supported_features=0`,
**не переключаются**.
**Причина:** это устройства, пришедшие через **Yandex**-мост
(`unique_id: yandex_*`). Их discovery-конфиги лежат в MQTT (retained), но
мост, который публиковал состояния и слушал команды, больше не работает.
HA видит «последнее известное» состояние `on` и не может им управлять.
**Нужно решение владельца:**
1. **Восстановить мост** Yandex → MQTT (нужны доступы к умному дому Яндекса);
2. **или перевести** эти устройства в HA напрямую (Yandex Smart Home skill /
локальный протокол), если устройства это поддерживают;
3. **или убрать** 4 сущности из HA как мёртвые.
## Ловушки
1. **Опрос `/api/` без токена банит IP** HA на 30 минут
(`Banned IP 192.168.1.10 for too many login attempts`). Проверять
готовность HA только с токеном.
2. **Правки `.storage` HA** требуют остановки/перезапуска контейнера и
валидного JSON — проверять `json.load` до рестарта.
3. **Mosquitto с `allow_anonymous false`** — подписка для диагностики
требует логин (`hub` / пароль из конфига z2m).
+76
View File
@@ -0,0 +1,76 @@
# Голосовой ассистент Buryans Hub (23.10)
## Что уже работает
| Слой | Реализация | Скорость |
|---|---|---|
| Правила (команды) | `/opt/hub-core/voice_router.py` | **0.02–0.6 с** |
| Свободная речь | DeepSeek (`deepseek-chat`) + инструменты | **5–8 с** |
| Память диалога | `/var/lib/hub-core/voice_history.json` (8 реплик) | — |
| Ввод голосом | браузер (Web Speech, ru-RU) — `/voice.html` | 0.3–1 с |
| Ответ голосом | TTS на Яндекс-колонку (проверено) | 1–2 с |
| Ввод текстом | та же страница / curl | — |
### Команды, которые понимает сразу (без ИИ)
`что посмотреть` · `найди <название>` · `сколько всего` · `кто дома` ·
`погода` · `список желаемого` · `похожее на <название>` · `сезоны <название>`
### Что умеет DeepSeek (инструменты)
`search_media` · `media_stats` · `recommend` · `watchlist` · `mark_watch` ·
`ha_state` · `notify` · `secretary` · **`add_movie`** · **`add_series`** · `downloads`
Пример проверенного диалога:
```
Я: что у меня есть из фантастики
А: По запросу «фантастика» нашлись только два документа…
Я: а что из этого уже скачано
А: Сейчас качается только «Интерстеллар» — 4,5 ГБ…
Я: а что посоветуешь на вечер
А: На вечер советую «Прибытие» — умная фантастика…
```
Память: 6 реплик в файле, контекст передаётся в запрос.
## Главное ограничение: колонка не может быть микрофоном
Яндекс.Станция — **закрытое устройство**: Алиса не пускает сторонние
ассистенты. Мы можем:
* ✅ отправлять на неё **TTS** (проверено — колонка говорит);
* ✅ управлять громкостью (локальный протокол, порт 1961);
* ❌ слушать её микрофон (нет API; `send_command` до Алисы не доходит).
Поэтому «свой умный ассистент» строится так: **микрофон отдельно**,
колонка — только динамик.
## Варианты микрофона
| Вариант | Цена | Задержка | Что нужно |
|---|---|---|---|
| Телефон/ПК через `/voice.html` | 0 | 0.3–1 с | ничего, работает сейчас |
| ESP32-S3 (Atom Echo) + ESPHome | ~1.5–2 тыс. ₽ | 1–2 с | прошивка, HA Assist pipeline |
| Home Assistant Voice PE | ~6 тыс. ₽ | 1–2 с | готовое устройство |
| Мини-ПК с микрофоном | от 5 тыс. ₽ | 0.5–1 с | локальный Whisper |
## Почему не локальный LLM
Замерено: `qwen2.5:3b` на CT160 (2 ядра) отвечает **121 с** на один запрос.
Для диалога не годится. DeepSeek — **1 с** без инструментов, 5–8 с с
несколькими вызовами. Гибрид обязателен: правила → ИИ только когда нужно.
## Куда развивать (по возрастанию сложности)
1. **Память и характер** — уже есть; добавить «профиль семьи» (кто что любит).
2. **Больше действий**: пауза/продолжить в Jellyfin, «что качается»,
«поставь в очередь», «удали просмотренное» — новые инструменты (1–2 дня).
3. **Локальный STT** (faster-whisper small) на CT160 — минус зависимость от
облака, +1–2 с задержки на слабом CPU.
4. **Wake word + постоянно включённый микрофон** — ESP32-сателлит.
5. **Мультирум**: несколько сателлитов, ответ в комнате, где спросили.
6. **Проактивность**: «скачался Интерстеллар — посмотреть?», «вышла новая
серия Кларксона».
7. **Полный контроль медиасервера**: «включи на телевизоре», «перемотай на 20
минут», «продолжи с места» — требует живого TV в HA (сейчас `unavailable`).
+79
View File
@@ -0,0 +1,79 @@
# Перенос устройств из Яндекса в свой контур (23.10)
## Что было
В MQTT висели discovery-конфиги 18 устройств с `unique_id: yandex_*`
(производитель «Yandex Smart Home»): лампы, розетки, увлажнитель,
очиститель, пылесос, телевизоры, приставка, датчики.
**Мост, который их публиковал, умер** — устройства в HA показывали
последнее известное состояние и не управлялись.
## Что сделали
### 1. Нашли рабочий доступ к API Яндекса
Токен `/root/.yandex-token` (аккаунт `maloyakapg`, id 81221846) отвечает
на `https://api.iot.yandex.net/v1.0/user/info`:
* **23 устройства** в 2 домах («Мой дом», «Дом»);
* полные данные: `capabilities`, `properties`, `room`, `household_id`, `type`.
### 2. Написали свой мост
`/opt/hub-core/yandex_bridge.py` + `hub-yandex-bridge.service`:
| Что | Как |
|---|---|
| Опрос состояний | каждые 20 с через `user/info` |
| Публикация | `yandex/<uid>/state`, `/brightness`, `/rgb`, `/value` |
| Команды | слушает `yandex/<uid>/set`, `/brightness_set`, `/rgb_set` |
| Отправка действий | `POST /v1.0/devices/actions` |
| Совместимость | те же `unique_id` и топики, что у старого моста |
Благодаря совместимости **сущности в HA не пришлось заводить заново** —
они сразу стали получать свежие состояния.
### 3. Проверка
```
yandex/yandex_28492e39.../state ON
yandex/yandex_391423d6.../state ON
yandex/yandex_391423d6.../brightness 80
yandex/yandex_458fe93d.../state ON
yandex/yandex_458fe93d.../value 57
```
В HA снова живые: 4 лампы, Приставка, Asia Care (очиститель),
Увлажнитель, Ночник, Розетка, Паспарту (пылесос), бра в коридоре.
## Ограничение: нужен токен с правом записи
`POST /v1.0/devices/actions` отвечает **403 Forbidden** для всех наших
токенов. Чтение разрешено, запись — нет: у токена нет скоупа управления
устройствами.
**Что нужно:** токен Яндекса, выданный с правом управления умным домом.
Как получить:
1. Открыть в браузере (войти под аккаунтом `maloyakapg`):
```
https://oauth.yandex.ru/authorize?response_type=token&client_id=c473ca268cd749d3a8371351a8f2bcbd
```
2. Разрешить доступ.
3. Из адресной строки скопировать `access_token=...` (до `&`).
4. Положить на сервер: `/root/.yandex-iot-token`.
После этого мост заработает на запись: `systemctl restart hub-yandex-bridge`.
## Итог
| Показатель | Значение |
|---|---|
| Устройств Яндекса видно | 23 |
| Сущностей в HA ожило | 12 (лампы, розетки, техника) |
| Управление | ждёт токен с правом записи |
| Зависимость от сторонних мостов | больше нет |
+79
View File
@@ -0,0 +1,79 @@
# Перенос устройств из Яндекса: план по каждому (23.10)
## Что выяснили
Устройств в Яндексе — **23**. Они пришли из трёх источников:
| Источник | Устройства |
|---|---|
| **Яндекс, Zigbee** | Свет в прихожей, Свет в тамбуре (YNDX-00538 — двойное реле) |
| **Яндекс, облако** | Приставка, 3 телевизора, Пульт, Розетка (YNDX-0007), Станции |
| **Xiaomi (Mi Home)** | Лампа коридор (yeelink), Увлажнитель (deerma), Ночник (chuangmi), Контроллер датчиков (lumi), 4 датчика (lumi, miaomiaoce) |
| **Прочие** | Asia Care (Tuya), Паспарту (Dreame) |
## Что уже сделано
Свой мост `yandex_bridge.py` держит **состояния** всех 23 устройств в HA
(лампы, розетки, техника видны и показывают реальные значения).
## Ограничение облака
Команды через API Яндекса возвращают `403 Forbidden`: токен читает, но не
пишет. Проверены три токена, включая присланный с client_id
`c473ca268cd749d3a8371351a8f2bcbd`. Яндекс закрыл запись для этих клиентов.
**Вывод: управление через облако Яндекса недоступно. Нужен локальный путь.**
## План по устройствам
### 1. Zigbee-реле Яндекса — переносятся полностью ✅
`YNDX-00538` **поддерживается Zigbee2MQTT** (файл `yandex.js`, «Double relay»).
Что нужно (по 2 минуты на устройство):
1. Сбросить реле: выключить/включить питание 3 раза подряд (или удержание
кнопки — зависит от модели).
2. В Zigbee2MQTT включить `Permit join` (в веб-интерфейсе).
3. Дождаться появления — устройство определится как Yandex Double relay.
4. Переименовать в HA, перенести автоматизации.
**Итог:** локальное управление без Яндекса, работает при отключённом интернете.
### 2. Yeelight «Лампа коридор» — переносится ✅
В приложении Yeelight включить **LAN Control** для лампы.
Дальше HA найдёт её сам (интеграция `yeelight`, локальный протокол).
### 3. Xiaomi (увлажнитель, ночник, датчики, контроллер) — нужны токены ⚠️
Устройства управляются через Mi Home. Локальный доступ (`xiaomi_miio`)
требует **токен устройства**, который лежит в облаке Xiaomi.
Варианты:
* вход в аккаунт Mi для извлечения токенов (нужны логин/пароль);
* либо включить LAN-режим там, где он есть (у части устройств).
### 4. Tuya (Asia Care) и Dreame (Паспарту) — ключи ⚠️
Нужны local key: у Tuya — через платформу Tuya IoT, у Dreame — через
аккаунт приложения.
### 5. Телевизоры, приставка, станции — остаются как есть
Это либо IR-управление, либо Android TV. Могут быть переведены на
`androidtv` (ADB) — отдельная задача.
## Что это даёт
| После миграции | Эффект |
|---|---|
| Реле и Yeelight | работают локально, без облака |
| Xiaomi | локально после получения токенов |
| Яндекс-облако | остаётся только для розетки YNDX-0007 |
## Порядок действий
1. **Сейчас**: сбросить и подключить 2 реле YNDX-00538 к Zigbee2MQTT.
2. Включить LAN Control у Yeelight — HA подхватит.
3. Решить по Xiaomi: дать доступ к Mi-аккаунту или оставить в облаке.
4. Tuya/Dreame — по желанию, после первых трёх.
+60
View File
@@ -0,0 +1,60 @@
# Яндекс Станции и HA (23.10)
## Что есть
| Колонка | Сущность | Состояние |
|---|---|---|
| Яндекс Лайт | `media_player.yandex_station_lg...4309d886` | работает |
| Яндекс Станция Миди | `media_player.yandex_station_r10njn5001rewk` | работает |
| Яндекс Мини | `media_player.yandex_station_ff98f...` | **unavailable** |
Интеграция: кастомный компонент `yandex_station` 3.22.3 (HACS), вход по
облачной учётке `maloyakapg`.
## Почему «плохо работает»
В логах HA было видно цикл:
```
Яндекс Лайт | Останавливаем локальное подключение
Яндекс Лайт | Возврат в облачный режим
```
То есть интеграция отваливалась от **локального протокола** (порт 1961)
и работала через облако: команды и TTS шли с задержкой, часть — терялась.
После перезагрузки записи интеграции:
```
Лайт | Локальное подключение
Лайт | Обновление токена устройства
Яндекс Лайт => local | {'command': 'setVolume', 'volume': 0.7}
Яндекс Лайт => local | {'command': 'скажи проверка связи'}
```
Локальный режим восстановлен.
## Что нашлось по сети
* В сети есть устройство `192.168.1.211` с MAC **b8:87:6e** — это Яндекс
(порт 1961 открыт).
* `device_tracker` станций показывал старые IP `.35` и `.49` — они не
отвечают (ping и порт 1961 закрыты).
* Второй Яндекс-адрес сканированием не нашёлся — вероятно, Миди в другой
подсети/на 5 ГГц с изоляцией, либо Мини выключена.
## Что сделано
1. Перезагрузка записи интеграции → локальный режим вернулся.
2. Две автоматизации самовосстановления: если колонка `unavailable`
10 минут — `homeassistant.reload_config_entry` + уведомление в хаб.
3. Проверка: `setVolume` и `скажи проверка связи` уходят по локальному
протоколу без ошибок.
## Что нужно от владельца
* **Static DHCP** для колонок в Keenetic (чтобы IP не менялись) — тогда
локальный режим будет стабильным.
* Проверить, включена ли Яндекс Мини (сейчас `unavailable`).
* Если Миди в гостевой сети — перевести в основную (изоляция клиентов
мешает локальному протоколу).
+39
View File
@@ -0,0 +1,39 @@
# Эндпоинт /health
Одна точка для внешнего мониторинга и быстрых проверок.
```bash
curl -s http://127.0.0.1:9120/health | python3 -m json.tool
```
## Ответ
```json
{
"ok": true,
"events": 307,
"services_up": 124,
"services_total": 124,
"services_down": [],
"alerts": 0,
"load": [3.41, 3.11, 4.92],
"disk_root_pct": 22.3
}
```
| Поле | Смысл |
|---|---|
| `ok` | все сервисы живы **и** нет активных алертов |
| `events` | сколько событий в шине хаба |
| `services_down` | список имён упавших (до 10) |
| `alerts` | количество активных алертов в Alertmanager (−1 = недоступен) |
| `load` | средняя нагрузка 1/5/15 минут |
| `disk_root_pct` | занятость корневого диска |
HTTP-код всегда 200, если сам хаб отвечает; решение принимается по
полю `ok` — так удобнее для uptime-мониторинга.
## Ловушка
До 22.10 `/health` отдавал только `{"ok": true, "events": N}` —
проверял лишь доступность базы. Теперь в ответе реальная сводка.
+111
View File
@@ -0,0 +1,111 @@
# Семантический поиск по документам (B-11)
## Что сделано
| Компонент | Где |
|---|---|
| Эмбеддинги | Ollama `nomic-embed-text` (768), CT160:11434 |
| Хранилище | PostgreSQL + pgvector, CT151, база `rag` |
| Таблица | `chunks(source, ref, text, embedding vector(768))`, HNSW-индекс |
| Индексатор | `/opt/hub-core/rag.py` (полный), `rag_priority.py` (быстрый) |
| Ответы | `/rag?q=...` (генерация) и `&mode=find` (поиск) |
## Как работает
1. Документ режется на фрагменты по 2500–3000 символов.
2. Каждый фрагмент превращается в вектор через Ollama.
3. Вектор кладётся в pgvector с уникальным ключом `(source, ref)`.
4. На вопрос: вектор вопроса → ближайшие 5 фрагментов → генерация ответа
с указанием источников.
## Источники (v1)
- `ops/**/*.md` — документация репозитория;
- заметки Memos (SQLite из CT110).
## Проверка
```bash
cd /opt/hub-core
/opt/music-tools/venv/bin/python rag.py ask "как устроен мониторинг Beszel?"
curl -s 'http://127.0.0.1:9120/rag?q=как+устроен+беczel' | head -c 400
```
## Ловушки
1. **Эмбеддинг на CPU медленный**: ~8–20 с на фрагмент при загруженной
машине. Поэтому индексируем крупными кусками (2500–3000 символов),
а не по 1000.
2. **Индексация должна коммитить каждые N фрагментов**, иначе при
прерывании теряется всё (транзакция откатывается).
3. **`psycopg2` требует `client_encoding=utf8`** — без него русский текст
падает с `UnicodeEncodeError`.
4. **`/ask` уже занят** (агентский ответ по медиа), поэтому RAG живёт
на `/rag`.
5. Ollama был привязан к `127.0.0.1`; открыт в LAN через
`OLLAMA_HOST=0.0.0.0` (drop-in в CT160).
## Что дальше
- Добавить Paperless (тексты документов) и Nextcloud (txt/md).
- Инкрементальная индексация по времени изменения файла.
- Вечерний отчёт: «добавлено N фрагментов».
## Режимы работы
| Режим | Запрос | Время | Что делает |
|---|---|---|---|
| Поиск (по умолчанию) | `/rag?q=...` | **14 с** | находит фрагменты, без генерации |
| Ответ | `/rag?q=...` | минуты | поиск + генерация моделью |
**Проверено на живом примере**: вопрос «как устроен Beszel» →
первый результат `ops/ops/BESZEL.md#0` со счётом 0.63.
## Ограничение: генерация на CPU
`qwen2.5:3b` на этой машине генерирует ответ дольше 10 минут при
текущей нагрузке (память в свопе). Поэтому:
- **поиск использовать можно** — он быстрый и полезный;
- **генерацию** — только когда освободится память, либо перейти
на `qwen2.5:0.5b`/`1.5b`.
После работы модель выгружается (`keep_alive=0`), чтобы не держать
1.2 ГБ в памяти.
## Замеры Ollama на этом железе (22.10)
CT160: 2 ядра, 4 ГБ, CPU-only.
| Операция | Результат |
|---|---|
| Обработка промпта | ~45 токенов/с |
| Промпт 1000 токенов | ~22 с только на чтение |
| Генерация 1 токена после этого | до 118 с |
| Эмбеддинг (`nomic-embed-text`) | 8–20 с на фрагмент |
**Вывод**: генерация ответов здесь непрактична. Поиск — работает
и полезен. Поэтому `/rag` по умолчанию делает поиск, а генерация
доступна через `&mode=ask` (для тех случаев, когда можно подождать).
Если понадобится генерация — нужен GPU или модель меньше (0.5b уже
поставлена), либо вынести LLM на отдельную машину.
## Источники (обновлено 22.10)
| Источник | Что | Фрагментов |
|---|---|---|
| `ops/**/*.md` | документация репозитория | **292** |
| Memos | заметки семьи | 0 (заметок пока нет) |
| Paperless | тексты документов | 0 (документов пока нет) |
Источник Paperless добавлен в код (`index_paperless`): как только
в Paperless появятся документы, они попадут в индекс при следующей
переиндексации.
## Переиндексация
- **Еженедельно**: `hub-rag.timer`, воскресенье 04:00, полный проход
`rag.py index` (может идти до часа — это нормально).
- **Вручную**: `cd /opt/hub-core && python rag.py index`.
+15
View File
@@ -53,3 +53,18 @@ SQLite FTS5, `/var/lib/hub-search/index.db`:
серия берётся через `books_series_link`.
3. **FTS не переводит языки**: «нейромант» не найдёт «Neuromancer».
Нужен либо перевод в индексе, либо поиск на языке оригинала.
## Обновление 22.10
В индекс добавлена **документация репозитория** (`ops/**/*.md`):
373 записи + 13 книг. Раньше полнотекстовый поиск находил только книги.
Найдено и исправлено: `c.commit()` стоял **до** вставки markdown-строк,
поэтому они молча терялись при закрытии соединения.
## Изменения 22.10
- **Индексируется документация** `ops/**/*.md` — 373 записи (всего 386 с книгами).
- Исправлен порядок: `commit()` теперь после вставки markdown-строк.
- Ссылка на поиск добавлена на страницу «Моё».
- Хранение архивов конфигов: **14 → 7 дней** (архив вырос до 244 МБ).
+138
View File
@@ -0,0 +1,138 @@
# Русские запросы к англоязычным названиям (23.10)
## Проблема
Пользователь пишет «матрицу», а в системе фильм называется `The Matrix`.
Поиск по подстроке не находил ничего: до этого работали только «дюна»
(русское название в Jellyfin) и «кларксона» (частичное совпадение).
## Решение — два механизма
### 1. Словарь переводов
`/opt/hub-core/data/title_aliases.json`:
```json
{
"the matrix": ["матрица", "матрицу", "матрице"],
"arrival": ["прибытие"],
"interstellar": ["интерстеллар"],
"clarkson's farm": ["ферма кларксона"]
}
```
При сборке каталога каждый алиас добавляется в карточку
(`aliases: ["The Matrix", "матрица", ...]`), и поиск проверяет их все.
Ключ ищется и по полному названию, и по названию без года —
иначе `Foundation (2021)` не находил «основание».
### 2. Транслитерация + нечёткое сравнение
Для заимствований, которых нет в словаре: `транслит(запрос)` сравнивается
с `транслит(название)` через `difflib.SequenceMatcher`, порог 0.72.
```
интерстеллар → interstellar (точное совпадение после транслита)
матриц → matric ≈ matrix (0.83)
```
## Проверка
| Запрос | Найдено |
|---|---|
| матрицу | The Matrix, The Matrix Reloaded |
| интерстеллар | Interstellar |
| прибытие | Arrival |
| чужой | Alien |
| бегущий по лезвию | Blade Runner |
| основание | Foundation |
| пространство | The Expanse |
| мир дикого запада | Westworld |
| дюну | Дюна |
| ферму кларксона | Ферма Кларксона |
Через намерения:
```
«найди матрицу» → find → The Matrix (1999) — в планах
«скачай матрицу» → add → «The Matrix» уже в планах (Radarr/Sonarr)
```
## Ограничения
* словарь **курируемый** (~25 популярных названий) — новые фильмы надо
добавлять вручную;
* переводы («Прибытие» → Arrival) транслитом не решаются, только словарём;
* транслит неточен для сложных случаев (`ё`, `й`, `ц`) — используются
варианты `zh`, `i`, `ts`.
## Как расширять
1. Добавить строку в `title_aliases.json` (ключ — английское название строчными).
2. `python3 /opt/hub-core/media_catalog.py` — пересобрать каталог.
3. Проверить: `curl "http://127.0.0.1:9120/catalog?q=<русский запрос>"`.
---
# Расширение (20:25): 90 названий + управление алиасами
## Что добавлено
| Механизм | Как работает |
|---|---|
| **Словарь** | 90 названий, 114 алиасов (было ~25 названий) |
| **Авто-транслит** | при сборке для каждого названия добавляется транслит-алиас |
| **API `/aliases`** | `GET /aliases?latin=Dune&russian=дюна` — добавить и пересобрать |
| **Команда `!алиас`** | в секретаре, только владелец: `!алиас Dune = Дюна` |
## Проверка добавления алиаса
```
GET /aliases?latin=Dune&russian=дюночка
{"ok": true, "title": "dune", "aliases": ["дюна","дюну","дюны","дюночка"]}
каталог?q=дюночка → Дюна
```
Тестовый алиас после проверки убран, каталог пересобран.
## Важное ограничение
Алиас помогает найти **то, что уже есть в каталоге**. Запрос «оппенгеймер»
не находит ничего не потому, что алиаса нет, а потому что **фильма нет в
Radarr/Sonarr/Jellyfin**.
Проверено по 7 названиям (Oppenheimer, The Boys, Breaking Bad, Game of
Thrones, The Witcher, Black Mirror, Friends) — ни одного нет в каталоге.
## Тест словаря
| Запрос | Найдено |
|---|---|
| матрицу | The Matrix |
| интерстеллар | Interstellar |
| прибытие | Arrival |
| чужой | Alien |
| бегущий по лезвию | Blade Runner |
| дюну | Дюна |
| ферму кларксона | Ферма Кларксона |
| разделение | Severance |
| основание | Foundation |
| пространство | The Expanse |
| мир дикого запада | Westworld |
11 из 11 присутствующих в каталоге — найдены.
## Почему не переносим разбор в профильные боты
Решение владельца и моё согласие: **секретарь остаётся единым входом**.
| Причина | Что даёт |
|---|---|
| Одна точка разбора намерений | нет девяти разных парсеров |
| Одна проверка ролей | `_role_gate` в `dispatch` |
| Один журнал | диалог и решения в `dialog.jsonl` |
| Проще добавлять ботов | бот = набор команд, без своей логики входа |
Профильные боты — **исполнители**, секретарь — **оркестратор**.
Это ровно формулировка плана: «один вход вместо семи».
+33
View File
@@ -0,0 +1,33 @@
# Clarkson's Farm: загрузка и состояние (23.10)
## Задача
Докачать с 3-го сезона (3, 4, 5) — русскоязычные/многоголосые релизы
приоритетно.
## Что сделано
| Сезон | Состояние |
|---|---|
| S03 | ✅ 8 серий, 7.5 ГБ → `/mnt/media/series/Clarkson's Farm (2021)/Season 3` |
| S04 | 🔄 E05, E07 импортированы; E01–E04 в очереди; E06 42%, E08 14% |
| S05 | 🔄 complete-пак 8.91 ГБ, качается (10%) |
## Что пришлось поправить
1. **Jellyfin не видел сериалы вообще**: у него была только библиотека
«Фильмы» (`/media/movies`). Добавлена библиотека **«Сериалы»**
(`/media/series`, тип tvshows) — после этого 8 эпизодов S03 появились.
2. Папка сериала создавалась как `Clarkson's Farm ()` — пустой год.
Исправлено на `Clarkson's Farm (2021)` (Sonarr `moveFiles=true`).
3. Две раздачи висели в `metaDL` (мёртвые торренты) — сняты с очереди
с блокировкой, поиск перезапущен, найдены рабочие релизы:
`AMZN WEB-DL`, `WEB H264-RousingHairyB`.
## Проверка
```bash
curl -s http://192.168.1.123:8085/api/v2/torrents/info | jq -r '.[] | "\\(.name) \\(.progress)"'
ls "/mnt/media/series/Clarkson's Farm (2021)/Season 3"
```
Jellyfin: 1 сериал, 8 эпизодов.
+27
View File
@@ -172,3 +172,30 @@
Документ ведётся в `ops/media/MEDIA.md`, статусы — в `ops/STATUS.md`
с префиксом `M-`.
---
# Сверка 23.10.2026 (источник истины — Plan.md v3 + проверка на живой системе)
Таблица выше — исходный план от 21.10 со статусами «⏳». Ниже фактические
статусы после проверки.
| ID | Факт | Доказательство |
|---|---|---|
| M-01 | ✅ | *arr → прокси CT161, поиск Prowlarr отдаёт 224 результата |
| M-02 | ✅ | qBittorrent найден: CT123:8085, **systemd**, не Docker; Radarr-тест подключения проходит |
| M-03 | ✅ | Dune (2021) 1080p 3.08 ГБ: скачано ~4 мин → импорт в `/data/movies/Dune (2021)/` → Jellyfin видит |
| M-04 | ⚠️ | профиль «Any» пропустил **REMUX 40 ГБ** — нужен ограничивающий профиль |
| M-05…M-08 | ✅ | по Plan.md v3, проверено ранее |
| M-09…M-12 | ✅ | Jellyfin `192.168.1.103:8096` 200, Plex `192.168.1.116:32400` 200 |
| M-13 | ✅ | Bazarr `192.168.1.120:6767` работает (связку с *arr сегодня не перепроверял) |
| M-14 | ✅ | Tautulli `192.168.1.122:8181` отвечает (связку с Plex не перепроверял) |
| M-15 | ✅ | Overseerr `192.168.1.121:5055` отвечает |
| M-16 | ⏳ | 1 фильм в библиотеке, коллекцию не из чего собрать |
| M-17…M-19 | ✅ | по Plan.md v3 |
| M-20 | ⏳ | плагин Trakt 33.0.0.0 установлен и активен, нужны Client ID/Secret |
| M-21…M-24 | ✅ | метрики хранилища, автоочистка, дубли, бэкап конфигов *arr |
| M-25 | ⛔ | отдельный диск — нужно железо |
**Вывод:** 20 задач закрыто, 1 ждёт контента (M-16), 1 ждёт ключей (M-20),
1 требует железа (M-25), 1 требует исправления (M-04).
+103
View File
@@ -0,0 +1,103 @@
# Воспроизведение по команде и навык Алисы (23.10)
## 1. «Включи фильм Дюна» — работает
Проверено вживую:
```
включи фильм Дюна
→ Растягиваем: ищем в Jellyfin → кастуем на «Smart TV Pro»
→ состояние ТВ: playing, приложение «Default Media Receiver»
```
### Как устроено
`/opt/hub-core/play_media.py`:
1. ищет фильм/сериал в Jellyfin по названию (алиасы уже работают: «матрицу»);
2. собирает прямой URL `…/Videos/<id>/stream?static=true&api_key=…`;
3. пробует плееры по очереди — по комнате или по умолчанию;
4. после команды **проверяет**, что состояние стало `playing` (6 попыток × 2 с);
5. если никто не принял — честно говорит, что не смог.
### Комнаты
| Комната | Плееры (по порядку) |
|---|---|
| гостиная / зал | `smart_tv_pro` (Chromecast) → `gostinaia` |
| кухня | `gostinaia_2` → `smart_tv_pro` |
| спальня | `gostinaia_2` |
| даня | `televizor_dania` |
| кабинет | `kabinet_televizor` → `smart_tv_pro` |
### Важно: какие телевизоры играют
| Устройство | Результат |
|---|---|
| **Smart TV Pro** (Chromecast) | ✅ реально играет |
| Гостиная / Гостиная 2 (Hisense/Vidaa) | ⚠️ команду принимают, но URL не проигрывают |
| Телевизор Даня | ⚠️ то же |
Вывод: для реального воспроизведения нужен клиент с поддержкой каста/ADB.
Chromecast на Smart TV Pro — рабочий путь.
## 2. Алиса понимает команды — да, через навык
Алиса — закрытая система: перехватить её микрофон нельзя. Но у неё есть
**навыки**: пользователь говорит «Алиса, запусти навык …», и дальше команды
идут на наш сервер.
### Что уже готово
| Компонент | Значение |
|---|---|
| Вебхук | `https://hub.buryans.ru/alice` (200, проверено извне) |
| Обработчик | `/opt/hub-core/yandex_skill.py` |
| Протокол | Яндекс.Диалоги (`request.command`, `response.text/tts`) |
| Команды | те же, что у бота: фильм, поиск, рекомендации, дом |
| Журнал | `/var/lib/hub-bots/yandex_skill.jsonl` |
| Озвучка | текст чистится от `•`, `**`, переводов строк |
Проверено имитацией запроса Яндекса:
```
что посмотреть → Alien, Arrival, Blade Runner…
кто дома → Роман дома
найди матрицу → The Matrix (1999) — в планах
включи фильм Дюна → Включаю «Дюна» (2021) на «Smart TV Pro»
```
### Что нужно от владельца (10 минут)
1. Открыть консоль Яндекс.Диалогов: `https://dialogs.yandex.ru/developer`
(или через Yandex Cloud → Alice Skills).
2. **Создать навык**:
* имя: `Buryans Hub`;
* **Backend**: `Webhook`, URL `https://hub.buryans.ru/alice`;
* активационное имя: например «Мой сервер» (как обращаться).
3. Сохранить и протестировать в консоли (кнопка «Проверить»).
4. Для семьи: опубликовать (черновик доступен только тестировщикам;
публикация — через модерацию).
После этого:
```
«Алиса, запусти навык Мой сервер»
«включи фильм Дюна»
```
### Альтернатива: Яндекс Умный дом
Если хочется просто «Алиса, включи телевизор» без активации навыка —
есть компонент `yandex_smart_home` (AlexxIT) для HA. Он отдаёт устройства
Яндексу как умный дом. Но произвольные фразы вроде «включи фильм Дюна»
он не понимает — только устройства, сцены и режимы.
**Вывод:** для «включи фильм …» нужен навык; для «включи свет/телевизор» —
Умный дом.
## Ограничения
* навык активируется фразой «запусти навык» (ограничение Яндекса);
* публикация в каталог — модерация, но для себя достаточно черновика;
* воспроизведение ограничено клиентами с кастом (см. таблицу выше).
+44
View File
@@ -0,0 +1,44 @@
# Субтитры: Bazarr (23.10)
## Что настроено
| Параметр | Значение |
|---|---|
| Bazarr | 1.6.2, CT120:6767, БД — Postgres 192.168.1.151/bazarr_db |
| API-ключ | `a65e508a20abfd87ba3dfc93d09bcc05` |
| Профиль языков | **«Русский + English»** (id=1), назначен всем 6 сериалам |
| Провайдеры | **embeddedsubtitles**, **subf2m** — оба `Good` |
| Sonarr/Radarr | подключены, 23 эпизода Clarkson's Farm видны |
## Ловушки (важно)
1. **Bazarr 1.6 хранит настройки в Postgres**, а `config.yaml` перезаписывает
при старте. Правки конфига «на живую» теряются.
*Правильно:* остановить контейнер → поправить `config.yaml` → запустить.
2. **Языковые профили — в БД** (`table_languages_profiles`), API их только читает
(`POST` → 405). Создавать пришлось SQL-ом.
3. **У элементов профиля обязано быть поле `id`.** Без него Bazarr падает
в цикле рестартов с `KeyError: 'id'` в
`fix_languages_profiles_with_duplicate_ids()`.
4. **`hz-nginx` не существует** (см. selfheal) — юнит называется `nginx`.
5. **Квота ключей ядра** (`kernel.keys.maxkeys`) была 2000 — контейнер не
поднимался с `disk quota exceeded`. Поднято до 1 000 000 через
`/etc/sysctl.d/99-keys.conf`.
6. **API задач** (`/api/system/tasks`) принимает `{"taskid": ...}`, но
`wanted_search_missing` отдаёт 500 — поиск «недостающих» через API
в этой версии не работает. Нужен либо UI-запуск, либо правка исходника.
## Что осталось
* включить в UI расписание «Search for missing subtitles» (2 клика) **или**
поправить вызов задачи в исходнике Bazarr;
* проверить, что найденные субтитры русские (сейчас у 15 эпизодов есть записи
субтитров, но язык не определяется — вероятно встроенные EN).
## Проверка
```bash
K=a65e508a20abfd87ba3dfc93d09bcc05
curl -s "http://192.168.1.120:6767/api/providers?apikey=$K"
curl -s "http://192.168.1.120:6767/api/system/languages/profiles?apikey=$K"
```
+37 -14
View File
@@ -1,22 +1,45 @@
# Trakt / Simkl (M-20)
# Trakt: подключение (23.10)
## Состояние: ждёт аккаунт
## Что уже готово
Синхронизация истории просмотров требует OAuth-приложения Trakt.
| Параметр | Значение |
|---|---|
| Плагин Jellyfin Trakt | **33.0.0.0**, статус **Active** |
| Домен Jellyfin | **https://media.buryans.ru** |
| Redirect URI для Trakt | **https://media.buryans.ru/sso/OAuth** |
| Проверка пути | `/sso/OAuth` → 404 (доходит до Jellyfin, не блокируется SSO) |
## Как включить (когда появится аккаунт)
Важно: `jellyfin.buryans.ru` **не существует** (000). В старой заметке был
указан он — это ошибка. Рабочий адрес только `media.buryans.ru`.
1. Создать приложение на https://trakt.tv/oauth/applications
(redirect: `https://jellyfin.buryans.ru/sso/OAuth`).
2. В Jellyfin: Плагины → каталог → **Trakt** → установить.
3. Настройки → Trakt: вставить Client ID и Secret, авторизоваться.
4. Проверить: `curl -s -H "Authorization: MediaBrowser Token=..." \
http://192.168.1.103:8096/Plugins` — плагин в списке.
## Что нужно от владельца
## Альтернатива
1. Аккаунт на trakt.tv (бесплатный).
2. Открыть **https://trakt.tv/oauth/applications** → «New Application».
3. Заполнить:
* **Name**: `Buryans Hub`
* **Redirect URI**: `https://media.buryans.ru/sso/OAuth`
* **Permissions**: не отмечать ничего
4. Нажать **Create App**.
5. Скопировать **Client ID** и **Client Secret**.
6. Передать их безопасно:
* положить в файл и сказать путь — я заберу и сохраню с правами 600;
* либо прислать в чат (потом сменим секрет).
Simkl-плагин работает так же, но требует свой ключ.
Куда сохраняю: `/root/.trakt-id` и `/root/.trakt-secret` (chmod 600).
## Почему не сделано сейчас
## Что сделаю после получения
Нужен ваш аккаунт и подтверждение в браузере — автоматически не пройти.
1. Пропишу ключи в конфиг плагина Jellyfin через API.
2. Перезапущу Jellyfin, проверю статус плагина.
3. Владелец подтверждает вход через ссылку `https://media.buryans.ru/sso/OAuth`
(там будет код от Trakt — его надо вставить в настройки плагина).
4. Проверю, что просмотры уходят в Trakt.
## Ловушки
* Redirect URI должен **точно** совпадать с тем, что в приложении Trakt —
иначе Trakt откажет.
* Jellyfin не за прокси-авторизацией: `/web/` отдаёт 200, `/` редиректит
на `/web/`, значит OAuth-возврат не перехватится.
* Плагин уже активен — заново ставить не нужно.
+56
View File
@@ -0,0 +1,56 @@
#!/bin/bash
# 01_prepare_disk.sh — разметка и форматирование нового диска под медиатеку.
# Использование: 01_prepare_disk.sh /dev/sdX [--apply]
# Без --apply только показывает план (ничего не меняет).
set -uo pipefail
DEV="${1:-}"
APPLY="${2:-}"
LABEL="media"
if [ -z "$DEV" ] || [ ! -b "$DEV" ]; then
echo "устройство не найдено: ${DEV:-<пусто>}"
echo "доступные диски:"
lsblk -dno NAME,SIZE,MODEL | sed 's/^/ /'
exit 1
fi
echo "=== ПЛАН ==="
echo "диск: $DEV"
lsblk -dno NAME,SIZE,MODEL "$DEV" | sed 's/^/ /'
echo "схема: GPT, один раздел ${DEV}1, ext4, метка $LABEL"
echo "монтирование: /mnt/media (новый диск станет медиатекой)"
if [ "$APPLY" != "--apply" ]; then
echo
echo "режим проверки. Для применения: $0 $DEV --apply"
exit 0
fi
echo
echo "=== ПРИМЕНЕНИЕ ==="
MOUNTED=$(lsblk -no MOUNTPOINT "$DEV" | grep -v '^$' | head -1 || true)
if [ -n "$MOUNTED" ]; then
echo "ОСТАНОВ: диск уже смонтирован в $MOUNTED — отмонтируйте сначала"
exit 1
fi
if command -v parted >/dev/null 2>&1; then
parted -s "$DEV" mklabel gpt
parted -s "$DEV" mkpart primary ext4 0% 100%
elif command -v sgdisk >/dev/null 2>&1; then
sgdisk --zap-all "$DEV" >/dev/null
sgdisk --new=1:0:0 --typecode=1:8300 "$DEV" >/dev/null
else
echo "ОСТАНОВ: нет ни parted, ни sgdisk"
exit 1
fi
partprobe "$DEV" 2>/dev/null || true
sleep 2
PART="${DEV}1"
[ -b "$PART" ] || PART="${DEV}p1"
[ -b "$PART" ] || { echo "раздел не появился"; exit 1; }
mkfs.ext4 -L "$LABEL" -m 1 "$PART"
echo "готово: $PART отформатирован, метка $LABEL"
blkid "$PART"
+39
View File
@@ -0,0 +1,39 @@
#!/bin/bash
# 02_copy_media.sh — копирование медиатеки на новый диск (без простоя).
# Использование: 02_copy_media.sh /mnt/new-media
set -uo pipefail
NEW="${1:-}"
SRC="${SRC:-/mnt/media}"
if [ -z "$NEW" ] || ! mountpoint -q "$NEW"; then
echo "укажите смонтированную точку нового диска (например /mnt/new-media)"
exit 1
fi
NEED_KB=$(du -sk "$SRC" 2>/dev/null | cut -f1)
FREE_KB=$(df -k "$NEW" | tail -1 | awk '{print $4}')
echo "=== ПРОВЕРКА МЕСТА ==="
echo " нужно: $((NEED_KB/1024)) МБ, свободно: $((FREE_KB/1024)) МБ"
if [ "$FREE_KB" -lt "$NEED_KB" ]; then
echo " ОСТАНОВ: на новом диске недостаточно места"
exit 1
fi
echo "=== КОПИРОВАНИЕ ==="
echo "откуда: $SRC ($(du -sh "$SRC" 2>/dev/null | cut -f1))"
echo "куда: $NEW ($(df -h "$NEW" | tail -1 | awk '{print $4}') свободно)"
rsync -aH --info=progress2 --exclude 'downloads/*' "$SRC/" "$NEW/"
echo
echo "=== ПРОВЕРКА ==="
a=$(du -sb "$SRC" 2>/dev/null | cut -f1)
b=$(du -sb "$NEW" 2>/dev/null | cut -f1)
echo " источник: $a байт"
echo " копия: $b байт"
if [ "$a" -gt 0 ] && [ "$b" -gt 0 ] && [ "$a" -le "$b" ]; then
echo " размеры сходятся"
else
echo " ВНИМАНИЕ: размеры отличаются — проверить вручную"
fi
+99
View File
@@ -0,0 +1,99 @@
#!/bin/bash
# 03_switch.sh — переключение медиатеки на новый диск.
# Останавливает сервисы, делает финальную синхронизацию, меняет fstab,
# монтирует, запускает сервисы и проверяет. При ошибке — откат.
# Использование: 03_switch.sh /dev/sdX1
set -uo pipefail
PART="${1:-}"
NEW_UUID=""
OLD_MOUNT="${OLD_MOUNT:-/mnt/media}"
NEW_MOUNT="${NEW_MOUNT:-/mnt/media-new}"
FSTAB="${FSTAB:-/etc/fstab}"
BACKUP="${FSTAB:-/etc/fstab}.bak-$(date +%Y%m%d_%H%M%S)"
SERVICES="${SERVICES:-jellyfin sonarr radarr prowlarr bazarr overseerr navidrome kavita}"
if [ -z "$PART" ] || [ ! -b "$PART" ]; then
echo "укажите раздел нового диска: 03_switch.sh /dev/sdX1"
exit 1
fi
NEW_UUID=$(blkid -s UUID -o value "$PART")
[ -n "$NEW_UUID" ] || { echo "у раздела нет UUID"; exit 1; }
echo "=== ПОДГОТОВКА ==="
mkdir -p "$NEW_MOUNT"
mountpoint -q "$NEW_MOUNT" && umount "$NEW_MOUNT"
mount "$PART" "$NEW_MOUNT" || { echo "не смог смонтировать"; exit 1; }
echo "новый диск смонтирован: $NEW_MOUNT ($(df -h "$NEW_MOUNT" | tail -1 | awk '{print $4}') свободно)"
SRC_BYTES=$(du -sb "$OLD_MOUNT" 2>/dev/null | cut -f1)
if [ "${SRC_BYTES:-0}" -lt 1048576 ]; then
echo "ОСТАНОВ: источник $OLD_MOUNT пуст или не смонтирован (${SRC_BYTES:-0} байт)"
exit 1
fi
echo " источник: $((SRC_BYTES/1048576)) МБ"
echo
echo "=== ФИНАЛЬНАЯ СИНХРОНИЗАЦИЯ ==="
echo "останавливаю сервисы, которые пишут в медиатеку"
for s in $SERVICES; do
pct list | awk '$3=="running"{print $1}' | while read -r ct; do
pct exec "$ct" -- sh -c "docker stop $s 2>/dev/null" 2>/dev/null
done
done
rsync -aH --delete --info=progress2 "$OLD_MOUNT/" "$NEW_MOUNT/"
DST_BYTES=$(du -sb "$NEW_MOUNT" 2>/dev/null | cut -f1)
echo "синхронизация завершена: источник $((SRC_BYTES/1048576)) МБ, копия $((DST_BYTES/1048576)) МБ"
if [ "${DST_BYTES:-0}" -lt $((SRC_BYTES * 98 / 100)) ]; then
echo "ОСТАНОВ: копия меньше источника более чем на 2% — не переключаю"
exit 1
fi
echo
echo "=== ПЕРЕКЛЮЧЕНИЕ FSTAB ==="
cp "$FSTAB" "$BACKUP"
echo "резервная копия: $BACKUP"
# убираем старые записи /mnt/media, добавляем новую по UUID
sed -i "\|$OLD_MOUNT|d" "$FSTAB"
echo "UUID=$NEW_UUID $OLD_MOUNT ext4 defaults,noatime 0 2" >> "$FSTAB"
umount "$NEW_MOUNT" 2>/dev/null
umount "$OLD_MOUNT" 2>/dev/null
if ! mount "$PART" "$OLD_MOUNT"; then
echo "ОШИБКА монтирования нового диска — откат"
cp "$BACKUP" "$FSTAB"
OLD_DEV=$(grep -E "[[:space:]]$OLD_MOUNT[[:space:]]" "$BACKUP" | awk '{print $1}' | head -1)
if [ -n "$OLD_DEV" ]; then
OLD_UUID=$(echo "$OLD_DEV" | sed 's/^UUID=//')
mount "UUID=$OLD_UUID" "$OLD_MOUNT" 2>/dev/null || mount -a 2>/dev/null
fi
exit 1
fi
echo "новый диск смонтирован в $OLD_MOUNT"
echo
echo "=== ПРОВЕРКА ==="
df -h "$OLD_MOUNT" | sed 's/^/ /'
ls "$OLD_MOUNT" | head -5 | sed 's/^/ /'
echo
echo "=== ЗАПУСК СЕРВИСОВ ==="
for s in $SERVICES; do
pct list | awk '$3=="running"{print $1}' | while read -r ct; do
pct exec "$ct" -- sh -c "docker start $s 2>/dev/null" 2>/dev/null
done
done
sleep 10
echo
echo "=== ИТОГ ==="
curl -s --max-time 20 http://127.0.0.1:9120/status.json 2>/dev/null \
| /opt/music-tools/venv/bin/python -c "
import json,sys
d=json.load(sys.stdin)
print(f\" сервисов: {d.get('up')} из {d.get('total')}\")
" 2>/dev/null || echo " статус хаба недоступен"
echo " откат fstab: cp $BACKUP $FSTAB && umount $OLD_MOUNT && mount $OLD_MOUNT"
+32
View File
@@ -0,0 +1,32 @@
#!/bin/bash
# 04_rollback.sh — возврат на старую медиатеку после неудачного переключения.
# Использование: 04_rollback.sh /etc/fstab.bak-YYYYMMDD_HHMMSS
set -uo pipefail
BACKUP="${1:-}"
MOUNT="${MOUNT:-/mnt/media}"
if [ -z "$BACKUP" ] || [ ! -f "$BACKUP" ]; then
echo "укажите файл резервной копии fstab, например:"
ls -1t /etc/fstab.bak-* 2>/dev/null | head -3 | sed 's/^/ /'
exit 1
fi
echo "=== ОТКАТ ==="
echo "1. восстанавливаю fstab из $BACKUP"
cp "$BACKUP" /etc/fstab
echo "2. отмонтирую текущую медиатеку"
mountpoint -q "$MOUNT" && umount "$MOUNT"
echo "3. монтирую по старой записи"
mount "$MOUNT" 2>/dev/null || mount -a || { echo "ОШИБКА: не смог смонтировать старую медиатеку"; exit 1; }
echo "4. проверка:"
df -h "$MOUNT" | sed 's/^/ /'
ls "$MOUNT" | head -5 | sed 's/^/ /'
echo
echo "5. запускаю сервисы"
for s in jellyfin sonarr radarr prowlarr bazarr overseerr navidrome kavita; do
pct list | awk '$3=="running"{print $1}' | while read -r ct; do
pct exec "$ct" -- sh -c "docker start $s 2>/dev/null" 2>/dev/null
done
done
echo "готово. Проверьте: curl -s http://127.0.0.1:9120/status.json | head -c 200"
+78
View File
@@ -0,0 +1,78 @@
# Первая боевая миграция: 1 ТБ SSD → медиатека
## Проверка совместимости (факты)
| Параметр | Значение |
|---|---|
| Плата | **H610D4-P1/TPM** (десктопная mATX) |
| SATA-контроллер | **есть** — Intel Alder Lake-S PCH SATA [AHCI] |
| Текущий диск | один NVMe 476.9 ГБ |
| Разметка | LVM: root 111 ГБ, data-pool 348.8 ГБ, backups 100 ГБ |
| Свободно в data-pool | ~78 ГБ |
**Вывод: 2.5″ SATA SSD подходит.** Проверить в корпусе:
1. свободный SATA-порт на плате;
2. свободный разъём питания SATA от БП;
3. место для крепления 2.5″.
## Сценарий (рекомендуемый): диск = медиатека
```
NVMe 477 ГБ → система, контейнеры, базы
SSD 1 ТБ → /mnt/media (фильмы, сериалы, музыка, книги, загрузки)
```
Без переустановки. Простой: 10–20 минут (остановка медиасервисов на время
финальной синхронизации).
## Порядок (скрипты в этой папке)
| Шаг | Скрипт | Что делает |
|---|---|---|
| 1 | `01_prepare_disk.sh /dev/sdX` | план разметки (без изменений) |
| 1а | `01_prepare_disk.sh /dev/sdX --apply` | GPT + раздел + ext4 + метка `media` |
| 2 | `02_copy_media.sh /mnt/new-media` | копирование без простоя, с проверкой места |
| 3 | `03_switch.sh /dev/sdX1` | финальная синхронизация, fstab, запуск, проверка |
| 4 | `04_rollback.sh /etc/fstab.bak-…` | откат на старый диск |
### Встроенные защиты
* проверка свободного места перед копированием;
* отказ при пустом источнике;
* сверка размеров после синхронизации (порог 2%);
* резервная копия `/etc/fstab` с меткой времени;
* автоматический откат, если новый диск не смонтировался.
## Проверено в песочнице
Все четыре шага прогнаны на loop-устройствах:
```
01: /dev/loop2p1 отформатирован, метка media ✅
02: нужно 35 МБ, свободно 448 МБ → размеры сходятся ✅
03: источник 35 МБ, копия 35 МБ → смонтирован новый диск ✅
04: откат → смонтирован старый диск, данные на месте ✅
```
Найдено и исправлено в процессе:
1. `rsync` не должен по умолчанию брать живой `/mnt/media` — добавлен `SRC`;
2. `mount` не должен зависеть от пути fstab — монтируем по устройству;
3. нет `parted` на хосте — добавлен `sgdisk`-фолбэк;
4. не было защиты от пустого источника — добавлена.
## Что будет после миграции
* освобождается ~80 ГБ на системном диске;
* медиатека получает 1 ТБ вместо 44 ГБ;
* скорость SATA SSD для медиа достаточна (последовательное чтение 400–500 МБ/с).
## Риски
| Риск | Смягчение |
|---|---|
| Диск не определяется | проверить кабель/питание до разметки |
| Копия неполная | сверка размеров, отказ от переключения |
| Сервисы не поднялись | `04_rollback.sh` возвращает старую медиатеку |
| Потеря данных | старый каталог не удаляется до проверки |
Loaded 100 of 153 files, more files were not shown because too many files have changed in this diff. Show more