This website requires JavaScript.
Explore
Help
Sign In
infrastructure
/
buryan-infra
Watch
2
Star
0
Fork
0
Code
Issues
29
Pull Requests
3
Actions
Packages
Projects
Releases
1
Wiki
Activity
Files
main
buryan-infra
/
ops
/
audits
T
Add File
New File
Upload File
Apply Patch
Copy Permalink
Download directory as ZIP
Download directory as TAR.GZ
Delete Directory
History
root
d4c44b97af
lint / hygiene (push)
Failing after 28s
Details
standard / check (push)
Successful in 10s
Details
chore(audit): auto-snapshot and CHANGELOG update 2026-11-21
...
- LXC running: 30/30 - Alerts (24h): 0 - Disk PVE: 43%
2026-11-21 09:00:09 +03:00
..
eval
/2026-11-17
[EVAL] Финальный прогон: 46/48 (96%) строго, 47/48 после разбора. Политика книг/цен в AGENTS.md (книги 6/6), скоринг исправлен, Hermes weekly active (порог 45), baseline в ops/audits/eval/2026-11-17. 2 медиа-сценария исключены: OpenClaw state-lock после 80-108с (баг стабильности, не качества). Осталось: починить долгие turn'ы, ужесточить запрет прогнозов, прогнать 50/50
2026-11-17 20:30:18 +03:00
2026-11-12-deep-audit.md
[AUDIT] Глубокий read-only аудит после LLM: скрипт deep_audit.py (12 разделов) + after-llm-audit.sh, запуск только когда очередь LLM пуста (Hermes каждые 30 мин, раз в сутки). Первый прогон: hub-db-dumps, hub-rag, hub-cert-sync в failed; память 12/15 ГБ + swap 17 ГБ (kswapd, task blocked); NVMe Critical Warning Temperature; 99 записей write access unavailable. Плюс гигиена: 49 заданий Hermes, старые .bak, порты NFS наружу. Миграция прогресса LLM: 25778 записей слиты, остаток 344 вместо 26055
2026-11-12 18:03:19 +03:00
AUDIT-LEDGER-2026-11-17.md
[TOOLS] Audit Ledger: двойная запись аудита Tool Gateway в SQLite + Postgres hermes.tool_audit (actor/tool/args/result/ok/ms), добавлен инструмент audit.recent; проверено: запись owner|audit.recent|t|91, audit.recent читает из Postgres. Дальше: миграция старых записей, ежедневный отчёт, стоимость, per-user токены
2026-11-17 18:29:15 +03:00
AUTOMATION-LLM-AUDIT-2026-11-16.md
[AUDIT] Автоматизация и LLM: Hermes — 51 задание, покрытие широкое, но LLM не встроен в операционный контур; n8n мёртв с 20.10 (10006 исполнений, 9922 ошибки, Health Monitor 9681, TLS-ошибки), хотя 7 воркфлоу числятся active; LLM: DeepSeek V4.1-Flash в диалоге/RAG/дайджестах, qwen2.5 только ночью; отчёты weekly/trust/research без LLM. 109 расписаний (51 Hermes + 16 cron + 42 cron.d), approvals=0. План: решить n8n, LLM-триаж алертов, LLM-RCA, ночной разбор журналов, цикл подтверждений, унификация расписаний
2026-11-16 12:11:02 +03:00
AVICON-DISTRIBUTOR-2026-11-14.md
[LLM] Avicon найден: avikon.ru — парковка домена, avikon.com — польская компания без Hitrolink, а avicon.ru — «Официальный дистрибьютор AV-оборудования и ВКС». На странице бренда 8 товаров и 9 PDF (ET700, ET800, VB600, TP350, ASP35, XT500 + 2 руководства). Добавлены в queue-hitrolink-dist.jsonl с пометкой official:false, source_host avicon.ru (очередь дистрибьютора теперь 32: 23 snk-s + 9 avicon). Проверено: HTI-ASP35-C.pdf дал 9 фактов, пометка источника стоит
2026-11-14 17:50:39 +03:00
BACKUP-VERIFY-FULL-2026-11-15.md
[BACKUPS] Проверка копий: полная сверка всех баз вместо 7. v1 не работала — временный кластер запускался отдельными pct exec и умирал между вызовами; теперь внутренний скрипт в CT151, дамп через stdin, весь цикл в одном процессе. Результат прогона: баз 47, совпало 47, расхождений 0. Заодно notify.py получил --priority high (иначе отчёт уходил в очередь из-за политики «только критическое») — отчёт приходит в ALERT от @secretary
2026-11-15 23:40:49 +03:00
BOTS-LOCAL-HS-2026-11-16.md
[BOTS] Боты переведены на локальный Synapse: hub/main.py читал MATRIX_HS (не задан) → всегда публичный домен, а он изнутри хоста упирается в DPI/hairpin (SSL-handshake timeout): старт 2,5 мин, health 9110 недоступен, смоук падал, отправка могла теряться. Теперь HS_LOCAL предпочтительнее. Проверено: health 9110 — 9 ботов, token_failures пусто, старт мгновенный
2026-11-16 17:11:58 +03:00
CF-TUNNEL-SYNC-2026-11-16.md
[VPN] Быстрый Cloudflare-туннель: cf_tunnel_sync.py — читает URL с VDS по WG, при смене обновляет cf-host.txt и 6 профилей (outbound proxy-cf VLESS+WS+TLS, путь /buryan-cf), включает в observatory и balancer leastPing, проверяет 400 и уведомляет в ALERT; Hermes каждые 5 мин. Проверено ротацией: restart cf-tunnel → новый URL → 6 профилей обновлены, ALERT пришёл. Профили в .gitignore. Ловушки: SSH дом→VDS блокируется, доступ по WG; конфиг xray на VDS /usr/local/etc/xray/config.json
2026-11-16 20:13:24 +03:00
COMBINE-LLM-AUDIT-20261118-1139.md
[COMBINE] LLM-аудит: 141 записей каталога, 20 дублей, нет vendor/domain/protocols, группа SIP/H.323 не выделяется, 8/9 сервисов 404, LLM-факты вне каталога
2026-11-18 11:40:54 +03:00
COMBINE-LLM-AUDIT-20261118-1140.md
[COMBINE] LLM-аудит: 141 записей каталога, 20 дублей, нет vendor/domain/protocols, группа SIP/H.323 не выделяется, 8/9 сервисов 404, LLM-факты вне каталога
2026-11-18 11:40:54 +03:00
COMBINE-LLM-AUDIT-20261118-1305.md
[COMBINE] Запущен LLM-аудит через VDS; недельное задание combine-audit
2026-11-18 13:06:00 +03:00
COMBINE-LLM-AUDIT-20261118-1306.md
[A-38] Снимок состояния 2026-11-19
2026-11-19 09:00:25 +03:00
CONVENIENCE-2026-11-17.md
[PLAN] Удобство взаимодействия: секретари, календарь, фото, Android. Факты: 9 ботов, секретарь знает 12 намерений; Nextcloud 35 с Calendar 6.6.4 и 8 пользователями; Immich пустой (0 фото/альбомов/людей), API живой; Android не интегрирован; OpenClaw в инфраструктуре не найден. Предложен разговорный слой (tools+политика+память+аудит), календари на Nextcloud CalDAV + DAVx5, фото через Immich (upload+ML+альбомы+дубликаты), статус медиа; работа — отдельный спринт. Спорные: OpenClaw как второй мозг, 3b для диалога, старт с фото
2026-11-17 12:30:03 +03:00
DEEP-AUDIT-20261117-2046.md
[NIGHT] Остальные задачи: alert digest+analysis, memory/USER.md, onboarding, redaction watcher, fallback notice, task backlog, deep audit v2
2026-11-17 20:49:18 +03:00
DEEP-AUDIT-20261117-2048.md
[NIGHT] Остальные задачи: alert digest+analysis, memory/USER.md, onboarding, redaction watcher, fallback notice, task backlog, deep audit v2
2026-11-17 20:49:18 +03:00
DIGEST-BACKUPS-2026-11-17.md
[OPS] Утренняя сводка: добавлены Postgres (соединения), LLM за сутки (вызовы/фолбэк/модели) и RAG (чанки/свежесть); в llm-fallback.log появилась метка ts; overlayfs-шум отфильтрован. Критично: restic-скрипты ходили на мёртвый Tailscale 100.64.0.2 — офсайт-копии не обновлялись с 8 ноября, photos-backup падал каждую ночь. Исправлено на WG 10.88.0.1 в restore-test/photos-backup/offsite-backup/offsite_verify (+копия в репо). Проверено: restore-test 5/5, photos rc=0 (219 МБ), restic check без ошибок
2026-11-17 10:51:01 +03:00
EVAL-2026-11-17.md
[EVAL] Secretary Eval 50 сценариев: 42/50 строго, 48/50 после разбора (6 ложных: температура, напоминание, рекомендация фильма, 3 injection-отказа). Реальные: книги (агент готов скачать с BigLibrary) и цена билета (оценки без источника). OpenClaw дважды уходил в state-lock, восстановлен из doctor-бэкапа 11:11, история после 11:11 потеряна (БД сохранена), конфиг Polina/MCP цел. Харнесс: preflight/health/retry.
2026-11-17 20:10:12 +03:00
EVAL-FINAL-2026-11-17.md
[EVAL] Финальный прогон: 46/48 (96%) строго, 47/48 после разбора. Политика книг/цен в AGENTS.md (книги 6/6), скоринг исправлен, Hermes weekly active (порог 45), baseline в ops/audits/eval/2026-11-17. 2 медиа-сценария исключены: OpenClaw state-lock после 80-108с (баг стабильности, не качества). Осталось: починить долгие turn'ы, ужесточить запрет прогнозов, прогнать 50/50
2026-11-17 20:30:18 +03:00
EVENING-SPRINT-2026-11-17.md
[SPRINT] Вечерний спринт: Tool Gateway 16 инструментов (ha.search, media.search/request, hub.service_detail, alerts.active, backup.status), MCP обновлён, selfcheck 24/24. LLM: CPU-тюнинг 84 ток/с (thread12/batch1024), llama.cpp CPU 81.9 — не быстрее; iGPU заблокирован render-группой, Ollama без GPU. Безопасность: пароль biglibrary из чата удалён (redaction), нужна смена; автозагрузка с biglibrary не встраивается. Открыто: свет (неясная сущность), Jellyfin 401, media.request 400
2026-11-17 18:06:08 +03:00
HANG-2026-11-13.md
[HOME] Разбор зависания 13.11: хост встал в I/O. Мониторы замолчали в 06:18 (интервалы выросли с 1 до 3-4 мин), ночной отчёт: 13 сбоев TLS в окне 02:12-02:48 (бэкапы), шлюз 1. SMART чистый: HDD Reallocated=0, NVMe без critical warning. Причина: hub-archive-copy.timer 04:10 копирует 246 ГБ на SMR-диск. Исправлено: IOSchedulingClass=idle + IOWeight=20 для 4 бэкап-юнитов, dirty_ratio 5/10, softdog + RuntimeWatchdogSec=60. Восстановлено 30/30 CT, Matrix+SSO, hub 200, боты 9
2026-11-13 11:23:00 +03:00
HITROLINK-DISTRIBUTOR-2026-11-13.md
[LLM] Hitrolink: даташиты с дистрибьютора snk-s.ru с пометкой источника. Собрано 23 PDF в queue-hitrolink-dist.jsonl, каждая запись: official=false, source_kind=distributor, source_host=snk-s.ru. Диспетчер пишет в результаты блок source {kind, official:false, requires_confirmation:true, host}. Исправлены 3 ловушки: .pdf с query string не распознавался; URL с пробелами/кириллицей не качался (quote); у вендора hitrolink-dist не было токенов -> skip; пометка терялась, т.к. результаты пишет диспетчер. Проверено: 4/23, пометка у всех, даташит дал факты
2026-11-13 21:24:31 +03:00
HITROLINK-OEM-HITRY-2026-11-14.md
[LLM] Найден официальный производитель Hitrolink — Hitry (浙江华创视讯, hitry.com): совпадают 8 моделей (XC800, XC600, XC300, ET700, XT500, XT300, UC500, VB600). Dahua проверен и НЕ подходит: в их каталоге конференц-систем ни одной модели из линейки. PDF официально не публикуются (hitry.com/product/download, /about/download, /service — без файлов). Создана очередь производителя queue-hitrolink-oem.jsonl (8 карточек, official:true, source_kind:oem, requires_confirmation:false) — уже даёт факты. Диспетчер теперь пишет source и для официальных страниц. Дистрибьюторская очередь: 32 PDF с пометкой
2026-11-14 22:05:54 +03:00
HITROLINK-QUEUE-2026-11-13.md
[LLM] Добавлен вендор Hitrolink: vendor_queue.py (hitrolink.tech + hitrolink.com.ru + hitrolink.com), очередь 162 адреса (105 .tech, 57 .com.ru), задание в jobs.yaml (weight 1, 3B). Две ловушки: DOC_HINT не матчил slug-и магазина (добавил hitrolink_), VENDOR_TOKENS не знал вендора -> всё уходило в skip (добавил токены, skip сброшен). Проверено: ok +11 и +9 фактов (power_w 15, poe_ports 1, poe_budget_w 15). Даташитов PDF на официальных сайтах нет: на .tech только картинки, .com.ru/downloads 403 (дилерский), у перекупщиков есть, но это не официальный источник
2026-11-13 16:48:54 +03:00
JELLYFIN-FIX-2026-11-17.md
[TOOLS] Jellyfin починен: 401 был из-за заголовка (нужен Authorization: MediaBrowser Token=...), создан ключ tool-gateway в ApiKeys (бэкап БД), media.recent переведён на правильный заголовок и отдаёт 6 фильмов. Осталось: per-user токены, Yandex-мост, iGPU
2026-11-17 18:34:03 +03:00
LLM-ACCEL-TRACK-2026-11-17.md
[LLM] Отдельный трек ускорения локальной LLM: скрипт ops/scripts/llm_lab.py (read-only замеры prefill/gen для моделей и размеров промпта, JSONL + summary в /var/lib/llm-lab), смоук: 300 токенов 4.1с, 2000 — 28.2с prefill (64-75 т/с), 14k ≈ 375с. Бэклог: облегчить промпт OpenClaw, num_batch/num_thread, кэш префикса, выбор модели/кванта, GPU, гибрид локально/DeepSeek. В текущих задачах не участвует
2026-11-17 15:29:24 +03:00
LLM-CAPABILITY-RESULTS-2026-11-17.md
[LLM] Тесты возможностей LLM: локальная qwen2.5:3b с few-shot — интент 9/10, слоты 4/4, факты 3/4, отказы 3/3; DeepSeek 10/10, 4/4, 4/4, 3/3. Провал 2/10 был из-за промпта, не модели. Добавлен ops/scripts/llm_capability.py (21 задача, 4 класса). Черновик протокола: классификация локально -> политика -> детерминированный инструмент / локальная LLM / DeepSeek только для сложного; аудит и метрика экспозиции
2026-11-17 16:02:06 +03:00
LLM-COMBINE-STATUS-2026-11-13.md
[LLM] Статус: очереди закрыты — yealink 25873/25885 (осталось 12 в конце), vinteo 71, logitech 356, iva 13, poly 44, poly-pdf 8. Найдена причина 24% empty: extract_text брал __NUXT_DATA__ (навигация с UUID) вместо статьи; исправлено — сначала видимая статья без nav/header/footer, проверено: 9055 символов статьи, модель выдала реальные факты (auto_linekeys.enable, account.X.number_of_linekey). Вторая ловушка: на PDF-обёртках модель выдумывает Pageviews/Downloads — нужен фильтр. Комбайн: все 10 служб активны, rules 1753, hubs 30, notes 47, tiers 112. Главное: llm_merged=9 — факты в правила не сливаются
2026-11-13 16:38:19 +03:00
LLM-ROADMAP-2026-11-16.md
[PLAN] Дорожная карта: все фазы 0-5 закрыты, добавлены три пункта и спринт-самопроверка; перечислено, что осталось (качество RCA, VPN, задачи)
2026-11-16 18:26:41 +03:00
LLM-TOOL-AUDIT-2026-11-17.md
[LLM] LLM-аудит Tool Gateway выполнен OpenClaw за 51с: каталог ~55 инструментов по 10 группам, принципы (идемпотентность, секреты на gateway, аудит), P0/P1/P2, список «чего не делать» и ограничения на облачную LLM. Сохранено с ревью: 55 — не цель, практический предел 15-20; часть сервисов требует проверки; мой P0: hub.service_detail, alerts.active, uptime.summary, backup.status, media.search/request, ha.search + allowlist
2026-11-17 16:50:56 +03:00
LOGS-ANALYSIS-2026-11-15.md
[OPS] Анализ логов: главная проблема — Postgres упирался в max_connections=100 (тысячи 'too many clients' в 04:00-07:00, 492 события в Hermes за сутки), из-за этого падал cron-бэкап Matrix с 7 октября и второй контур. Исправлено: max_connections 100→200, idle_session_timeout 15min, idle_in_transaction 5min, память CT151 2→3 ГБ, Postgres перезапущен, сервисы 200/74-0. Matrix-бэкап прогнан вручную — 665 МБ, ок. Проверено: 0 failed units, Synapse 0 ошибок, сертификаты 35 дней, restore-тест Passed 5. Внимание: verify-backups покрывает 7 из 48 баз, zram 100%, /mnt/backups 76%, VPN-волны 27/138
2026-11-15 22:59:35 +03:00
MATRIX-BOTS-AUDIT-2026-11-15.md
[MATRIX] Алерты переведены на секретаря по решению владельца: @secretary приглашён в ALERT-комнату, ALERT_TOKEN = токен секретаря, политика — в чат только high/critical (normal/low в журнал и очередь). Побочный эффект: секретарь отвечал шаблоном в ALERT на сообщения @bot_alert — добавлен BOT_IGNORE_ROOMS в matrix.py и hub-bots.service.d. Проверено: normal queued, high sent от @secretary, новых шаблонных ответов после фикса 0
2026-11-15 22:54:49 +03:00
N8N-AUDIT-ARCH-2026-11-17.md
[AUDIT] n8n: полный аудит платформы и архитектура. Факты: n8n 2.45.5 (latest, не закреплён), 106 МБ БД, 10006 исполнений (9922 error/84 success), 2 кредов, 4 активных воркфлоу с auth=none и inline-секретами, error workflow и export в git нет, prune нет, 27 дней тихой смерти. Позиция: n8n — интеграционный рантайм, а не нервная система; сначала P0 (watchdog, error workflow, export, auth вебхуков, секреты в credentials, pin версии, prune), потом P1 (Gitea→n8n, медиа-импорт, HA→ALERT). P2 спорные (Alert→контекст дублирует hub RCA). Бэкапы проверены: БД n8n в pg_dump_all, ключ шифрования в restic pve-code
2026-11-17 12:01:09 +03:00
N8N-CONVENIENCE-MAP-2026-11-17.md
[AUDIT] n8n: карта удобства и предел. Ответ: P1 - не максимум возможностей; технически можно почти всё, но практический предел 4-6 потоков, где событие вызывает цепочку в 2+ системах. Таблица 15 кандидатов с вердиктами (Д/М/Н), портфель удобства: медиа-цикл, Gitea, HA->ALERT, почта вендоров; P2-дубли (Alert->контекст, Telegram, Proxmox) отклонены. Ключевой вопрос владельцу: что реально раздражает каждую неделю
2026-11-17 12:19:24 +03:00
N8N-RESTORED-2026-11-17.md
[OPS] Исправление ошибки: n8n возвращён в строй. Ночью 16.11 были остановлены и сервис, и все воркфлоу — это лишнее, n8n нужен как интеграционный слой. Восстановлено: контейнер (restart=unless-stopped, health 200), 4 рабочих воркфлоу (F6-2, F6-3, Gitea Dispatcher, Kuma→Gitea), записи в hub-core и update-manager services, health-проверка reconcile, монитор Kuma, version-watch снова шлёт в webhook F6-3; selfcheck снова ждёт n8n живым (23/23, службы 74/0). Выключены только битые воркфлоу: Alert Queue, Health Monitor, Prometheus webhook
2026-11-17 11:05:48 +03:00
N8N-ROADMAP-2026-11-17.md
[OPS] Node-RED проверен: контейнер запущен, но флоу нет (flows.json отсутствует), наружу не опубликован; Mosquitto и HA работают. Вывод: сейчас не используется и в задачи не добавляем; его роль — MQTT/Zigbee real-time, n8n — вебхуки, Hermes — расписания, HA — дом. Предложено решение владельцу: оставить пустым, остановить или дать MQTT-сценарий; через 2-3 недели без сценария — остановить
2026-11-17 11:53:25 +03:00
net-report-2026-11-12.md
[VPN] Сбои на домашнем Wi-Fi: проводной путь идеален (0% потерь, 0.28 мс), хост Wi-Fi не использует. Монитор поймал сбой: шлюз 0%, TCP до VPS ok, TLS таймаут — при ss -ti видно mss:64 и 6156/7712 байт ретрансмитов, то есть вмешательство в TCP на пути (TSPU), а не MTU. Поставил net-monitor (раз в минуту) и ежедневный отчёт 08:20. WireGuard: добавил FORWARD для wg0 + сохранил правила, полный туннель проверен (302 за 0.32 с). Два QR: WireGuard UDP 443 и Hiddify Reality 443
2026-11-12 19:55:36 +03:00
net-report-2026-11-13.md
[HOME] Разбор зависания 13.11: хост встал в I/O. Мониторы замолчали в 06:18 (интервалы выросли с 1 до 3-4 мин), ночной отчёт: 13 сбоев TLS в окне 02:12-02:48 (бэкапы), шлюз 1. SMART чистый: HDD Reallocated=0, NVMe без critical warning. Причина: hub-archive-copy.timer 04:10 копирует 246 ГБ на SMR-диск. Исправлено: IOSchedulingClass=idle + IOWeight=20 для 4 бэкап-юнитов, dirty_ratio 5/10, softdog + RuntimeWatchdogSec=60. Восстановлено 30/30 CT, Matrix+SSO, hub 200, боты 9
2026-11-13 11:23:00 +03:00
net-report-2026-11-14.md
[A-38] Снимок состояния 2026-11-14
2026-11-14 09:00:22 +03:00
net-report-2026-11-18.md
[INCIDENT] 18.11: pve-guests masked, stale backup lock, journald volatile, restart policy no; fixes + report
2026-11-18 11:12:37 +03:00
night-2026-11-12.md
[VPN] Ночной мониторинг: три сборщика работают, в 08:00 отчёт ops/audits/night-<дата>.md и автостоп (сутки не копятся). WG в РФ душат — согласен. Добавлены и проверены сквозным тестом два новых канала: VLESS+WS+TLS на 8445 (выглядит как обычный HTTPS) и XHTTP на 8444 (уже был, теперь с QR). Про Matrix-туннель: matrix-tunnel-proxy — другой продукт, туннель через чат-протокол слишком медленный. Следующий шаг: AmneziaWG
2026-11-12 21:06:08 +03:00
night-2026-11-13.md
[HOME] Разбор зависания 13.11: хост встал в I/O. Мониторы замолчали в 06:18 (интервалы выросли с 1 до 3-4 мин), ночной отчёт: 13 сбоев TLS в окне 02:12-02:48 (бэкапы), шлюз 1. SMART чистый: HDD Reallocated=0, NVMe без critical warning. Причина: hub-archive-copy.timer 04:10 копирует 246 ГБ на SMR-диск. Исправлено: IOSchedulingClass=idle + IOWeight=20 для 4 бэкап-юнитов, dirty_ratio 5/10, softdog + RuntimeWatchdogSec=60. Восстановлено 30/30 CT, Matrix+SSO, hub 200, боты 9
2026-11-13 11:23:00 +03:00
night-2026-11-14.md
[A-38] Снимок состояния 2026-11-14
2026-11-14 09:00:22 +03:00
night-2026-11-15.md
[A-38] Снимок состояния 2026-11-15
2026-11-15 22:47:12 +03:00
night-2026-11-16.md
[AUDIT] Автоматизация и LLM: Hermes — 51 задание, покрытие широкое, но LLM не встроен в операционный контур; n8n мёртв с 20.10 (10006 исполнений, 9922 ошибки, Health Monitor 9681, TLS-ошибки), хотя 7 воркфлоу числятся active; LLM: DeepSeek V4.1-Flash в диалоге/RAG/дайджестах, qwen2.5 только ночью; отчёты weekly/trust/research без LLM. 109 расписаний (51 Hermes + 16 cron + 42 cron.d), approvals=0. План: решить n8n, LLM-триаж алертов, LLM-RCA, ночной разбор журналов, цикл подтверждений, унификация расписаний
2026-11-16 12:11:02 +03:00
night-2026-11-17.md
chore(audit): auto-snapshot and CHANGELOG update 2026-11-17
2026-11-17 09:00:25 +03:00
night-2026-11-18.md
[INCIDENT] 18.11: pve-guests masked, stale backup lock, journald volatile, restart policy no; fixes + report
2026-11-18 11:12:37 +03:00
night-2026-11-19.md
[A-38] Снимок состояния 2026-11-19
2026-11-19 09:00:25 +03:00
night-2026-11-20.md
[A-38] Снимок состояния 2026-11-20
2026-11-20 09:00:25 +03:00
night-2026-11-21.md
chore(audit): auto-snapshot and CHANGELOG update 2026-11-21
2026-11-21 09:00:09 +03:00
NIGHT-SPRINT-2026-11-17.md
[NIGHT] Ночной спринт: OpenClaw guard (timer, lease/lock cleanup), утренний брифинг и ежедневный аудит Tool Gateway (Hermes, Matrix 200), финальный eval 46/48 строго / 47/48 после разбора, политика книг/цен/прогнозов, baseline, weekly eval. Корневой state-lock остаётся, guard — операционный фикс
2026-11-17 20:42:45 +03:00
NIGHT-SPRINT-AUDIT-2026-11-16.md
[OPS] Ночной спринт: n8n выведен (0 воркфлоу, контейнер остановлен, version-watch→hub, reconcile и каталог почищены); счётчики fails сброшены; selfcheck обновлён (22/22). Аудит дня и бутылочные горлышки: память (zram 100%, swap 12Г) и слабая Ollama на 229 (3b 17-26с, 7b 55с), один VDS (прямой TLS 52% сбоев, CF 0/120), один Postgres (1 ядро, 200 соед.), Hermes/hub-core как SPOF, нет SSH к 229. Автопилот: 07:50/08:00/08:30, cf-sync 5м, selfcheck 6ч, VPN-проверка 23.11, LLM-аудит пн 09:00
2026-11-16 20:47:35 +03:00
OPENCLAW-GUARD-2026-11-17.md
[OPS] OpenClaw guard: systemd timer каждую минуту проверяет health; при зависании >3 мин сохраняет state DB, чистит agent_database_leases/tmp-locks и перезапускает контейнер, уведомляет ALERT. Eval retry wait увеличен до 240с. Это операционный фикс state-lock на длинных turn'ах; корневая причина в OpenClaw остаётся
2026-11-17 20:39:15 +03:00
P0-BOOKS-POLINA-2026-11-17.md
[TOOLS] Books.search починен через VDS-прокси (OpenLibrary с хоста режется DPI); books.link/status работают. Polina приглашена в бету и добавлена в allowFrom — полные права по запросу (MCP owner-токен, позже per-user). Свет: обе сущности — Yandex Smart Home via MQTT, состояние on восстановленное/оптимистичное, команды 200 не гарантируют физику. Jellyfin: оба ключа 401, логин 400 — нужен новый ключ
2026-11-17 18:19:14 +03:00
P0-CONTINUE-2026-11-17.md
[TOOLS] P0 продолжение: books.link/books.status работают (books.search упирается в DPI), media.request починен (HTTPError 400 -> already_exists + SeasonSearch 201), добавлен rate limit 60/мин на актора. Открыто: Jellyfin 401, media.recent, свет (неясная сущность), iGPU (render)
2026-11-17 18:08:48 +03:00
P0-TOOLS-2026-11-17.md
[TOOLS] P0: добавлены ha.search (поиск сущностей HA), media.search (Sonarr/Radarr lookup), media.request (добавление/поиск сезона, confirm). MCP-схемы обновлены. Проверено: ha.search нашёл коридор и прихожую (обе on с 03:50); media.search ранее работал (Clarkson's Farm tvdb 378165), сейчас Sonarr lookup 503 (индексер); media.request для существующего сериала возвращает already_exists + SeasonSearch. Jellyfin ключ 401 — нужен новый
2026-11-17 16:58:12 +03:00
PG-RAG-2026-11-17.md
[OPS] Пункты 4 и 5: pg_conn_monitor.py (ряд соединений в /var/lib/hub-pg, алерт при ≥80% два раза, Hermes каждые 5 мин) + проверка в selfcheck (61/200 = 30%, PgBouncer пока не нужен); RAG переведён на батчевые эмбеддинги /api/embed (16 текстов ≈ 1 с после загрузки модели, откат на одиночные вызовы). Отклонена ложная заявка
#33
(RCA про prometheus). Реестр пересобран
2026-11-17 10:01:34 +03:00
PHASE0-QUIET-2026-11-16.md
[PHASE0] Убраны ложные тревоги и добавлен LLM-фолбэк. Matrix/SSO-чекер переведён на локальные проверки (публичный домен изнутри хоста давал SSL-handshake timeout при живом сервисе); Ollama: GEN_TIMEOUT 60, keep_alive 30m, тревога после 2 подряд (загрузка 3b = 26 с > 20); check-services: домены и вход Authentik через локальный nginx с Host; Immich VM была выключена 808 проверок — запущена, pong/200; n8n: выключены 3 мёртвых воркфлоу (Health Monitor 9681 ошибка, Alert Queue 241, Prometheus webhook), активных 4; создан llm_fallback.py (3b → 7b → deepseek-chat автоматически), проверено: локально 5.2 с, форс-фолбэк 1.1 с
2026-11-16 13:18:16 +03:00
PHASE1-TRIAGE-2026-11-16.md
[PHASE1] LLM-триаж алертов: alert_triage.py врезан в _notify_policy — критический алерт дополняется вердиктом (что случилось / срочность / что делать) из контекста журнала и статуса службы. Модель через llm_fallback: qwen2.5:3b локально (10-33 с), при сбое deepseek-chat. Анти-шум: кэш 10 мин, блокировка от лавины, при пустом вердикте уходит исходный текст, TRIAGE_ENABLED=0 отключает. Проверено e2e: /notify → ALERT с «Вердикт: … (модель: qwen2.5:3b)». Ловушка: qwen ставит confidence 0.0 — уверенность считаем по фактам, а не по самооценке
2026-11-16 13:47:28 +03:00
PHASE2-RCA-HUMAN-2026-11-16.md
[PHASE2] RCA инцидента и очеловечивание секретарей. RCA: incident_rca.py врезан в _notify_policy — алерт уходит сразу, разбор приходит вторым сообщением (7b → deepseek-chat), с заявкой на перезапуск и «одобри N»; цикл проверен:
#30
approve → bazarr перезапущен в CT120. Критично: _matrix_notify слал через публичный домен изнутри хоста (SSL-handshake timeout, /notify возвращал ok:false и сообщения терялись) — теперь локальный Synapse 192.168.1.155:8008 с фолбэком. Секретари: LLM был ВЫКЛЮЧЕН (нет LLM_API_KEY в окружении hub-bots) — включён через /etc/hub-bots/llm.env + drop-in; персона (живо, без канцелярита, по имени), история 10→20, температура 0.55. Проверено вживую: ответ за 3 с, живой текст
2026-11-16 16:14:54 +03:00
PHASE3-LOGS-2026-11-16.md
[PHASE3] Ночной разбор журналов по сигнатурам: log_signatures.py — collect warning/err за сутки, нормализация (ID/числа/пути/IP → плейсхолдеры), сравнение с базой 7 дней (файлы по дням), новые сигнатуры, всплески (≥5 и ≥3×), корреляции по 5-мин окнам, дайджест 3b→DeepSeek, уведомление в ALERT при находках. Задание Hermes log-signatures 08:00. Первый прогон: база 7 дней (99 сигнатур 13.11), сегодня 10, всплеск EXT4-fs dm-37 write access unavailable x32 (ночное окно бэкапов). notify.py получил --title. Ловушки: первый запуск давал 15 «новых», бэкфилл писал агрегат в сегодня, 3b говорила «действий не требуется»
2026-11-16 16:28:10 +03:00
PHASE4-REPORTS-2026-11-16.md
[PHASE4] LLM в отчётах: report_llm.py (3b→DeepSeek, только важное) врезан в weekly_report, trust_report, research_alternatives — блок «## Главное» после заголовка. Проверено на всех трёх: weekly (риски: 23 находки, high), trust (1 требует внимания: selftest-guards), research (рекомендация проверять prometheus/grafana). Ловушки: импорт sys оказался ниже вставки (NameError), 3b пересказывала разделы (уточнён промпт), доставка weekly не вызывалась (main возвращал 0) — добавлена
2026-11-16 17:11:05 +03:00
PHASE5-SCHEDULES-2026-11-16.md
[PHASE5] Унификация расписаний: 9 мёртвых cron.d (точка в имени — cron их не читает) перенесены в ops/cron-disabled с README; сборщик реестра теперь пропускает файлы с точкой (реестр врал); version-watch и check-certs перенесены в Hermes, из cron убраны. version-watch слал на порт 5678, n8n слушает 5680 — исправлено, webhook 200, состояние сохраняется, повторный прогон 0 изменений. Проверено: живой cron.d 34 файла/49 строк = реестр 49; registry_drift дважды «без изменений»; реестр 161 (cron.d 49, crontab 15, hermes 54, systemd 43). Правило: Hermes — основной планировщик, cron — только тяжёлые бэкапы
2026-11-16 17:18:46 +03:00
PVE-CRASH-2026-11-18.md
[INCIDENT] 18.11: pve-guests masked, stale backup lock, journald volatile, restart policy no; fixes + report
2026-11-18 11:12:37 +03:00
RCA-V2-EXT4-2026-11-16.md
[OPS] RCA v2: гипотеза 3b локально + шаги DeepSeek, с уточнением и запасом; 7b не укладывается в 150 с на CPU. EXT4 dm-37 закрыт: read-only снимок vzdump, доказано совпадением времени; фильтр в NOISE. Найдены 7 старых LVM-снимков (окт.) и 1 ГБ в VG — добавлены проверки в selfcheck (свободное место, снимки >14 дней)
2026-11-16 19:48:48 +03:00
README-DEEP-AUDIT.md
[AUDIT] Глубокий read-only аудит после LLM: скрипт deep_audit.py (12 разделов) + after-llm-audit.sh, запуск только когда очередь LLM пуста (Hermes каждые 30 мин, раз в сутки). Первый прогон: hub-db-dumps, hub-rag, hub-cert-sync в failed; память 12/15 ГБ + swap 17 ГБ (kswapd, task blocked); NVMe Critical Warning Temperature; 99 записей write access unavailable. Плюс гигиена: 49 заданий Hermes, старые .bak, порты NFS наружу. Миграция прогресса LLM: 25778 записей слиты, остаток 344 вместо 26055
2026-11-12 18:03:19 +03:00
REBOOT-MEASURE-2026-11-13.md
[HOME] Перезагрузка и замеры: найдено и исправлено 5 дефектов загрузки. 1) softdog в deny-list Proxmox — юнит сам делает modprobe, fd у PID1=1. 2) Циклы зависимостей (zram-swap, zram-extra) удаляли из очереди hub-core/hermes/мониторы: было 8 циклов, стало 0 (DefaultDependencies=no + WantedBy=swap.target). 3) hub-core с Restart=no падал до готовности Postgres — Restart=on-failure 30s, теперь стартует сам. 4) Tailscale перезаписывал resolv.conf на мёртвый 100.100.100.100 — accept-dns=false, DNS на роутер и AdGuard. 5) swapfile16 поднят. Замеры: загрузка 3:52, 30/30 CT, 74 службы 0 лежит, Matrix/Authentik/Git/hub 200, TLS до VDS 5/5
2026-11-13 14:37:05 +03:00
REMAINING-PROBLEMS-2026-11-16.md
[OPS] Аудит проблем: check_certs переведён на локальный nginx с SNI (висел >120 с из-за DPI, теперь 0 с); RAG-пересбор падал из-за конкуренции с qwen3b в Ollama (190 таймаутов) — выгрузка моделей перед индексацией + перенос на 08:30 после ночного сбора; инкрементальный прогон: 1140 файлов пропущено, 0 ошибок. Открыты: n8n мёртв с 20.10, память (zram 100%, swap 12Г), прямой VPN 52% сбоев (CF 0/120), Ollama медленная, нет SSH к 229
2026-11-16 20:40:06 +03:00
REMARKS-CLOSED-2026-11-13.md
[HOME] Закрыты замечания: 1) watchdog — softdog загружен, systemd держит /dev/watchdog0 (fd 13 у PID1). 2) hub-db-dumps — падал IsADirectoryError на каталоге pre-update-20261028, исправлено isfile(), прогон ok=35 ошибок 0, свежие дампы есть. 3) метрики сертификатов — psql висел без пароля, сбросил пароль buryan_monitor в /root/.pg-monitor-pass, скрипт берёт PGPASSWORD и -w; 14 доменов, 0 тревог. 4) автостарт CT — pve-guests замаскирован намеренно, работает hub-boot-recover (30/33). 5) дыра в журнале 27.10-13.11 — журнал сейчас PASS и пишет. 6) мониторы снова активны
2026-11-13 12:58:22 +03:00
ROLES-HERMES-N8N-2026-11-17.md
[OPS] Анализ возможностей n8n: инвентарь (4 активных воркфлоу, 3 битых; вебхуки Gitea пусты — Task Dispatcher простаивает; Kuma умеет только Gitea и создаёт issue, а не рестарт; HA-автоматизации не подключены; ключи arr/jellyfin/HA/authentik есть). Roadmap: P1 Gitea→n8n уведомления, P2 медиа-импорт→Jellyfin+Matrix, P3 HA→Matrix, P4 Alert→контекст, P5 почта вендоров, P6 Telegram. Исправлено неверное утверждение: реальный self-heal Gitea — Hermes, n8n только issue+TG; порог gitea_selfheal возвращён 2
2026-11-17 11:52:06 +03:00
SECRETARY-BETA-LAUNCH-2026-11-17.md
[SECRETARY] Секретарь Бета на OpenClaw запущен: OpenClaw 2026.11.5, Matrix-плагин 2026.11.5 (npm), бот @secretary-beta, комната Секретарь-Бета, pairing
@akadmin
, модель DeepSeek (локальная Ollama не тянет промпт 15k/контекст), сквозной тест — ответ в Matrix. Бэкапы/откат описаны; старый секретарь не тронут. Дальше: тест владельцем, доступ Polina, инструменты hub-core, метрики
2026-11-17 15:13:23 +03:00
SMR-ARCHIVE-LIMITS.md
[BACKUPS] SMR-архив без NVMe: --bwlimit=30000 в archive_copy.py, IOWriteBandwidthMax=/dev/sda 40M + IOSchedulingClass=idle для 4 бэкап-юнитов. Проверено: лимиты применились (40000000, class 3), сухой прогон rsync ок (261 ГБ источник, 2.6 МБ изменений). На HDD пишет только копия медиатеки, остальные бэкапы на NVMe
2026-11-13 11:52:29 +03:00
SNAPSHOTS-CLEANUP-2026-11-16.md
[OPS] Удалены 7 старых LVM-снимков (28-30.10, 100 ГБ логически): thin pool 67.35→64.60%, освобождено ≈9.6 ГБ, снимков 0. Очищены 12 висячих секций снимков в конфигах LXC (включая 8 доп. CT), бэкапы в /root/pve-conf-backup-*; все 12 контейнеров running. Исправлена метрика selfcheck: thin pool data <85% вместо VG free. Проверка: 22 проверки, провалов 0
2026-11-16 19:55:19 +03:00
SPRINT-SELFCHECK-2026-11-16.md
[OPS] Спринт-самопроверка: selfcheck_platform.py (19 проверок) + задание Hermes каждые 6 ч; check-services: VPN-шлюз теперь предупреждение, а не провал (было 3036 ложных), проверка 89→20 с; Hermes: guard от параллельного запуска задания; реестр пересобран
2026-11-16 18:25:47 +03:00
SSH-229-2026-11-17.md
[OPS] SSH к 229: доступ под roman через Host llm229 (ключ id_ed25519), ollama-admin.sh (status/unload/restart/logs), ollama_guard.py + Hermes каждые 30 мин (самолечение выгрузкой, перезапуск при 2 подряд, алерт при неудаче). Выяснено: 229 — Ubuntu llm, 15 ГБ, 18 ядер; sudo требует пароль, поэтому в доке — две команды владельцу: OLLAMA_MAX_LOADED_MODELS=2 (решает конфликт qwen/эмбеддинги) и NOPASSWD для restart
2026-11-17 10:16:21 +03:00
STABILITY-VPN-MATRIX.md
[AUDIT] Поправка к аудиту: память не критична (доступно 2733 МБ, PSI 2%, OOM 0), hub-cert-sync и hub-rag не failed, а inactive (последние ошибки 09.11), hub-cert-sync успешно прошёл 12.11 (49 доменов). Настоящий failed только hub-db-dumps. По доступу: Synapse 7 дней без рестартов, сертификаты matrix/element/authentik до 24.12 (41 день), VPN стабилен (0 падений), парольный вход есть как резерв
2026-11-12 18:08:18 +03:00
SYSTEM-WORK-MEDIA-2026-11-17.md
[PLAN] Систематизация: работа, медиа, инфраструктура. Диагноз: точечные решения без системы, статус медиа непонятен (проверяем только запущенность сервисов), работа в work.db без стадий/next_action/due. Предложены три контура + единый статус: работа (стадии, следующий шаг, ожидание вендора, дедлайны; n8n intake, Hermes дайджест, hub статус), медиа (request→approved→downloading→imported→ready/failed; Seerr/*arr/Jellyfin), инфраструктура. Этапы A (работа v1), B (медиа v1), C (n8n события), D (единый статус). Начать с A
2026-11-17 12:22:43 +03:00
THREE-ITEMS-2026-11-16.md
[OPS] Три пункта: (1) единая утренняя сводка morning_digest.py — службы, юниты, бэкапы, ночной разбор, задачи, заявки; Hermes morning-digest 08:00, log-signatures 07:50 без отдельного сообщения, morning-briefing убран; (2) work.db задач добавлен во второй контур — архив на VPS содержит opt/work-hub/work.db; (3) EXT4 dm-37 — это read-only снимок vzdump, не ошибка: добавлено в NOISE, ночной разбор теперь 0/0/0. Проверка дня: 0 упавших юнитов, 74/74 служб, 9/9 ботов, отчёты с «Главное», drift 0, ложная заявка
#31
отклонена. Ловушки: фильтр совпал с промптом, llm_digest возвращал '', задачи бэкапились не в офсайт
2026-11-16 18:10:02 +03:00
THREE-TASKS-N8N-2026-11-17.md
[OPS] n8n-алерты убраны: метрика buryan_service_up{name=n8n} убрана через update-manager/services.yaml, монитор Kuma n8n.buryans.ru на паузе — Prometheus больше не шумит. Три задачи: gitea_selfheal.py (Hermes 5 мин, 2-strike restart CT140), path_monitor_light.py (каждые 5 мин: gw/wg/vds TCP 443/8444/8445 + TLS, алерт при 30-мин недоступности публичного VDS при живом WG), restic_restore_file.py (реальное восстановление /etc/pve/storage.cfg из pve-config, ежедневно 08:40; проверено ok 326 байт). Бонус: CT107 86%→79%
2026-11-17 11:02:03 +03:00
TOOL-GATEWAY-2026-11-17.md
[TOOLS] Tool Gateway v1: systemd-сервис на 9140, 10 типизированных инструментов (hub.status/notify, ha.states/call, media.queue/recent, calendar.list/create, photos.people/albums), токены акторов owner/family/agent, матрица прав, подтверждения (409) для write, аудит в SQLite. Проверено: статус 74/0, HA 5 светильников, radarr 12 в очереди, создание/удаление события, 403 для agent на ha.call
2026-11-17 16:07:35 +03:00
TOOL-GATEWAY-MCP-2026-11-17.md
[TOOLS] Tool Gateway подключён к секретарю через MCP: mcp.servers.toolgateway (stdio, env TG_URL/TG_TOKEN), агент вызывает 10 инструментов нативно. Проверено: hub.status (74/0), calendar.create (201, удалено), ha.states+ha.call (свет), аудит в SQLite. Добавлены ретрай hub.status, валидация аргументов (400), selfcheck-проверка Tool Gateway. Дальше: подтверждения через Matrix, rate limit, family-токен
2026-11-17 16:19:51 +03:00
VENDOR-DOC-SOURCES-2026-11-14.md
[LLM] Разбор источников документации вендоров: официальные сайты PDF не отдают (WP media только картинки, .com.ru/downloads 403, /docs 404). Проверены API: WP REST, sitemap-files Avicon, Wayback (снапшотов нет), Common Crawl (502/504), поисковые API (нет ключей) => публичного API нет. Найдены дистрибьюторы snk-s.ru (23 PDF) и avicon.ru (9 PDF), avikon.ru — парковка, avikon.com — Польша, tele-vek/voip-shop — без PDF. Написан переиспользуемый сканер ops/scripts/dist-scan.py (обход до 60 страниц, карточки вендора, PDF, раскодирование процентных ссылок). Очередь дистрибьютора: 32 файла с пометкой
2026-11-14 21:44:33 +03:00
VERIFY-AFTER-FIXES-2026-11-13.md
[HOME] Проверка после правок: 30/30 CT, Matrix 200, Authentik 200, Git 200, hub 200 (11 КБ за 0.0005 с), боты 9, дампы ok=35, метрики сертификатов 496 строк. Доправлено: softdog-reexec.service (daemon-reexec после modules-load, иначе systemd не открывает /dev/watchdog) и wg-quick@wgvps — туннель дом-VDS лежал после ребута, поднят (хендшейк 6 с), VDS→CT155 200 через wg0. CF-туннель жив (404 за 1.4 с — норма)
2026-11-13 13:38:50 +03:00
VPS-DIAG-2026-11-18.md
[P0] VPS-диагностика (порты открыты, данные не проходят) + сценарии OpenClaw
2026-11-18 12:08:07 +03:00
VPS-FIX-2026-11-18.md
[VPS] Починен доступ: 193 вместо 185, host key, WG UDP 30001, cert-sync 49 доменов
2026-11-18 12:32:49 +03:00