Commit Graph
153 Commits
Author SHA1 Message Date
root 3b5a90208e [COMBINE] Ветки вендоров: Yealink не главный; выбор ветки, отдельные catalog-*.yaml, UI Вендоры
lint / hygiene (push) Failing after 18s
standard / check (push) Successful in 7s
2026-11-18 16:27:31 +03:00
root 855a596f1a [COMBINE] ПК с Teams Rooms тоже терминал (role=pc)
lint / hygiene (push) Failing after 15s
standard / check (push) Successful in 6s
2026-11-18 16:19:03 +03:00
root 30f428b2ad [COMBINE] BYOD: ПК -> терминалы, UVC85-BYOD kit, алиасы UVC85 BYOD 200; API/UI
lint / hygiene (push) Failing after 18s
standard / check (push) Successful in 7s
2026-11-18 16:18:04 +03:00
root 78f0ee3ff5 [COMBINE] Строгое разделение VCS/телефония, solution_class/sales_scope, прототип analog engine
lint / hygiene (push) Failing after 16s
standard / check (push) Successful in 7s
2026-11-18 16:12:08 +03:00
root 9c2d8f0d7f [COMBINE] Datasheet 28/33; 5 в support; support 18352 weight1 запущен; вендоры в /reports/
lint / hygiene (push) Failing after 17s
standard / check (push) Successful in 7s
2026-11-18 15:47:27 +03:00
root 418dd29001 [COMBINE] Модели Poly/Logitech/VINTEO/IVA/Hitrolink: 57 записей, 27 добавлено, stage 284
lint / hygiene (push) Failing after 16s
standard / check (push) Successful in 8s
2026-11-18 15:46:23 +03:00
root 48d4cc8aa0 [COMBINE] Support-очередь разделена: PC 9123 / host 9224, инструкция PC-воркера
lint / hygiene (push) Failing after 17s
standard / check (push) Successful in 7s
2026-11-18 15:32:42 +03:00
root 22ea6b884e [COMBINE] P0.5 применён (15 значений), отчёты P0.5/6/7 в /reports/
lint / hygiene (push) Failing after 53s
standard / check (push) Successful in 8s
2026-11-18 15:24:37 +03:00
root 1c04fa1511 [COMBINE] P0.5 карантин 15 атрибутов, P0.6 retry 18380 URL, P0.7 junk report, P0.8 merge, страница отчётов /reports/
lint / hygiene (push) Failing after 16s
standard / check (push) Successful in 7s
2026-11-18 15:02:05 +03:00
root 39fca83f57 [COMBINE] P0-stage: 257 устройств, 0 дублей, 11 placeholder удалено, поля domain/line/group/form_factor; прод не тронут
lint / hygiene (push) Failing after 21s
standard / check (push) Successful in 7s
2026-11-18 14:57:23 +03:00
root b39b4182c1 [P0] Human approvals: 202 pending -> Matrix approve/reject -> watcher выполняет; AGENTS policy
lint / hygiene (push) Failing after 1m52s
standard / check (push) Successful in 8s
2026-11-18 13:03:53 +03:00
root d4bf156c43 [P0] memory alert: MemAvailable/swap, Hermes every 5m
lint / hygiene (push) Failing after 15s
standard / check (push) Successful in 7s
2026-11-18 12:51:55 +03:00
root 01dbf6792f [VPS] Починен доступ: 193 вместо 185, host key, WG UDP 30001, cert-sync 49 доменов
lint / hygiene (push) Failing after 22s
standard / check (push) Successful in 8s
2026-11-18 12:32:49 +03:00
root 2246cc16de [P0] weekly review: корректный dry-run вывод
lint / hygiene (push) Failing after 14s
standard / check (push) Successful in 6s
2026-11-18 11:56:14 +03:00
root 386c5f136a [P0] Privacy-gate, approvals journal+limits, heavy-job guard/расписание, weekly review, incident template, ADR-008 ролей
lint / hygiene (push) Failing after 22s
standard / check (push) Successful in 7s
2026-11-18 11:55:17 +03:00
root ad1728d161 [P0] Реестр автоматизаций + скрипт LLM-аудита Комбайна
lint / hygiene (push) Failing after 21s
standard / check (push) Successful in 7s
2026-11-18 11:52:15 +03:00
root fbe4102c64 [COMBINE] P0: нормализованный каталог 271 устройство (0 ошибок), дедуп, вендоры Poly/Logitech/VINTEO/IVA/Hitrolink, health-эндпоинт
lint / hygiene (push) Failing after 23s
standard / check (push) Successful in 8s
2026-11-18 11:49:12 +03:00
root f088fc19d3 [COMBINE] P0 taxonomy: groups A-E, duplicates, values-only devices, SIP/H.323 candidates
lint / hygiene (push) Failing after 17s
standard / check (push) Successful in 7s
2026-11-18 11:42:00 +03:00
root 46cfb3e80c [INCIDENT] 18.11: pve-guests masked, stale backup lock, journald volatile, restart policy no; fixes + report
lint / hygiene (push) Failing after 20s
standard / check (push) Successful in 7s
2026-11-18 11:12:37 +03:00
root eed9381b2e [NIGHT] Остальные задачи: alert digest+analysis, memory/USER.md, onboarding, redaction watcher, fallback notice, task backlog, deep audit v2
lint / hygiene (push) Failing after 19s
standard / check (push) Successful in 8s
2026-11-17 20:49:18 +03:00
root 4804dc6a75 [NIGHT] Ночной спринт: OpenClaw guard (timer, lease/lock cleanup), утренний брифинг и ежедневный аудит Tool Gateway (Hermes, Matrix 200), финальный eval 46/48 строго / 47/48 после разбора, политика книг/цен/прогнозов, baseline, weekly eval. Корневой state-lock остаётся, guard — операционный фикс
lint / hygiene (push) Failing after 22s
standard / check (push) Successful in 8s
2026-11-17 20:42:45 +03:00
root 4ba95abe8b [OPS] OpenClaw guard: systemd timer каждую минуту проверяет health; при зависании >3 мин сохраняет state DB, чистит agent_database_leases/tmp-locks и перезапускает контейнер, уведомляет ALERT. Eval retry wait увеличен до 240с. Это операционный фикс state-lock на длинных turn'ах; корневая причина в OpenClaw остаётся
lint / hygiene (push) Failing after 24s
standard / check (push) Successful in 9s
2026-11-17 20:39:15 +03:00
root 1534f05bc3 [EVAL] Финальный прогон: 46/48 (96%) строго, 47/48 после разбора. Политика книг/цен в AGENTS.md (книги 6/6), скоринг исправлен, Hermes weekly active (порог 45), baseline в ops/audits/eval/2026-11-17. 2 медиа-сценария исключены: OpenClaw state-lock после 80-108с (баг стабильности, не качества). Осталось: починить долгие turn'ы, ужесточить запрет прогнозов, прогнать 50/50
lint / hygiene (push) Failing after 18s
standard / check (push) Successful in 8s
2026-11-17 20:30:18 +03:00
root b312a36a14 [EVAL] Secretary Eval 50 сценариев: 42/50 строго, 48/50 после разбора (6 ложных: температура, напоминание, рекомендация фильма, 3 injection-отказа). Реальные: книги (агент готов скачать с BigLibrary) и цена билета (оценки без источника). OpenClaw дважды уходил в state-lock, восстановлен из doctor-бэкапа 11:11, история после 11:11 потеряна (БД сохранена), конфиг Polina/MCP цел. Харнесс: preflight/health/retry.
lint / hygiene (push) Failing after 20s
standard / check (push) Successful in 7s
2026-11-17 20:10:12 +03:00
root ae21c16cc8 [OPS] Автопуш SSOT в Gitea: ops/scripts/git_push.sh + Hermes каждые 30 минут
lint / hygiene (push) Failing after 15s
standard / check (push) Successful in 8s
2026-11-17 18:10:16 +03:00
root a026315f08 [TOOLS] Tool Gateway подключён к секретарю через MCP: mcp.servers.toolgateway (stdio, env TG_URL/TG_TOKEN), агент вызывает 10 инструментов нативно. Проверено: hub.status (74/0), calendar.create (201, удалено), ha.states+ha.call (свет), аудит в SQLite. Добавлены ретрай hub.status, валидация аргументов (400), selfcheck-проверка Tool Gateway. Дальше: подтверждения через Matrix, rate limit, family-токен 2026-11-17 16:19:51 +03:00
root efe0fab66f [LLM] Тесты возможностей LLM: локальная qwen2.5:3b с few-shot — интент 9/10, слоты 4/4, факты 3/4, отказы 3/3; DeepSeek 10/10, 4/4, 4/4, 3/3. Провал 2/10 был из-за промпта, не модели. Добавлен ops/scripts/llm_capability.py (21 задача, 4 класса). Черновик протокола: классификация локально -> политика -> детерминированный инструмент / локальная LLM / DeepSeek только для сложного; аудит и метрика экспозиции 2026-11-17 16:02:06 +03:00
root 893bf687e6 [LLM] Отдельный трек ускорения локальной LLM: скрипт ops/scripts/llm_lab.py (read-only замеры prefill/gen для моделей и размеров промпта, JSONL + summary в /var/lib/llm-lab), смоук: 300 токенов 4.1с, 2000 — 28.2с prefill (64-75 т/с), 14k ≈ 375с. Бэклог: облегчить промпт OpenClaw, num_batch/num_thread, кэш префикса, выбор модели/кванта, GPU, гибрид локально/DeepSeek. В текущих задачах не участвует 2026-11-17 15:29:24 +03:00
root 86c1dc8c91 [OPS] Анализ возможностей n8n: инвентарь (4 активных воркфлоу, 3 битых; вебхуки Gitea пусты — Task Dispatcher простаивает; Kuma умеет только Gitea и создаёт issue, а не рестарт; HA-автоматизации не подключены; ключи arr/jellyfin/HA/authentik есть). Roadmap: P1 Gitea→n8n уведомления, P2 медиа-импорт→Jellyfin+Matrix, P3 HA→Matrix, P4 Alert→контекст, P5 почта вендоров, P6 Telegram. Исправлено неверное утверждение: реальный self-heal Gitea — Hermes, n8n только issue+TG; порог gitea_selfheal возвращён 2 2026-11-17 11:52:06 +03:00
root b6d205df03 [OPS] Разбор ролей Hermes и n8n: Hermes не отключался (63 задания), n8n — интеграционный слой, возвращён и работает (healthz 200, webhook «Workflow was started», 4 воркфлоу активны, 3 битых выключены). Правило: время — Hermes, событие — n8n, уведомление — hub-core. Дублирование Gitea решено: n8n Kuma→Gitea основной, gitea_selfheal — страховка с порогом 3 (15 мин). Документ ROLES-HERMES-N8N 2026-11-17 11:18:37 +03:00
root 7d08ad14f3 [OPS] Исправление ошибки: n8n возвращён в строй. Ночью 16.11 были остановлены и сервис, и все воркфлоу — это лишнее, n8n нужен как интеграционный слой. Восстановлено: контейнер (restart=unless-stopped, health 200), 4 рабочих воркфлоу (F6-2, F6-3, Gitea Dispatcher, Kuma→Gitea), записи в hub-core и update-manager services, health-проверка reconcile, монитор Kuma, version-watch снова шлёт в webhook F6-3; selfcheck снова ждёт n8n живым (23/23, службы 74/0). Выключены только битые воркфлоу: Alert Queue, Health Monitor, Prometheus webhook 2026-11-17 11:05:48 +03:00
root 03c05d8638 [OPS] n8n-алерты убраны: метрика buryan_service_up{name=n8n} убрана через update-manager/services.yaml, монитор Kuma n8n.buryans.ru на паузе — Prometheus больше не шумит. Три задачи: gitea_selfheal.py (Hermes 5 мин, 2-strike restart CT140), path_monitor_light.py (каждые 5 мин: gw/wg/vds TCP 443/8444/8445 + TLS, алерт при 30-мин недоступности публичного VDS при живом WG), restic_restore_file.py (реальное восстановление /etc/pve/storage.cfg из pve-config, ежедневно 08:40; проверено ok 326 байт). Бонус: CT107 86%→79% 2026-11-17 11:02:03 +03:00
root cd911d7d9f [OPS] Утренняя сводка: добавлены Postgres (соединения), LLM за сутки (вызовы/фолбэк/модели) и RAG (чанки/свежесть); в llm-fallback.log появилась метка ts; overlayfs-шум отфильтрован. Критично: restic-скрипты ходили на мёртвый Tailscale 100.64.0.2 — офсайт-копии не обновлялись с 8 ноября, photos-backup падал каждую ночь. Исправлено на WG 10.88.0.1 в restore-test/photos-backup/offsite-backup/offsite_verify (+копия в репо). Проверено: restore-test 5/5, photos rc=0 (219 МБ), restic check без ошибок 2026-11-17 10:51:01 +03:00
root 368e863146 [OPS] SSH к 229: доступ под roman через Host llm229 (ключ id_ed25519), ollama-admin.sh (status/unload/restart/logs), ollama_guard.py + Hermes каждые 30 мин (самолечение выгрузкой, перезапуск при 2 подряд, алерт при неудаче). Выяснено: 229 — Ubuntu llm, 15 ГБ, 18 ядер; sudo требует пароль, поэтому в доке — две команды владельцу: OLLAMA_MAX_LOADED_MODELS=2 (решает конфликт qwen/эмбеддинги) и NOPASSWD для restart 2026-11-17 10:16:21 +03:00
root 3d21b891f1 [OPS] Пункты 4 и 5: pg_conn_monitor.py (ряд соединений в /var/lib/hub-pg, алерт при ≥80% два раза, Hermes каждые 5 мин) + проверка в selfcheck (61/200 = 30%, PgBouncer пока не нужен); RAG переведён на батчевые эмбеддинги /api/embed (16 текстов ≈ 1 с после загрузки модели, откат на одиночные вызовы). Отклонена ложная заявка #33 (RCA про prometheus). Реестр пересобран 2026-11-17 10:01:34 +03:00
root 64f6e8444d [OPS] Ночной спринт: n8n выведен (0 воркфлоу, контейнер остановлен, version-watch→hub, reconcile и каталог почищены); счётчики fails сброшены; selfcheck обновлён (22/22). Аудит дня и бутылочные горлышки: память (zram 100%, swap 12Г) и слабая Ollama на 229 (3b 17-26с, 7b 55с), один VDS (прямой TLS 52% сбоев, CF 0/120), один Postgres (1 ядро, 200 соед.), Hermes/hub-core как SPOF, нет SSH к 229. Автопилот: 07:50/08:00/08:30, cf-sync 5м, selfcheck 6ч, VPN-проверка 23.11, LLM-аудит пн 09:00 2026-11-16 20:47:35 +03:00
root c13338cf0e [OPS] Аудит проблем: check_certs переведён на локальный nginx с SNI (висел >120 с из-за DPI, теперь 0 с); RAG-пересбор падал из-за конкуренции с qwen3b в Ollama (190 таймаутов) — выгрузка моделей перед индексацией + перенос на 08:30 после ночного сбора; инкрементальный прогон: 1140 файлов пропущено, 0 ошибок. Открыты: n8n мёртв с 20.10, память (zram 100%, swap 12Г), прямой VPN 52% сбоев (CF 0/120), Ollama медленная, нет SSH к 229 2026-11-16 20:40:06 +03:00
root e38a0233a4 [VPN] Быстрый Cloudflare-туннель: cf_tunnel_sync.py — читает URL с VDS по WG, при смене обновляет cf-host.txt и 6 профилей (outbound proxy-cf VLESS+WS+TLS, путь /buryan-cf), включает в observatory и balancer leastPing, проверяет 400 и уведомляет в ALERT; Hermes каждые 5 мин. Проверено ротацией: restart cf-tunnel → новый URL → 6 профилей обновлены, ALERT пришёл. Профили в .gitignore. Ловушки: SSH дом→VDS блокируется, доступ по WG; конфиг xray на VDS /usr/local/etc/xray/config.json 2026-11-16 20:13:24 +03:00
root 02162d524a [OPS] Удалены 7 старых LVM-снимков (28-30.10, 100 ГБ логически): thin pool 67.35→64.60%, освобождено ≈9.6 ГБ, снимков 0. Очищены 12 висячих секций снимков в конфигах LXC (включая 8 доп. CT), бэкапы в /root/pve-conf-backup-*; все 12 контейнеров running. Исправлена метрика selfcheck: thin pool data <85% вместо VG free. Проверка: 22 проверки, провалов 0 2026-11-16 19:55:19 +03:00
root 2d8217dca7 [OPS] RCA v2: гипотеза 3b локально + шаги DeepSeek, с уточнением и запасом; 7b не укладывается в 150 с на CPU. EXT4 dm-37 закрыт: read-only снимок vzdump, доказано совпадением времени; фильтр в NOISE. Найдены 7 старых LVM-снимков (окт.) и 1 ГБ в VG — добавлены проверки в selfcheck (свободное место, снимки >14 дней) 2026-11-16 19:48:48 +03:00
root 458ac82901 [OPS] Спринт-самопроверка: selfcheck_platform.py (19 проверок) + задание Hermes каждые 6 ч; check-services: VPN-шлюз теперь предупреждение, а не провал (было 3036 ложных), проверка 89→20 с; Hermes: guard от параллельного запуска задания; реестр пересобран 2026-11-16 18:25:47 +03:00
root 039471b92b [OPS] Реестр автоматизаций: пересобран после morning-digest/log-signatures (унификация утренних сообщений) 2026-11-16 18:12:20 +03:00
root 12bafba6b9 [OPS] morning_digest: повтор запроса статуса (хаб бывает занят триажем) и таймаут 30 с 2026-11-16 18:10:48 +03:00
root 9dec0676be [OPS] Три пункта: (1) единая утренняя сводка morning_digest.py — службы, юниты, бэкапы, ночной разбор, задачи, заявки; Hermes morning-digest 08:00, log-signatures 07:50 без отдельного сообщения, morning-briefing убран; (2) work.db задач добавлен во второй контур — архив на VPS содержит opt/work-hub/work.db; (3) EXT4 dm-37 — это read-only снимок vzdump, не ошибка: добавлено в NOISE, ночной разбор теперь 0/0/0. Проверка дня: 0 упавших юнитов, 74/74 служб, 9/9 ботов, отчёты с «Главное», drift 0, ложная заявка #31 отклонена. Ловушки: фильтр совпал с промптом, llm_digest возвращал '', задачи бэкапились не в офсайт 2026-11-16 18:10:02 +03:00
root a2f3892da1 [PHASE5] Унификация расписаний: 9 мёртвых cron.d (точка в имени — cron их не читает) перенесены в ops/cron-disabled с README; сборщик реестра теперь пропускает файлы с точкой (реестр врал); version-watch и check-certs перенесены в Hermes, из cron убраны. version-watch слал на порт 5678, n8n слушает 5680 — исправлено, webhook 200, состояние сохраняется, повторный прогон 0 изменений. Проверено: живой cron.d 34 файла/49 строк = реестр 49; registry_drift дважды «без изменений»; реестр 161 (cron.d 49, crontab 15, hermes 54, systemd 43). Правило: Hermes — основной планировщик, cron — только тяжёлые бэкапы 2026-11-16 17:18:46 +03:00
root 9b2388ad60 [PHASE4] LLM в отчётах: report_llm.py (3b→DeepSeek, только важное) врезан в weekly_report, trust_report, research_alternatives — блок «## Главное» после заголовка. Проверено на всех трёх: weekly (риски: 23 находки, high), trust (1 требует внимания: selftest-guards), research (рекомендация проверять prometheus/grafana). Ловушки: импорт sys оказался ниже вставки (NameError), 3b пересказывала разделы (уточнён промпт), доставка weekly не вызывалась (main возвращал 0) — добавлена 2026-11-16 17:11:05 +03:00
root c8e41c1775 [PHASE3] Ночной разбор журналов по сигнатурам: log_signatures.py — collect warning/err за сутки, нормализация (ID/числа/пути/IP → плейсхолдеры), сравнение с базой 7 дней (файлы по дням), новые сигнатуры, всплески (≥5 и ≥3×), корреляции по 5-мин окнам, дайджест 3b→DeepSeek, уведомление в ALERT при находках. Задание Hermes log-signatures 08:00. Первый прогон: база 7 дней (99 сигнатур 13.11), сегодня 10, всплеск EXT4-fs dm-37 write access unavailable x32 (ночное окно бэкапов). notify.py получил --title. Ловушки: первый запуск давал 15 «новых», бэкфилл писал агрегат в сегодня, 3b говорила «действий не требуется» 2026-11-16 16:28:10 +03:00
root 73b317c699 [PHASE2] RCA инцидента и очеловечивание секретарей. RCA: incident_rca.py врезан в _notify_policy — алерт уходит сразу, разбор приходит вторым сообщением (7b → deepseek-chat), с заявкой на перезапуск и «одобри N»; цикл проверен: #30 approve → bazarr перезапущен в CT120. Критично: _matrix_notify слал через публичный домен изнутри хоста (SSL-handshake timeout, /notify возвращал ok:false и сообщения терялись) — теперь локальный Synapse 192.168.1.155:8008 с фолбэком. Секретари: LLM был ВЫКЛЮЧЕН (нет LLM_API_KEY в окружении hub-bots) — включён через /etc/hub-bots/llm.env + drop-in; персона (живо, без канцелярита, по имени), история 10→20, температура 0.55. Проверено вживую: ответ за 3 с, живой текст 2026-11-16 16:14:54 +03:00
root 612a0ccfe8 [PHASE1] LLM-триаж алертов: alert_triage.py врезан в _notify_policy — критический алерт дополняется вердиктом (что случилось / срочность / что делать) из контекста журнала и статуса службы. Модель через llm_fallback: qwen2.5:3b локально (10-33 с), при сбое deepseek-chat. Анти-шум: кэш 10 мин, блокировка от лавины, при пустом вердикте уходит исходный текст, TRIAGE_ENABLED=0 отключает. Проверено e2e: /notify → ALERT с «Вердикт: … (модель: qwen2.5:3b)». Ловушка: qwen ставит confidence 0.0 — уверенность считаем по фактам, а не по самооценке 2026-11-16 13:47:28 +03:00
root 418623d7af [PHASE0] Убраны ложные тревоги и добавлен LLM-фолбэк. Matrix/SSO-чекер переведён на локальные проверки (публичный домен изнутри хоста давал SSL-handshake timeout при живом сервисе); Ollama: GEN_TIMEOUT 60, keep_alive 30m, тревога после 2 подряд (загрузка 3b = 26 с > 20); check-services: домены и вход Authentik через локальный nginx с Host; Immich VM была выключена 808 проверок — запущена, pong/200; n8n: выключены 3 мёртвых воркфлоу (Health Monitor 9681 ошибка, Alert Queue 241, Prometheus webhook), активных 4; создан llm_fallback.py (3b → 7b → deepseek-chat автоматически), проверено: локально 5.2 с, форс-фолбэк 1.1 с 2026-11-16 13:18:16 +03:00