Files
buryan-infra/ops/ops/SWARM-FINAL.md
T

4.4 KiB

Рой агентов: доведён до исполнения (23.10)

Что было

Агенты работали в режиме наблюдения: собирали отчёты, писали в журнал, но ничего не исполняли. Очередь заявок: 8 записей, все cancelled (от 22.10), новых не появлялось.

Что сделано

1. Классы A и B — исполняются автоматически

/opt/hub-agents/actions.py при каждом запуске раннера (каждые 30 минут):

Действие Условие Проверено
prune_dangling висячие образы Docker ✅ в журнале 23.10 04:40
clean_tmp файлы в /tmp старше 7 дней ✅ в журнале 23.10 04:40
journal_vacuum диск ≥ порога готово, ждёт условия
rotate_logs /var/log ≥ порога готово, ждёт условия

Лимиты из policy.yaml соблюдаются: класс B — не больше 4 действий в час, 12 в сутки.

2. Класс C — заявки с подтверждением владельца

Цикл проверен вживую:

1. approvals.add → заявка #9 restart_container heimdall
2. approvals.py list → «#9 [tester] restart_container heimdall»
3. approvals.py approve 9 → «✅ перезапущен на хосте»
4. docker inspect heimdall → StartedAt сменился на 20:52
5. статус заявки → done, result: «перезапущен на хосте»
6. запись в journal/2026-10-23-approvals.jsonl

3. Истечение срока (TTL)

Добавлено approvals.expire(ttl_hours=24):

  • просроченные заявки получают статус expired и причину «истёк срок (N ч)»;
  • вызывается при показе списка и в начале каждого запуска раннера;
  • событие пишется в журнал заявок.

Проверено: заявка 30-часовой давности закрылась автоматически, в журнале {"decision": "expired", "result": "истёк срок (30 ч)"}.

4. Команды в Matrix

!заявки · !одобрить N · !отклонить N — работают через тот же approvals.py, роли проверяются (_role_gate).

Ограничения

  • класс C исполняет только restart_container (список actions_allowed);
  • предложения класса C создаёт мозг (DeepSeek) — при здоровой системе он их не генерирует, и это правильно;
  • selfheal (самовосстановление) — отдельный быстрый контур, не ждёт одобрения.

Спринт 6: надёжность (23.10)

Пункт 1 — проверка восстановления ✅

архив: configs-20261023-1934.tar.gz (465 МБ)
извлечено: 366 файлов
пример: host/host-pve/nodes/pve/qemu-server/104.conf (367 байт, валидный)

Пункт 2 — второй контур бэкапа ✅

/opt/hub-core/second_contour.py + hub-second-contour.timer (вс 05:00):

Что кладём Откуда
/etc/pve, /etc/nginx, /etc/systemd/system хост
/opt/hub-core, /opt/hub-agents, /opt/hub-bots наш код и правила
свежие дампы БД (5 баз) /mnt/backups/db

Куда: VPS 193.233.210.184:/root/backups/home/, хранится 4 архива.

Первый запуск: 2.2 МБ, 710 записей, 705 системных путей. Свободно на VPS: 11 ГБ — запас на годы.

Пункт 3 — ротация логов ✅

  • /etc/logrotate.d/hub: hub-логи (неделя, 8 копий), jsonl-журналы (месяц, 6 копий), сжатие;
  • journald ограничен: SystemMaxUse=300M, хранение 30 дней.

Пункт 4 — отдельный диск под медиа ⛔

Только железо: сейчас /mnt/media на корневом разделе (66 ГБ занято, 38 ГБ свободно). Нужен диск — это покупка, отдельный спринт.