Files
buryan-infra/ops/audits/PHASE0-QUIET-2026-11-16.md
T

4.9 KiB
Raw Blame History

Фаза 0: убрали ложные тревоги и подготовили LLM-фолбэк (16.11.2026)

Цель фазы: убрать шум, на котором LLM училась бы мусору, и сделать автоматический переход локальная LLM → DeepSeek.

Что было не так и что исправлено

1. Проверка Matrix/SSO давала ложную тревогу

Чекер ходил на https://matrix.buryans.ru изнутри хоста. Публичный домен изнутри упирается в DPI/hairpin NAT:

_ssl.c:1012: The handshake operation timed out

При этом сервис жив (curl снаружи — 200). Исправлено: проверки идут локально —

Проверка Куда теперь
synapse versions http://192.168.1.155:8008/_matrix/client/versions
sso redirect Synapse 8008
authentik authorize https://127.0.0.1 + Host: authentik.buryans.ru
element https://127.0.0.1 + Host: element.buryans.ru

Результат: все 4 проверки ok.

2. Ollama «висит на генерации» — ложная тревога

Замер: генерация 3b занимает 26 с (загрузка модели), а таймаут был 20. Исправлено:

  • GEN_TIMEOUT 20 → 60;
  • keep_alive: 30m — модель остаётся в памяти (тёплый вызов ~5 с);
  • тревога только после 2 подряд неудач (первый сбой = загрузка).

Результат: Ollama в порядке, моделей: 3.

3. check-services.sh: домены и вход Authentik

Проверки git/vault/matrix и «Вход Authentik» ходили на публичные URL. Переведены на локальный nginx с Host-заголовком (https://127.0.0.1).

Результат: ✅ всё в порядке, проверено: 59 (было — постоянные провалы).

4. Immich был реально выключен

VM immich-prod (104) стояла 808 проверок подряд (~2,8 суток). Запущена: qm start 104 → {"res":"pong"}, HTTP 200.

5. n8n: выключены мёртвые воркфлоу

Воркфлоу Действие
Buryan Health Monitor (9681 ошибка) выключен
Alert Queue Processor (241 ошибка) выключен
Prometheus/Grafana Alert Webhook выключен
Uptime Kuma → Gitea Self-Healing оставлен
F6-3: Version Watch Handler оставлен
F6-2: Self-Service Registration оставлен
Gitea Task Dispatcher оставлен

Активных было 7, стало 4.

LLM-фолбэк: автоматически

Создан /opt/hub-core/llm_fallback.py (копия в ops/scripts/).

qwen2.5:3b (локально) → qwen2.5:7b (локально) → deepseek-chat (облако)

Первый ответивший используется; пустой ответ или ошибка = переход к следующей. Журнал: /var/log/hub/llm-fallback.log.

Проверка:

обычный вызов:   model=qwen2.5:3b  fallback=False  ms=5180
форс-фолбэк:     model=deepseek-chat fallback=True ms=1092

То есть локальная модель — основная, DeepSeek подключается сам, когда она не справляется. Никакого ручного переключения.

Ловушки (на будущее)

Ловушка Что выяснилось
публичный домен изнутри хоста SSL-handshake timeout (DPI/hairpin), проверять локально
deepseek-flash reasoning-модель: при малом max_tokens весь бюджет уходит в размышления, content пуст. Использовать deepseek-chat
Ollama 3b первый вызов 26 с загрузки модели > таймаута 20 с → ложное «зависла»
n8n active=true не значит «работает»: 27 дней без исполнений
Immich VM стояла 2,8 суток, а check-services каждый раз считал это «одиночным сбоем»

Что осталось реальным (не ложным)

  • «Шлюз туннель»: прокси 192.168.1.161:7890 живой, но выходной IP не 193.233.210.184 — это реальная проблема VPN-канала, не чекера.
  • 4 активных воркфлоу n8n ещё ни разу не запускались после перезапуска — нужен следующий шаг (Фаза 1).