[HUB] «Ollama висит» оказалось очередью от наших же 4 воркеров сбора: остановили — генерация 2.7 с, embeddings 0.35 с, RAG вернулся на вектора (score 0.68). Сторож теперь различает «занята» (low) и «зависла» (critical) по соединениям llm_research. Перезапуск Ollama не требовался

This commit is contained in:
root committed 2026-11-12 14:15:28 +03:00
1 parent 3c964d0008
commit 44a85978cd
2 files changed
+77

No files matched your search

+16
View File
@@ -6,6 +6,7 @@ runner завис. Именно так ломался RAG и LLM-сбор. Ра
только по жалобам; теперь будет событие в шине.
"""
import json
import subprocess
import sys
import urllib.request as u
@@ -55,6 +56,21 @@ def main():
print("Ollama в порядке, моделей:", len(models))
return 0
except Exception as e:
# Отличаем «занята нашими воркерами» от настоящего зависания:
# если к Ollama есть соединения от llm_research — это очередь, а не сбой.
busy = 0
try:
out = subprocess.run("ss -tnp 2>/dev/null | grep 11434 | grep -c llm_research",
shell=True, capture_output=True, text=True, timeout=15).stdout
busy = int((out or "0").strip() or 0)
except Exception:
busy = 0
if busy:
print("Ollama занята воркерами (соединений: %d): %s" % (busy, str(e)[:50]))
notify("ℹ️ Ollama (192.168.1.229) занята сбором данных: %d воркеров "
"держат генерацию. RAG временно на текстовом запасе." % busy,
priority="low")
return 0
print("Ollama зависла на генерации:", str(e)[:80])
notify("🔴 Ollama (192.168.1.229): сервер жив, но генерация висит "
"(таймаут %ss). Нужен перезапуск на 229 — от этого зависит "