[HUB] «Ollama висит» оказалось очередью от наших же 4 воркеров сбора: остановили — генерация 2.7 с, embeddings 0.35 с, RAG вернулся на вектора (score 0.68). Сторож теперь различает «занята» (low) и «зависла» (critical) по соединениям llm_research. Перезапуск Ollama не требовался
This commit is contained in:
1 parent
3c964d0008
commit
44a85978cd
2 files changed
+77
No files matched your search
@@ -6,6 +6,7 @@ runner завис. Именно так ломался RAG и LLM-сбор. Ра
|
||||
только по жалобам; теперь будет событие в шине.
|
||||
"""
|
||||
import json
|
||||
import subprocess
|
||||
import sys
|
||||
import urllib.request as u
|
||||
|
||||
@@ -55,6 +56,21 @@ def main():
|
||||
print("Ollama в порядке, моделей:", len(models))
|
||||
return 0
|
||||
except Exception as e:
|
||||
# Отличаем «занята нашими воркерами» от настоящего зависания:
|
||||
# если к Ollama есть соединения от llm_research — это очередь, а не сбой.
|
||||
busy = 0
|
||||
try:
|
||||
out = subprocess.run("ss -tnp 2>/dev/null | grep 11434 | grep -c llm_research",
|
||||
shell=True, capture_output=True, text=True, timeout=15).stdout
|
||||
busy = int((out or "0").strip() or 0)
|
||||
except Exception:
|
||||
busy = 0
|
||||
if busy:
|
||||
print("Ollama занята воркерами (соединений: %d): %s" % (busy, str(e)[:50]))
|
||||
notify("ℹ️ Ollama (192.168.1.229) занята сбором данных: %d воркеров "
|
||||
"держат генерацию. RAG временно на текстовом запасе." % busy,
|
||||
priority="low")
|
||||
return 0
|
||||
print("Ollama зависла на генерации:", str(e)[:80])
|
||||
notify("🔴 Ollama (192.168.1.229): сервер жив, но генерация висит "
|
||||
"(таймаут %ss). Нужен перезапуск на 229 — от этого зависит "
|
||||
|
||||
Reference in new issue
Block a user