Files
buryan-infra/ops/hermes/hermes_ai_digest.py
T

142 lines
6.7 KiB
Python

#!/usr/bin/env python3
"""Hermes AI-дайджест: ошибки журнала -> LLM -> короткая сводка.
Провайдер по умолчанию — локальный узел (приватно, без лимитов).
При его недоступности — DeepSeek API (быстро, внешний).
"""
import json
import subprocess
import sys
import urllib.request
LOCAL = "http://192.168.1.229:11434"
LOCAL_MODEL = "qwen2.5:7b"
DS_KEY_FILE = "/root/.deepseek-key"
DS_API = "https://api.deepseek.com/chat/completions"
def sh(cmd, limit=120):
try:
out = subprocess.run(cmd, shell=True, capture_output=True, text=True, timeout=60).stdout
except Exception as e:
out = "ошибка: %s" % e
return "\n".join(out.splitlines()[-limit:])
def ask_local(prompt, max_tokens=500):
body = json.dumps({
"model": LOCAL_MODEL, "prompt": prompt, "stream": False,
"options": {"num_predict": max_tokens, "temperature": 0.2},
}).encode()
req = urllib.request.Request(LOCAL + "/api/generate", data=body, method="POST")
req.add_header("Content-Type", "application/json")
with urllib.request.urlopen(req, timeout=600) as r:
return json.loads(r.read().decode()).get("response", "").strip()
def ask_deepseek(prompt, max_tokens=600):
key = open(DS_KEY_FILE).read().strip()
body = json.dumps({
"model": "deepseek-chat",
"messages": [{"role": "system", "content": "Ты краткий и точный системный администратор."},
{"role": "user", "content": prompt}],
"temperature": 0.2, "max_tokens": max_tokens,
}).encode()
req = urllib.request.Request(DS_API, data=body, method="POST")
req.add_header("Authorization", "Bearer " + key)
req.add_header("Content-Type", "application/json")
with urllib.request.urlopen(req, timeout=180) as r:
d = json.loads(r.read().decode())
return d["choices"][0]["message"]["content"].strip()
def maintenance_notes():
"""Намеренно остановленное — чтобы модель не советовала «запустить»."""
try:
import yaml
m = yaml.safe_load(open("/root/buryan-infra/ops/hermes/maintenance.yaml", encoding="utf-8")) or {}
out = []
for ct, info in (m.get("ct") or {}).items():
out.append("CT%s (%s) — остановлен намеренно: %s"
% (ct, info.get("name", "?"), info.get("reason", "")))
for unit, info in (m.get("units_off") or {}).items():
out.append("%s — выключен: %s" % (unit, info.get("reason", "")))
return "\n".join(out) or "нет"
except Exception:
return "нет"
def main():
errors_raw = sh("journalctl --since '-2h' -p err --no-pager 2>/dev/null | tail -60")
# артефакты загрузки до remount rw и до поднятия DNS — не инциденты
noise = ("Read-only file system", "Temporary failure in name resolution",
"No such file or directory")
errors = "\n".join(l for l in errors_raw.splitlines() if not any(n in l for n in noise))
status = sh("pct list 2>/dev/null | head -40")
disk = sh("df -h / /mnt/media 2>/dev/null | tail -3")
failed = sh("systemctl --failed --no-legend --no-pager 2>/dev/null | head -10")
maint = maintenance_notes()
if not errors.strip() and not failed.strip():
text = "Ошибок в журнале за 2 часа нет, упавших юнитов нет."
print("=== ОТВЕТ (без модели) ===\n" + text)
try:
nb = json.dumps({"message": text, "source": "hermes-ai", "level": "info"}).encode()
nreq = urllib.request.Request("http://127.0.0.1:9120/notify", data=nb, method="POST")
nreq.add_header("Content-Type", "application/json")
with urllib.request.urlopen(nreq, timeout=30) as nr:
print("\nnotify:", nr.status)
except Exception:
pass
return 0
prompt = (
"Ты администратор домашнего сервера. Составь короткую сводку по-русски (максимум 5 строк).\n"
"СТРОГИЕ ПРАВИЛА:\n"
"1. Используй ТОЛЬКО строки, приведённые ниже. Ничего не выдумывай.\n"
"2. Если строк нет — напиши: «в журнале пусто».\n"
"3. Учитывай раздел «НАМЕРЕННО ОСТАНОВЛЕНО»: эти сервисы трогать не надо.\n"
"4. Формат: «Требует внимания: …» / «Можно игнорировать: …» / «Действия: …».\n"
"5. В конце обязательно строка «Уверенность: N процентов» — насколько ты уверен, что выводы\n"
" следуют из приведённых строк. Если строк мало — ставь низкую уверенность.\n"
"6. После уверенности — «Доказательства:» и НЕ БОЛЕЕ ТРЁХ коротких цитат (до 90 символов).\n\n"
"=== ОШИБКИ ЖУРНАЛА (только это факты) ===\n%s\n\n"
"=== УПАВШИЕ ЮНИТЫ ===\n%s\n\n"
"=== НАМЕРЕННО ОСТАНОВЛЕНО ===\n%s\n\n"
"=== КОНТЕЙНЕРЫ ===\n%s\n\n=== ДИСКИ ===\n%s"
% (errors or "пусто", failed or "нет", maint, status, disk)
)
provider = "local"
try:
text = ask_local(prompt)
if not text:
raise RuntimeError("пустой ответ")
except Exception as e:
print("локальный узел не ответил (%s), переключаюсь на DeepSeek" % type(e).__name__,
file=sys.stderr)
provider = "deepseek"
try:
text = ask_deepseek(prompt)
except Exception as e2:
print("обе модели недоступны:", e2, file=sys.stderr)
return 1
print("=== ОТВЕТ (%s) ===" % provider)
print(text)
open("/tmp/hermes-ai-digest.txt", "w").write(text)
try:
nb = json.dumps({"message": text, "source": "hermes-ai", "level": "info"}).encode()
nreq = urllib.request.Request("http://127.0.0.1:9120/notify", data=nb, method="POST")
nreq.add_header("Content-Type", "application/json")
with urllib.request.urlopen(nreq, timeout=30) as nr:
print("\nnotify:", nr.status)
except Exception as e:
print("\nnotify ошибка:", type(e).__name__, str(e)[:120])
return 0
if __name__ == "__main__":
sys.exit(main())