124 lines
5.7 KiB
Python
Executable File
124 lines
5.7 KiB
Python
Executable File
#!/usr/bin/env python3
|
|
"""Ночной анализ на локальной LLM (задача №2).
|
|
|
|
Собирает факты за сутки (журнал ошибок, состояние CT/VM, гигиена, диск, бэкапы),
|
|
отдаёт локальной модели на разбор и пишет отчёт с ОБЯЗАТЕЛЬНОЙ проверкой:
|
|
каждое утверждение модели должно опираться на строку из фактов.
|
|
|
|
Отчёт: ops/night/report-YYYY-MM-DD.md
|
|
"""
|
|
import json
|
|
import os
|
|
import re
|
|
import subprocess
|
|
import sys
|
|
import urllib.request
|
|
from datetime import date
|
|
|
|
ROOT = "/root/buryan-infra"
|
|
OUT = ROOT + "/ops/night"
|
|
LLM = "http://192.168.1.229:11434"
|
|
MODEL = "qwen2.5:7b"
|
|
|
|
|
|
def sh(cmd, timeout=90):
|
|
try:
|
|
r = subprocess.run(cmd, shell=True, capture_output=True, text=True, timeout=timeout)
|
|
return (r.stdout or "").strip()
|
|
except Exception as e:
|
|
return "ошибка: %s" % e
|
|
|
|
|
|
def ask(prompt, max_tokens=600):
|
|
body = json.dumps({"model": MODEL, "prompt": prompt, "stream": False,
|
|
"options": {"num_predict": max_tokens, "temperature": 0.1}}).encode()
|
|
req = urllib.request.Request(LLM + "/api/generate", data=body, method="POST")
|
|
req.add_header("Content-Type", "application/json")
|
|
with urllib.request.urlopen(req, timeout=900) as r:
|
|
return json.loads(r.read().decode()).get("response", "").strip()
|
|
|
|
|
|
def collect():
|
|
facts = {}
|
|
noise = ("read-only file system", "name resolution", "openipmi", "postfix",
|
|
"nfsdcld", "wtmpdb", "grub-common")
|
|
raw = sh("journalctl --since '-24h' -p err --no-pager 2>/dev/null | tail -80")
|
|
facts["errors"] = "\n".join(l for l in raw.splitlines()
|
|
if not any(n in l.lower() for n in noise)) or "нет ошибок"
|
|
facts["cts"] = sh("pct list 2>/dev/null | awk 'NR>1 && $2!=\"running\" {print \"CT\"$1\" остановлен\"}'") or "все CT работают"
|
|
facts["vms"] = sh("qm list 2>/dev/null | awk 'NR>1 && $3!=\"running\" {print \"VM\"$1\" остановлен\"}'") or "все VM работают"
|
|
facts["failed"] = sh("systemctl --failed --no-legend --no-pager 2>/dev/null | awk '{print $2}'") or "нет"
|
|
facts["disk"] = sh("df -h / /mnt/media /mnt/archive 2>/dev/null | tail -3")
|
|
facts["mem"] = sh("free -h | head -2 | tail -1")
|
|
facts["backup"] = sh("ls -t /var/lib/vz/dump/*.tar.zst 2>/dev/null | head -1")
|
|
facts["hyg"] = sh("grep -c '^## ' %s/ops/hygiene/report-%s.md 2>/dev/null"
|
|
% (ROOT, date.today().isoformat())) or "0"
|
|
return facts
|
|
|
|
|
|
def verify(report, facts_text):
|
|
"""Проверяем, что модель не выдумала: ищем числа/имена из ответа в фактах."""
|
|
fake = []
|
|
for token in set(re.findall(r"CT\d{2,3}|VM\d{2,3}|\d+\.\d+ ?Gi", report)):
|
|
if token not in facts_text:
|
|
fake.append(token)
|
|
return fake
|
|
|
|
|
|
def main():
|
|
os.makedirs(OUT, exist_ok=True)
|
|
path = os.path.join(OUT, "report-%s.md" % date.today().isoformat())
|
|
f = collect()
|
|
facts_text = "\n".join(str(v) for v in f.values())
|
|
|
|
prompt = (
|
|
"Ты ночной дежурный администратор домашнего сервера. По фактам ниже напиши краткий отчёт "
|
|
"по-русски (максимум 8 строк).\n"
|
|
"ПРАВИЛА: используй ТОЛЬКО приведённые факты; если данных нет — пиши «нет данных»; "
|
|
"не придумывай имена контейнеров, числа и причины.\n"
|
|
"Структура: «Ночью: …» / «Требует внимания: …» / «Утром проверить: …» / "
|
|
"«Уверенность: N процентов».\n\n"
|
|
"=== ФАКТЫ ===\n"
|
|
"ОШИБКИ ЖУРНАЛА:\n%s\n\n"
|
|
"КОНТЕЙНЕРЫ: %s\n"
|
|
"ВИРТУАЛЬНЫЕ МАШИНЫ: %s\n"
|
|
"УПАВШИЕ ЮНИТЫ: %s\n"
|
|
"ДИСКИ:\n%s\n"
|
|
"ПАМЯТЬ: %s\n"
|
|
"СВЕЖИЙ БЭКАП: %s\n\nОТЧЁТ:"
|
|
% (f["errors"][:2500], f["cts"], f["vms"], f["failed"],
|
|
f["disk"], f["mem"], f["backup"] or "не найден")
|
|
)
|
|
|
|
try:
|
|
report = ask(prompt)
|
|
provider = "локальная qwen2.5:7b"
|
|
except Exception as e:
|
|
report = "локальная модель недоступна (%s)" % type(e).__name__
|
|
provider = "нет"
|
|
|
|
fake = verify(report, facts_text)
|
|
|
|
L = ["# Ночной анализ — %s" % date.today().isoformat(), "",
|
|
"Провайдер: %s" % provider, "",
|
|
"## Вывод модели", "", report or "(пусто)", ""]
|
|
if fake:
|
|
L += ["## ⚠️ Проверка фактов: обнаружены выдуманные сущности", "",
|
|
"Модель упомянула то, чего нет в фактах: %s" % ", ".join(sorted(fake)[:10]), "",
|
|
"**Вывод: этому отчёту доверять нельзя без ручной проверки.**", ""]
|
|
else:
|
|
L += ["## ✅ Проверка фактов", "",
|
|
"Все упомянутые CT/VM/числа присутствуют в исходных фактах.", ""]
|
|
L += ["## Исходные факты", "", "```", facts_text[:3000], "```", ""]
|
|
|
|
open(path, "w", encoding="utf-8").write("\n".join(L) + "\n")
|
|
print("отчёт:", path)
|
|
print("провайдер:", provider, "| выдуманных сущностей:", len(fake))
|
|
if report:
|
|
print("\n" + report[:600])
|
|
return 0
|
|
|
|
|
|
if __name__ == "__main__":
|
|
sys.exit(main())
|