#!/usr/bin/env python3 """Ночной анализ на локальной LLM (задача №2). Собирает факты за сутки (журнал ошибок, состояние CT/VM, гигиена, диск, бэкапы), отдаёт локальной модели на разбор и пишет отчёт с ОБЯЗАТЕЛЬНОЙ проверкой: каждое утверждение модели должно опираться на строку из фактов. Отчёт: ops/night/report-YYYY-MM-DD.md """ import json import os import re import subprocess import sys import urllib.request from datetime import date ROOT = "/root/buryan-infra" OUT = ROOT + "/ops/night" LLM = "http://192.168.1.229:11434" MODEL = "qwen2.5:7b" def sh(cmd, timeout=90): try: r = subprocess.run(cmd, shell=True, capture_output=True, text=True, timeout=timeout) return (r.stdout or "").strip() except Exception as e: return "ошибка: %s" % e def ask(prompt, max_tokens=600): body = json.dumps({"model": MODEL, "prompt": prompt, "stream": False, "options": {"num_predict": max_tokens, "temperature": 0.1}}).encode() req = urllib.request.Request(LLM + "/api/generate", data=body, method="POST") req.add_header("Content-Type", "application/json") with urllib.request.urlopen(req, timeout=900) as r: return json.loads(r.read().decode()).get("response", "").strip() def collect(): facts = {} noise = ("read-only file system", "name resolution", "openipmi", "postfix", "nfsdcld", "wtmpdb", "grub-common") raw = sh("journalctl --since '-24h' -p err --no-pager 2>/dev/null | tail -80") facts["errors"] = "\n".join(l for l in raw.splitlines() if not any(n in l.lower() for n in noise)) or "нет ошибок" facts["cts"] = sh("pct list 2>/dev/null | awk 'NR>1 && $2!=\"running\" {print \"CT\"$1\" остановлен\"}'") or "все CT работают" facts["vms"] = sh("qm list 2>/dev/null | awk 'NR>1 && $3!=\"running\" {print \"VM\"$1\" остановлен\"}'") or "все VM работают" facts["failed"] = sh("systemctl --failed --no-legend --no-pager 2>/dev/null | awk '{print $2}'") or "нет" facts["disk"] = sh("df -h / /mnt/media /mnt/archive 2>/dev/null | tail -3") facts["mem"] = sh("free -h | head -2 | tail -1") facts["backup"] = sh("ls -t /var/lib/vz/dump/*.tar.zst 2>/dev/null | head -1") facts["hyg"] = sh("grep -c '^## ' %s/ops/hygiene/report-%s.md 2>/dev/null" % (ROOT, date.today().isoformat())) or "0" return facts def verify(report, facts_text): """Проверяем, что модель не выдумала: ищем числа/имена из ответа в фактах.""" fake = [] for token in set(re.findall(r"CT\d{2,3}|VM\d{2,3}|\d+\.\d+ ?Gi", report)): if token not in facts_text: fake.append(token) return fake def main(): os.makedirs(OUT, exist_ok=True) path = os.path.join(OUT, "report-%s.md" % date.today().isoformat()) f = collect() facts_text = "\n".join(str(v) for v in f.values()) prompt = ( "Ты ночной дежурный администратор домашнего сервера. По фактам ниже напиши краткий отчёт " "по-русски (максимум 8 строк).\n" "ПРАВИЛА: используй ТОЛЬКО приведённые факты; если данных нет — пиши «нет данных»; " "не придумывай имена контейнеров, числа и причины.\n" "Структура: «Ночью: …» / «Требует внимания: …» / «Утром проверить: …» / " "«Уверенность: N процентов».\n\n" "=== ФАКТЫ ===\n" "ОШИБКИ ЖУРНАЛА:\n%s\n\n" "КОНТЕЙНЕРЫ: %s\n" "ВИРТУАЛЬНЫЕ МАШИНЫ: %s\n" "УПАВШИЕ ЮНИТЫ: %s\n" "ДИСКИ:\n%s\n" "ПАМЯТЬ: %s\n" "СВЕЖИЙ БЭКАП: %s\n\nОТЧЁТ:" % (f["errors"][:2500], f["cts"], f["vms"], f["failed"], f["disk"], f["mem"], f["backup"] or "не найден") ) try: report = ask(prompt) provider = "локальная qwen2.5:7b" except Exception as e: report = "локальная модель недоступна (%s)" % type(e).__name__ provider = "нет" fake = verify(report, facts_text) L = ["# Ночной анализ — %s" % date.today().isoformat(), "", "Провайдер: %s" % provider, "", "## Вывод модели", "", report or "(пусто)", ""] if fake: L += ["## ⚠️ Проверка фактов: обнаружены выдуманные сущности", "", "Модель упомянула то, чего нет в фактах: %s" % ", ".join(sorted(fake)[:10]), "", "**Вывод: этому отчёту доверять нельзя без ручной проверки.**", ""] else: L += ["## ✅ Проверка фактов", "", "Все упомянутые CT/VM/числа присутствуют в исходных фактах.", ""] L += ["## Исходные факты", "", "```", facts_text[:3000], "```", ""] open(path, "w", encoding="utf-8").write("\n".join(L) + "\n") print("отчёт:", path) print("провайдер:", provider, "| выдуманных сущностей:", len(fake)) if report: print("\n" + report[:600]) return 0 if __name__ == "__main__": sys.exit(main())