Files
root ad1728d161
lint / hygiene (push) Failing after 21s
standard / check (push) Successful in 7s
[P0] Реестр автоматизаций + скрипт LLM-аудита Комбайна
2026-11-18 11:52:15 +03:00

145 lines
8.6 KiB
Python
Executable File
Raw Permalink Blame History

This file contains ambiguous Unicode characters
This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.
#!/usr/bin/env python3
"""LLM-аудит «Комбайна»: собирает досье (данные + доки), классифицирует устройства, ищет проблемы."""
import json
import os
import re
import subprocess
import sys
import time
import urllib.request
REPO = "/root/buryan-infra"
OUT = REPO + "/ops/audits"
VDS = "root@10.88.0.1"
ROOM = "!puEdcZCc87kKoCm3mX5bbjrTS-Skv2XCZg7JJBKOMw0"
HS = "http://192.168.1.155:8008"
def sh(cmd, timeout=60):
r = subprocess.run(cmd, shell=True, capture_output=True, text=True, timeout=timeout)
return ((r.stdout or "") + (r.stderr or "")).strip()
def redact(s):
s = re.sub(r"(?i)(token|key|password|passwd|secret)\s*[=:]\s*\S+", r"\1=[REDACTED]", s)
s = re.sub(r"sk-[A-Za-z0-9]{10,}", "[REDACTED_KEY]", s)
return s
def context():
p = []
p.append("# ДОСЬЕ «КОМБАЙН» (Buryans Hub)\n")
p.append("## Задача владельца\n")
p.append("""
Нужно собрать всю информацию по «Комбайну» и провести аудит.
Обязательно разделить устройства по группам:
1) Терминалы интеграционные (модульные кодеки/комплекты).
2) Видеобары гарнитурного/настольного типа (компактные бары).
3) Видеобары с SIP/H.323 (нативная телефония/протоколы).
4) USB/BYOD и периферия.
5) Аудио/аксессуары/инфраструктура.
Проанализировать, как улучшить Комбайн и собрать его в единую структуру,
а не кучу раздельных историй. Найти проблемные места, предложить целевые
группы/линии/роли, целевую архитектуру и roadmap.
""")
p.append("## Ключевые доки (хост)\n")
for f in ("COMBINE-PROJECT-ANALYSIS.md", "audits/LLM-COMBINE-STATUS-2026-11-13.md",
"work/COMBINE-MERGE.md", "work/COMBINE-ARCHITECTURE.md"):
path = os.path.join(REPO, "ops", f)
if os.path.exists(path):
p.append("\n### " + f + "\n```\n" + open(path, encoding="utf-8").read()[:12000] + "\n```\n")
p.append("## План (локальные доки)\n")
for f in ("ARCHITECTURE-FULL.md", "scenario_model.md", "SERVICE-MAP.md",
"WORKPROCESS-ARCHITECTURE.md", "RESEARCH-PROGRAM.md",
"datasheet_format.md", "PROJECTS-PRACTICES.md"):
path = "/tmp/combine-docs/plan/" + f
if os.path.exists(path):
p.append("\n### " + f + "\n```\n" + open(path, encoding="utf-8").read()[:10000] + "\n```\n")
p.append("## Каталог устройств (raw)\n```yaml\n" + open("/opt/work-hub/compat/catalog.yaml", encoding="utf-8").read() + "\n```\n")
p.append("## Значения/атрибуты (raw)\n```yaml\n" + open("/opt/work-hub/compat/values.yaml", encoding="utf-8").read()[:18000] + "\n```\n")
p.append("## Комплекты (raw)\n```yaml\n" + open("/opt/work-hub/compat/kits.yaml", encoding="utf-8").read() + "\n```\n")
p.append("## Граф: статистика\n```\n" + sh("grep -c '^- ' /opt/work-hub/compat/graph.yaml; head -40 /opt/work-hub/compat/graph.yaml") + "\n```\n")
p.append("## Features / interfaces (первые строки)\n```yaml\n" + sh("head -60 /opt/work-hub/compat/features.yaml; echo ---; head -40 /opt/work-hub/compat/interfaces_verified.yaml") + "\n```\n")
p.append("## Сервисы и веб\n```\n" + sh("for p in 8095 8101 8102 8103 8104 8105 8106 8107; do echo -n \"$p \"; curl -s -o /dev/null -w '%{http_code}\\n' -m 2 http://127.0.0.1:$p/; done") + "\n```\n")
p.append("## LLM-сбор: статус\n```\n" + sh("ls /opt/work-hub/research 2>/dev/null | head; find /opt/work-hub -name 'results-*.jsonl' 2>/dev/null | wc -l") + "\n```\n")
return redact("\n".join(p))[:90000]
VDS_SCRIPT = r'''#!/usr/bin/env python3
import json, urllib.request
key=open("/tmp/dskey").read().strip()
ctx=open("/tmp/combine-context.md",encoding="utf-8").read()
system=("Ты — независимый архитектор продуктов и аудитор. Отвечай по-русски, структурно, без воды. "
"Не выдумывай фактов; если данных нет — пиши 'в данных отсутствует'. "
"Твоя задача — превратить разрозненные данные в единую структуру.")
user="""Проведи максимально глубокий аудит «Комбайна» по досье.
Обязательно:
1. Собери полную карту: какие сущности/устройства/линии/роли/протоколы есть.
2. Раздели ВСЕ устройства по группам:
A. Терминалы интеграционные (модульные кодеки/комплекты)
B. Видеобары гарнитурного/настольного типа
C. Видеобары с SIP/H.323
D. USB/BYOD и периферия
E. Аудио/аксессуары/инфраструктура/пассив
Для каждой группы: критерии, список моделей из каталога, что отсутствует.
3. Найди проблемы: данные, дубли, алиасы, отсутствие vendor/domain/protocols,
разрозненные сервисы, LLM-факты не в каталоге, неполные атрибуты.
4. Предложи целевую структуру Комбайна: домены, линии, роли, протоколы,
каталог, граф, комплекты, проекты; как свести 9 сервисов в понятную систему.
5. Roadmap P0/P1/P2 на 2–4 недели, критерии готовности и метрики.
6. Отдельно: как классифицировать «SIP/H.323» и что нужно добавить в данные.
7. 5 главных рисков и 5 возможностей.
ДОСЬЕ:
""" + ctx
body={"model":"deepseek-chat","temperature":0.2,"max_tokens":8000,
"messages":[{"role":"system","content":system},{"role":"user","content":user}]}
req=urllib.request.Request("https://api.deepseek.com/chat/completions",
data=json.dumps(body).encode(),
headers={"Content-Type":"application/json","Authorization":"Bearer "+key},method="POST")
try:
with urllib.request.urlopen(req,timeout=300) as r: d=json.loads(r.read().decode())
out=d["choices"][0]["message"]["content"]
except Exception as e:
out="# Ошибка аудита\n\n"+str(e)[:1000]
open("/tmp/combine-report.md","w",encoding="utf-8").write(out)
print("chars",len(out))
'''
def send_matrix(text):
tok = open("/root/.matrix-admin-token").read().strip()
txn = "combine-%d" % int(time.time() * 1000)
body = json.dumps({"msgtype": "m.text", "body": text}).encode()
url = "%s/_matrix/client/v3/rooms/%s/send/m.room.message/%s?access_token=%s" % (HS, ROOM, txn, tok)
req = urllib.request.Request(url, data=body, headers={"Content-Type": "application/json"}, method="PUT")
with urllib.request.urlopen(req, timeout=20) as r:
return r.status
def main():
ctx = context()
open("/tmp/combine-context.md", "w", encoding="utf-8").write(ctx)
open("/tmp/combine_vds.py", "w", encoding="utf-8").write(VDS_SCRIPT)
print("context chars:", len(ctx))
sh("scp -q -o BatchMode=yes /root/.deepseek-key %s:/tmp/dskey" % VDS)
sh("scp -q -o BatchMode=yes /tmp/combine-context.md /tmp/combine_vds.py %s:/tmp/" % VDS)
sh("ssh -o BatchMode=yes %s 'chmod 600 /tmp/dskey && python3 /tmp/combine_vds.py'" % VDS, timeout=600)
sh("scp -q -o BatchMode=yes %s:/tmp/combine-report.md /tmp/combine-report.md" % VDS)
sh("ssh -o BatchMode=yes %s 'rm -f /tmp/dskey /tmp/combine-context.md /tmp/combine_vds.py'" % VDS)
report = open("/tmp/combine-report.md", encoding="utf-8").read() if os.path.exists("/tmp/combine-report.md") else "# Ошибка\n"
ts = time.strftime("%Y%m%d-%H%M")
dst = "%s/COMBINE-LLM-AUDIT-%s.md" % (OUT, ts)
open(dst, "w", encoding="utf-8").write("# LLM-аудит «Комбайна» %s\n\n" % time.strftime("%d.%m.%Y %H:%M") + report)
print("saved:", dst)
try:
send_matrix("🧩 **LLM-аудит Комбайна готов** (%s)\n\n%s\n\n…полный отчёт: `%s`" % (ts, report[:1800], dst))
except Exception as e:
print("matrix:", e)
return 0
if __name__ == "__main__":
sys.exit(main())