Files
buryan-agent 584a4a257e Разбор фраз без LLM: 19 из 19 вместо 13 из 19
Раньше разбор брал первое слово-псевдоним, поэтому «сколько места» понималось
как stats. Теперь каждая фраза проверяется целиком, вес = длина слов плюс
бонус за количество, побеждает самое весомое совпадение.

Добавлены живые фразы и синонимы (сколько места, свободного места, качается,
фотографии, книги, последний бэкап, продолжить просмотр и др.).

Проверено: rules_selftest 19 из 19 (было 13), llm_selftest по-прежнему
13 из 13, живые ответы корректны: «сколько места осталось» → Диски,
«когда последний бэкап» → Последние архивы.
2026-10-19 21:25:51 +03:00

75 lines
2.6 KiB
Python

"""Проверка разбора фраз без LLM: понимает ли бот человека по правилам.
Запуск: python3 /opt/hub-bots/rules_selftest.py
"""
import sys
sys.path.insert(0, "/opt/hub-bots")
CASES = [
("что нового в медиатеке", "media", "new"),
("что нового", "media", "new"),
("сколько у нас фильмов", "media", "stats"),
("статистика", "media", "stats"),
("что сейчас качается", "media", "queue"),
("очередь загрузок", "media", "queue"),
("сколько места осталось", "media", "disk"),
("сколько свободного места", "media", "disk"),
("место на диске", "media", "disk"),
("найди дюна", "media", "find"),
("покажи фотографии", "photo", "stats"),
("какие книги есть", "book", "stats"),
("что нового из книг", "book", "new"),
("как дела дома", "home", "stats"),
("что сломалось в системе", "infra", "status"),
("когда последний бэкап", "infra", "backups"),
("кто в каких сервисах заведён", "infra", "users"),
("покажи тревоги", "infra", "alerts"),
("продолжить просмотр", "media", "resume"),
]
class FakeMatrix:
user_id = "@test:local"
def send_chunked(self, *a, **k):
return {}
def send(self, *a, **k):
return {}
def set_typing(self, *a, **k):
return {}
def make_bot(name):
from hub.bots import (BookBot, CamBot, DigestBot, HomeBot, InfraBot,
MediaBot, PhotoBot, SearchBot)
classes = {"media": MediaBot, "photo": PhotoBot, "book": BookBot,
"home": HomeBot, "infra": InfraBot, "search": SearchBot,
"digest": DigestBot, "cam": CamBot}
return classes[name](FakeMatrix(), "", dm_rooms=set(), owner="@owner:local")
def main():
ok = 0
for phrase, bot_name, expected in CASES:
bot = make_bot(bot_name)
try:
cmd, arg, raw = bot._parse(phrase, in_dm=True)
except Exception as e:
print(f" ❌ «{phrase}» — ошибка {str(e)[:60]}")
continue
good = cmd == expected
ok += 1 if good else 0
mark = "✅" if good else "❌"
print(f" {mark} «{phrase}» → {cmd or '—'} (ждали {expected})")
total = len(CASES)
print(f"\nпонято {ok} из {total} ({ok * 100 // total}%)")
return 0 if ok == total else 1
if __name__ == "__main__":
sys.exit(main())