Раньше разбор брал первое слово-псевдоним, поэтому «сколько места» понималось как stats. Теперь каждая фраза проверяется целиком, вес = длина слов плюс бонус за количество, побеждает самое весомое совпадение. Добавлены живые фразы и синонимы (сколько места, свободного места, качается, фотографии, книги, последний бэкап, продолжить просмотр и др.). Проверено: rules_selftest 19 из 19 (было 13), llm_selftest по-прежнему 13 из 13, живые ответы корректны: «сколько места осталось» → Диски, «когда последний бэкап» → Последние архивы.
75 lines
2.6 KiB
Python
75 lines
2.6 KiB
Python
"""Проверка разбора фраз без LLM: понимает ли бот человека по правилам.
|
|
|
|
Запуск: python3 /opt/hub-bots/rules_selftest.py
|
|
"""
|
|
import sys
|
|
|
|
sys.path.insert(0, "/opt/hub-bots")
|
|
|
|
CASES = [
|
|
("что нового в медиатеке", "media", "new"),
|
|
("что нового", "media", "new"),
|
|
("сколько у нас фильмов", "media", "stats"),
|
|
("статистика", "media", "stats"),
|
|
("что сейчас качается", "media", "queue"),
|
|
("очередь загрузок", "media", "queue"),
|
|
("сколько места осталось", "media", "disk"),
|
|
("сколько свободного места", "media", "disk"),
|
|
("место на диске", "media", "disk"),
|
|
("найди дюна", "media", "find"),
|
|
("покажи фотографии", "photo", "stats"),
|
|
("какие книги есть", "book", "stats"),
|
|
("что нового из книг", "book", "new"),
|
|
("как дела дома", "home", "stats"),
|
|
("что сломалось в системе", "infra", "status"),
|
|
("когда последний бэкап", "infra", "backups"),
|
|
("кто в каких сервисах заведён", "infra", "users"),
|
|
("покажи тревоги", "infra", "alerts"),
|
|
("продолжить просмотр", "media", "resume"),
|
|
]
|
|
|
|
|
|
class FakeMatrix:
|
|
user_id = "@test:local"
|
|
|
|
def send_chunked(self, *a, **k):
|
|
return {}
|
|
|
|
def send(self, *a, **k):
|
|
return {}
|
|
|
|
def set_typing(self, *a, **k):
|
|
return {}
|
|
|
|
|
|
def make_bot(name):
|
|
from hub.bots import (BookBot, CamBot, DigestBot, HomeBot, InfraBot,
|
|
MediaBot, PhotoBot, SearchBot)
|
|
classes = {"media": MediaBot, "photo": PhotoBot, "book": BookBot,
|
|
"home": HomeBot, "infra": InfraBot, "search": SearchBot,
|
|
"digest": DigestBot, "cam": CamBot}
|
|
return classes[name](FakeMatrix(), "", dm_rooms=set(), owner="@owner:local")
|
|
|
|
|
|
def main():
|
|
ok = 0
|
|
for phrase, bot_name, expected in CASES:
|
|
bot = make_bot(bot_name)
|
|
try:
|
|
cmd, arg, raw = bot._parse(phrase, in_dm=True)
|
|
except Exception as e:
|
|
print(f" ❌ «{phrase}» — ошибка {str(e)[:60]}")
|
|
continue
|
|
good = cmd == expected
|
|
ok += 1 if good else 0
|
|
mark = "✅" if good else "❌"
|
|
print(f" {mark} «{phrase}» → {cmd or '—'} (ждали {expected})")
|
|
|
|
total = len(CASES)
|
|
print(f"\nпонято {ok} из {total} ({ok * 100 // total}%)")
|
|
return 0 if ok == total else 1
|
|
|
|
|
|
if __name__ == "__main__":
|
|
sys.exit(main())
|