Files
buryan-infra/ops/hub/RAG-WAS-DEAD.md
T

81 lines
4.0 KiB
Markdown
Raw Blame History

This file contains ambiguous Unicode characters
This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.
# RAG был мёртв: Hermes не знал документацию (10.11.2026)
## Как обнаружилось
Вопрос владельца: «это даст Hermes больше знаний?» — решил проверить, что
у Hermes есть **сейчас**, и нашёл настоящую поломку.
```
rag.find("вентилятор") → []
rag.find("стримерская") → []
rag.find("коридор свет") → []
```
## Причина: две разные базы
| Компонент | Куда пишет/читает |
|---|---|
| `ops/scripts/rag_index.py` (задание `rag-reindex`, 03:40) | **SQLite** `/root/buryan-infra/ops/rag/index.db` — **5086 фрагментов, 23 МБ** |
| `/opt/hub-core/rag.py` (инструмент `rag` у секретаря, `/rag`, `/ask`) | **PostgreSQL** `rag` — **0 строк** |
Индекс наполнялся, но его никто не читал. Агент искал в пустой таблице и
честно отвечал «в документации нет».
### Вторая поломка
Инструмент `rag` в `agent_llm.py` запрашивал `/rag?q=...` и читал поле
`answer`, но endpoint в режиме поиска отдаёт `found`. Итог тот же —
«в документации нет», даже когда фрагменты были.
## Что исправлено
### 1. `rag.py` читает реальный индекс
Добавлены `_load_sqlite()`, `_cos()`, `_find_sqlite()`:
* индекс загружается из SQLite (все 5086 фрагментов) с кэшем по `mtime`;
* косинусное сходство считается в Python (без pgvector);
* `find()` и `ask()` сначала пробуют SQLite, потом PostgreSQL.
Скорость: **0.3–0.4 с** на запрос.
### 2. Инструмент `rag` разбирает ответ правильно
Теперь берёт `found` и форматирует:
```
По документации:
• VPS-SSH-TUNNEL.md: Публичный SSH периодически рвётся…
• VPS-VPN-2026-10-31-FINAL.md: провайдер фильтрует трафик…
```
## Проверка
```
Q: "VPS SSH нестабилен"
→ VPS-SSH-TUNNEL.md score=0.85 ← документ, написанный сегодня
→ VPS-VPN-2026-10-31-FINAL.md 0.81
Секретарь: «что мы знаем про SSH к VPS» (8.6 с)
→ «VPS — единственный внешний вход… Публичный SSH периодически рвётся,
основной путь через SSH-туннель (VPS-SSH-TUNNEL.md). Сам VPS исправен…»
Секретарь: «почему был спам от ботов»
→ честно: «в журнале нет записей», предложил поиск по документации
```
## Что это значит
**Hermes действительно знает теперь больше** — но не потому, что мы что-то
добавили, а потому что починили существующее. Знания уже были в базе:
750 документов, 5086 фрагментов. Их просто не было видно.
## Осталось
1. **Один индекс вместо двух.** Сейчас `rag_index.py` (SQLite) и `rag.py`
(Postgres) — две реализации. Надо оставить одну: либо индексатор пишет в
Postgres, либо `rag.py` окончательно переезжает на SQLite.
2. **`hub-rag.service` падает** (exit 1) с 9 ноября — таймер у него недельный
(вс 04:00). Проверить, не дублирует ли он `rag-reindex`.
3. **Переиндексация раз в день** — новые документы попадают только в 03:40.