8.6 KiB
8.6 KiB
Удобство взаимодействия: секретари, календарь, фото, Android (17.11.2026)
Границы
- Работа — вне этого спринта. Отдельный процесс, свои ограничения безопасности, отдельный секретарь позже. Здесь её не проектируем.
- Фокус: естественный язык, календари, фото, Android, статус.
Что уже есть (факты)
| Слой | Состояние |
|---|---|
| Matrix-боты | 9: media, photo, book, home, infra, search, digest, cam, secretary |
| Секретарь | маршрутизирует 12 намерений (find, recommend, status, who, play, infra, books, photos, home, digest…) в профильных ботов |
| Nextcloud | 35.0.2, Calendar 6.6.4, 8 пользователей (семья) — готов как CalDAV-хаб |
| Immich | API живой, но 0 фото, 0 альбомов, 0 людей — пустая библиотека |
| Android | интеграций нет (кроме Element) |
| OpenClaw | в инфраструктуре не найден — нужно уточнение |
Чего не хватает для «без команд»
Сейчас секретарь понимает 12 намерений и переключает профильного бота. Это команды «по смыслу», но не свободный разговор. Чтобы было «своими словами», нужен слой инструментов (tools):
- Распознавание намерения — LLM + подсказки, а не только словарь.
- Реестр инструментов — календарь, фото, медиа, дом, инфраструктура, задачи (позже), поиск.
- Политика действий — чтение сразу, изменение с подтверждением, опасное — только владелец.
- Память — контекст диалога и предпочтения (кто, какие календари).
- Аудит — что сделано, кем, когда (для семьи и разбора).
- Быстрый путь — частые фразы без LLM (статус, «кто дома»).
Архитектура «разговорного слоя»
Matrix (семья) ──► Секретарь (общий)
├─ быстрый путь (детерминированные фразы)
├─ LLM-интент + реестр tools
├─ политика (read/write/danger + подтверждение)
└─ аудит + память
Секретарь Работы — позже, отдельный бот/комната/политики (безопасность)
Принцип: один мозг — hub-bots + hub-core. Не запускать второй мозг (OpenClaw) параллельно, иначе два ответа на один вопрос.
Календари
Основа
- Nextcloud Calendar — источник истины (уже есть, 8 пользователей);
- Android → DAVx5 (CalDAV) — календари и контакты в системе;
- Telegram/Matrix — уведомления и создание событий секретарём;
- при необходимости — импорт из Google/Yandex (решить, что нужно).
Что умеет секретарь
- «что у меня завтра» → список событий;
- «запиши встречу в четверг в 15:00 с Ферреро» → событие + участники;
- «напомни за час» → напоминание;
- «перенеси на час» → изменение с подтверждением.
Семья
- общий семейный календарь + личные;
- права: кто видит чей календарь;
- напоминания через Hermes (надёжнее, чем клиентские).
Фото (Immich)
Сейчас
- библиотека пустая: 0 фото, 0 альбомов, 0 людей;
- ML (лица), дубликаты, альбомы — есть в Immich, но не включены/не заполнены;
- бэкап Immich (БД) настроен на 02:00.
План
- Загрузка с телефона: приложение Immich, авто-upload по Wi-Fi;
- ML-задачи: распознавание лиц → люди; кластеризация;
- Альбомы по людям: автоматически после разметки лиц;
- Дубликаты: встроенный поиск дубликатов + ручная разборка;
- Хранение: где лежит библиотека (VM 104), бэкап наружу;
- Секретарь: «найди фото с Полей за август», «сколько фото за неделю».
Важно
- распознавание лиц — приватность: данные локально, но доступ семьи надо осознанно настроить;
- пустая библиотека = сначала загрузка, потом альбомы/лица; иначе автоматизация нечего сортировать.
Android
| Задача | Приложение | Что нужно |
|---|---|---|
| Общение | Element | Matrix-аккаунты семьи |
| Календарь/контакты | DAVx5 | URL Nextcloud, логины |
| Фото | Immich | авто-upload, доступ к библиотеке |
| Файлы | Nextcloud | аккаунты |
| Дом (опционально) | Home Assistant | токен |
Статус медиа и «всего»
Добавить секретарю инструменты:
- «что качается» → очередь Radarr/Sonarr/qBittorrent;
- «что готово за неделю» → Jellyfin recently added;
- «что с сервером» → hub status;
- ежедневный дайджест: работа (позже), медиа, инфраструктура.
Этапы
| Этап | Что | Зачем |
|---|---|---|
| P1. Разговорный слой | tools + политика + память + аудит; календарь/фото/статус как инструменты | фундамент «без команд» |
| P2. Календари | Nextcloud CalDAV + DAVx5 + секретарь | ежедневное удобство |
| P3. Фото | Immich upload + ML + альбомы + дубликаты | семейный архив |
| P4. Статус/медиа | инструменты и дайджест | видимость |
| P5. Работа | отдельный спринт (безопасность) | позже |
Где я спорю
- «Совсем без команд» — достижимо для 80% бытовых запросов, но не для всех. Нужен честный fallback: «уточните» вместо догадки.
- OpenClaw — если это второй ассистент, он создаст второй мозг. Либо он становится слоем инструментов внутри нашего секретаря, либо мы сознательно заменяем hub-bots. Решать до старта.
- Не начинать с фото, пока нет загрузки: пустая Immich — не проблема автоматизации, а проблема онбординга.
- Локальная LLM (3b) слабовата для свободного диалога; для качества нужен DeepSeek на сложных запросах, а быстрые — детерминированно.
Вопросы
- OpenClaw — что именно имеете в виду и какую роль ему отводите?
- Календари: только Nextcloud или нужен импорт из Google/Yandex/Apple?
- Кто в семье пользуется Android и какие аккаунты заводим?
- Фото: кто загружает, нужен ли общий семейный альбом, приватность лиц?
- Начинаем с P1 (разговорный слой) — он нужен для всего остального?