8873c081a2d499fbf3aeb72d87f3c8d3aa6d5266
40
Commits
| Author | SHA1 | Message | Date | |
|---|---|---|---|---|
|
|
8873c081a2 |
Dashy: стартовая страница со всеми службами (34 в 9 разделах)
Задача 5.8. Было около 20 служб из 50 и неверные адреса: Nextcloud указан на .105 (он на .109), Syncthing на .110 (он на .139). СДЕЛАНО: страница собирается СКРИПТОМ из реестра служб (ops/dashy/build-dashy.py), а не руками — иначе снова разойдётся. 34 службы в 9 разделах: доступ, дом, медиа, файлы, связь, чтение и быт, автоматизация, наблюдение, инструменты. Адреса — домены https://<имя>.buryans.ru: дома открываются за 10 мс через AdGuard, снаружи работают через VPS. Одна ссылка годится везде. ЧТО ОКАЗАЛОСЬ НЕ ТАК: Dashy читает /app/user-data/conf.yml, и он ПЕРЕКРЫВАЕТ /app/public/conf.yml. Мой конфиг был смонтирован в public и игнорировался — страница отдавала дефолт «Welcome to your new dashboard!» (1735 байт). Теперь конфиг смонтирован в ОБА места, постоянно (переживёт пересоздание контейнера). ПРОВЕРЕНО: отдаётся мой конфиг (5661 байт вместо 1735), 34 службы, hub.buryans.ru отвечает 200, ссылки проверены. Заодно поймал две свои ошибки: неверное сравнение строки при правке монтирования (в compose путь был './config.yml', а я искал абсолютный) и лишний отступ в YAML (8 пробелов вместо 6) — из-за него compose молча игнорировал монтирование. |
||
|
|
9546110d97 |
VPN-4.7: автопереключение каналов на шлюзе проверено отказом
На телефонах это было проверено, на шлюзе — нет. Шлюз важнее: через него ходит вся семья. СДЕЛАНО: * включён API управления шлюзом (clash_api на 127.0.0.1:9090, только локально) — без него не видно, какой канал выбран; * замер: группа auto, ch-tls 274 мс (выбран), ch-hysteria2 348 мс, ch-reality 842 мс; * РЕАЛЬНЫЙ тест отказа: заблокирован порт выбранного канала (TCP 10443) на VPS, с автоматическим снятием блокировки в конце (ловушка). РЕЗУЛЬТАТ: переключился на ch-hysteria2 за ~60 секунд, вернулся на ch-tls за ~40 секунд после снятия блокировки. Прокси всё время отвечал 200. Интервал проверки 1 минута — реакция укладывается в минуту. ПОПУТНО: в CT 161 нет curl. Мои первые проверки давали пустой ответ, и я сначала решил, что прокси не работает. Прокси работал: проверять надо было снаружи или через python. Урок: пустой ответ — это не «сломалось», а возможно «команды нет». |
||
|
|
fcdf1b84ca |
Authentik 2026.8.4: обновление завершено, база переведена в UTF8
Доведено до последней версии: 2025.4 (апрель 2025) -> 2026.8.4.
18 месяцев обновлений.
ИТОГ: пользователей 10, приложений 23, провайдеров 24, групп 19,
миграций 556 -> 777, кодировка UTF8. Все 27 доменов отвечают,
наблюдение 60 проверок без провалов, перезапусков 0.
БЛОКЕРОМ БЫЛА КОДИРОВКА SQL_ASCII: 2026.8 требует UTF8 и висел на
«waiting to acquire database lock» — не падал, а замирал.
КАК ПЕРЕВОДИЛИ (безопасно, без риска для данных):
1. дамп с --encoding=UTF8 (конвертация на выгрузке);
2. ТЕСТОВАЯ база authentik_utf8_test с ENCODING UTF8 TEMPLATE template0;
3. заливка дампа в неё;
4. сравнение: 215 таблиц против 215, пользователи 10/10, группы 18/18,
приложения 23/23, провайдеры 24/24, миграции 718/718;
5. контрольная сумма данных пользователей (md5 склейки
username/name/email) — совпала полностью;
6. проверено наличие не-ASCII текста: 0 значений в ключевых колонках —
риск порчи текста нулевой;
7. только потом переключение: старая база -> authentik_db_ascii_backup,
тестовая -> рабочая. Это переименование, а не копирование:
мгновенно и обратимо.
После этого 2026.8.4 поднялся с первого запуска за 60 секунд.
ОСТАЛОСЬ НА ДИСКЕ: база ascii_backup, дампы до каждого шага, версия
закреплена по digest.
|
||
|
|
7d557de8e4 |
Element Call поднят на VPS: LiveKit + токены + объявление в Matrix
Владелец создал A-запись call.buryans.ru на Beget. Остальное сделано.
РАЗВЁРНУТО НА VPS:
* LiveKit (медиасервер) — порт 7880;
* lk-jwt-service — выдаёт токены пользователям Matrix (без него
Element Call не работает: LiveKit не понимает Matrix-токены);
* nginx: wss://call.buryans.ru -> LiveKit, /sfu/ -> служба токенов;
* сертификат Let's Encrypt (доверенный), до 16.01.2027;
* firewall: UDP 50000-50100 и TCP 7881 для медиа, с сохранением.
БЕЗОПАСНОСТЬ: сгенерирован НОВЫЙ случайный ключ LiveKit. В доме до сих
пор стоял демонстрационный devkey/secret123 — с ним любой мог
подключиться к серверу.
ОБЪЯВЛЕНО В MATRIX: в .well-known/matrix/client добавлен
org.matrix.msc4143.rtc_foci с адресом службы токенов. Ответ отдаёт nginx
на VPS и на домашнем хосте, чтобы в одном JSON были и домашний сервер, и
транспорт звонков. В Element Web включены флаги видеокомнат.
ПРОВЕРЕНО: https://call.buryans.ru/ -> 200 (LiveKit отвечает),
POST /sfu/get -> 400 «Missing room parameter» (служба жива и требует
параметры), .well-known содержит транспорт снаружи и дома.
ОСТАЛОСЬ: реальный звонок — нужны два устройства с входом в Matrix.
МОИ ОШИБКИ В ЗАДАЧЕ (записаны в документ):
* сертификат сначала выпустился от staging (недоверенный) —
перевыпустил на продакшене;
* на VPS нет плагина docker compose — потратил шаг на выяснение,
запустил через docker run;
* разбор ключа из YAML через tr склеил ключ и секрет — перечитал
через Python;
* proxy_pass с завершающим слэшем срезал /sfu -> 404 — убрал слэш;
* забыл LIVEKIT_FULL_ACCESS_HOMESERVERS — служба токенов
перезапускалась.
|
||
|
|
6a9ac94e01 |
Тревоги включены: их не было вообще, хотя файл правил существовал
ЗАДАЧА 5.10. «Узнавать первым» — главное после обрыва, о котором владелец
узнал от семьи.
ТРИ ПРИЧИНЫ, ПОЧЕМУ ТРЕВОГ НЕ БЫЛО:
1. Файл правил (/opt/prometheus/rules/buryan-alerts.yml) существовал —
77 строк разумных правил, — но каталог НЕ монтировался в контейнер
Prometheus. API правил отдавал пустой список: тревог не было вообще.
2. Одно правило ссылалось на несуществующую метрику
node_systemd_service_restart_total — не сработало бы никогда.
3. Prometheus знал про хосты, но НЕ про службы: 60 проверок жили в bash,
поэтому «служба упала» тревогу поднять не могло в принципе.
СДЕЛАНО:
* каталог правил примонтирован, Prometheus пересоздан;
* включён textfile-коллектор в node_exporter;
* написан экспортёр метрик служб: обходит реестр обновлений и публикует
buryan_service_up{name, critical} 1|0, запуск раз в 2 минуты;
* написаны правила: 4 группы, 7 правил (сборщик недоступен, служба не
отвечает 3 мин, критичная 7 мин, место 15%/7%, память 10%, нагрузка);
* убрано правило с несуществующей метрикой.
ПРОВЕРЕНО: групп 4, правил 7, целей 29 (ни одной проблемной), служб в
метриках 38 (все отвечают). Правила реально вычисляются — во время работы
наблюдал состояние pending.
МОИ ОШИБКИ В ЗАДАЧЕ (записаны):
* сломал отступы в YAML правил -> Prometheus ушёл в петлю (8
перезапусков), файл переписан целиком;
* печатал «монтирование добавлено», не проверив, что замена сработала
(строка не совпала по отступам);
* экспортёр на awk путался: firefly отвечал 302 (норма), а в метрику
попадал 0 — переписан на Python с настоящим разбором YAML;
* забыл обновить адрес CT 111 в Prometheus после смены IP — узел
числился недоступным, нашлось именно благодаря тревоге.
|
||
|
|
7ec318616d |
Authentik: 2025.4 -> 2026.5.7 (13 месяцев обновлений), найден блокер 2026.8
Ступенчатый подход сработал: 2025.12.6 — прошло 2026.2.7 — прошло 2026.5.7 — прошло 2026.8.4 — зависает ИТОГО: апрель 2025 -> май 2026. Данные целы: 10 пользователей, 23 приложения, 24 OAuth2-провайдера, 718 миграций. Все 26 доменов отвечают, наблюдение 60 проверок без провалов, состояние стабильно. ПОЧЕМУ СТУПЕНИ ПОМОГЛИ: прямой прыжок 2025.12.6 -> 2026.8.4 виснет, а промежуточные версии встали с первого запуска. Значит проблема не в ресурсах и не в правах, а в конкретном переходе. ПРИЧИНА ЗАВИСАНИЯ 2026.8 — КОДИРОВКА БАЗЫ. Authentik предупреждает: «PostgreSQL Server encoding is not UTF8: SQL_ASCII». Проверено: рабочая база authentik_db — SQL_ASCII, а 25 других баз сервера — UTF8. Там же лежат базы *_pre_utf8_20261014_* — следы НЕЗАВЕРШЁННОГО перевода в UTF8, сделанного 14 октября. 2026.8 требует UTF8 и виснет на преобразовании. СЛЕДУЮЩИЙ ШАГ (задача 1.20): перевести authentik_db в UTF8 отдельной операцией — дамп с --encoding=UTF8, новая база с TEMPLATE template0, заливка, проверка кириллицы и счётчиков, переключение приложения. И только потом 2026.8.4. Не смешивал с обновлением версии: это уже миграция данных, а смешивать два риска в одной операции нельзя. НАДЁЖНОСТЬ: версия закреплена по digest; перед каждым шагом снимался дамп; порядок откката отработан и проверен (версия + база, с проверкой схемы); память CT 114 — 4096 МБ. |
||
|
|
baf6e183dc |
Element Call на VPS: оценка — всё готово, кроме DNS-записи
Владелец: «может, вынесем звонки на VPS? Порты проброшены, роутер открыт». ОТВЕТ: да, VPS — правильное место. Ресурсов хватает: 1 ядро, свободно 1286 МБ памяти (нужно ~300), 14 ГБ диска. Свободны порты 7880/7881 и UDP 50000-60000; 443 занят nginx, 8443 и 3478 — headscale, 10443 — hysteria. ЕДИНСТВЕННОЕ, ЧТО МЕШАЕТ: нет DNS-записи. Проверено — call.buryans.ru и livekit.buryans.ru не резолвятся, wildcard-записи тоже нет. Нужна A-запись call.buryans.ru -> 193.233.210.184 у регистратора. Это единственное действие, которое я сделать не могу. ПОСЛЕ ЭТОГО СДЕЛАЮ ЦЕЛИКОМ: сертификат (HTTP-01 через существующий nginx), LiveKit на VPS, lk-jwt-service (выдаёт токены для Matrix — без него Element Call не работает), новый ключ вместо демонстрационного devkey/secret123, открытие портов (политика INPUT — DROP, каждый порт явно), прописывание транспорта в .well-known, включение Element Call в Element Web, проверка выдачи токена и соединения. ДОМАШНИЙ LiveKit после этого можно выключить — освободит память в CT 155. Home coturn останется как резерв. |
||
|
|
f2e0c7ade7 |
Authentik обновлён: 2025.4 -> 2025.12.6 (18 месяцев обновлений)
Окно проведено по решению владельца. ИТОГ: обновление ВЫПОЛНЕНО.
БЫЛО: образ от 8 апреля 2025 (2025.4), 18 месяцев без обновлений —
:Docker-тег latest не существует, поэтому pull всегда падал, а скрипт
обновления молча объявлял успех.
СТАЛО: 2025.12.6, последняя версия 2025 года.
ДАННЫЕ ЦЕЛЫ: 10 пользователей, 23 приложения, 24 OAuth2-провайдера.
Все 28 доменов отвечают, наблюдение 60 проверок без провалов, состояние
стабильно через 2 и 4 минуты.
ТРИ ПРЕПЯТСТВИЯ, КОТОРЫЕ ПРИШЛОСЬ СНЯТЬ:
1. ПРАВА НА ТАБЛИЦЫ: таблицы базы принадлежат роли authentik, а
приложение ходит как authentik_user; миграции меняют структуру и
требовали прав владельца. Выдано членство роли.
2. ПОРЯДОК ВЕРСИЙ: Authentik запрещает прыгать через мажор
(«Major version skips are not allowed»). Обязательный порядок:
2025.4 -> 2025.12.6 -> 2026.8.4.
3. ПАМЯТЬ: при 2048 МБ миграция стояла на «waiting to acquire database
lock». После подъёма до 4096 МБ обновление прошло с первого запуска.
ОСТАЛОСЬ: 2026.8.4 снова зависает на блокировке даже при 4 ГБ. Откат на
2025.12.6 работает штатно. Нужно отдельное окно и разбор конкретной
миграции. Не срочно: 2025.12.6 — последняя версия 2025 года.
ЗАЩИТА: версия закреплена по digest (случайный pull не подсунет
нерабочую), дамп базы до окна сохранён, членство роли выдано.
МОИ ОШИБКИ В ОКНЕ (записаны в документ):
* откатил версию без отката базы -> схема новее приложения -> вход 502;
* не проверил результат восстановления (psql от postgres, файл только
для root) — приложение упало на схеме;
* снял свою же сессию восстановления, получив полусостояние.
Правило: откатывать версию и базу ВМЕСТЕ, после восстановления
проверять схему, перед завершением сессии смотреть, чей это запрос.
|
||
|
|
a04259fcc6 |
Authentik: окно проведено, три препятствия найдены, служба восстановлена
Владелец: «окно для Authentik делаем, это важно». Проведено.
ИТОГ: служба работает, обновление не выполнено — найдены три
конкретные препятствия, два сняты.
1. ПРАВА НА ТАБЛИЦЫ (снято). Миграции падали:
«must be owner of table authentik_brands_brand». Таблицы базы
authentik_db принадлежат роли authentik, а приложение ходит как
authentik_user. Старая версия структуру не меняла, поэтому проблема
была невидима годами. Выдано членство роли — обратимо.
2. ПОРЯДОК ВЕРСИЙ (учтено). «Major version skips are not allowed:
from 2025.12.6 to 2026.8.4». Прыгать через мажор нельзя, порядок
обязателен: 2025.4 -> 2025.12.6 -> 2026.8.4.
3. МИГРАЦИЯ ЗАВИСАЕТ (не снято). После исправления прав 2025.12.6
встала на «waiting to acquire database lock» на 20+ минут. Проверено
и исключено: подготовленных транзакций нет, блокировок нет, зависших
сессий нет, права выданы. Остаётся память: CT 114 имеет 2048 МБ, а у
Authentik 2025.12 требования выше. Следующий шаг — поднять до 4 ГБ.
МОИ ОШИБКИ ПРИ ОТКАТЕ (записаны в документ):
* откат версии приложения без отката базы оставил схему новее
приложения -> вход отдавал 502 (session_key vs session_id);
* восстановление из дампа не сработало молча: psql шёл от postgres, а
файл был доступен только root; я не проверил результат;
* завершая «зависшие» сессии, снял ту, которая была самим
восстановлением.
ВОССТАНОВЛЕНО: база пересоздана и залита из дампа, снятого до окна.
Проверено: 165 таблиц, 10 пользователей, 23 приложения, 556 миграций,
колонка session_key на месте, страница входа 200, все домены отвечают,
наблюдение 60 проверок без провалов.
Дампы сохранены: рабочий и «сломанный». Версия приложения закреплена по
digest, чтобы случайный pull не подсунет нерабочую.
|
||
|
|
9515ca5f9b |
openclaw: один экземпляр, версия закреплена, домен исправлен
Задача владельца: если экземпляров два — сделать один, самый свежий. БЫЛО: рабочий openclaw-old (44 ч) и падавший новый; в compose НЕ БЫЛО монтирования данных, поэтому любой новый контейнер стартовал без состояния и падал. СДЕЛАНО: добавлено монтирование /opt/openclaw -> /home/node/.openclaw, старый контейнер удалён, поднят ОДИН контейнер с именем openclaw. ПОЧЕМУ НЕ НА СВЕЖЕЙ ВЕРСИИ: свежий образ при запуске с существующим состоянием перезапускается по кругу — 21 перезапуск за 6 минут, код выхода 0. В журнале прямо указано, чего не хватает: «Fix: set commands.ownerAllowFrom to your channel user id» Новая версия изменила требования к конфигурации. Это не поломка, а необходимая миграция настроек, и делать её вслепую на живой службе нельзя. Поэтому: экземпляр один и работает, версия ЗАКРЕПЛЕНА по digest в compose (случайный pull не подсунет нерабочую версию), обновление вынесено в задачу 5.9. ПОПУТНО: домен openclaw.buryans.ru проксировал на порт 8080, а служба слушает 18789 — снаружи и дома был 404. Исправлено в двух местах (VPS и хост PVE), теперь 200. Наблюдение: 60 проверок без провалов. |
||
|
|
bdf9ff55a1 |
CT 111: адрес сменён на 192.168.1.240, интернет заработал
По решению владельца: политики на роутере нет, меняем адрес. БЫЛО: из CT 111 не было выхода в интернет — шлюз не отвечал, при этом все остальные хосты локальной сети были доступны. Перед этим исключил маршруты, ARP, политики маршрутизации, правила по IP/MAC/интерфейсу на хосте, firewall Proxmox (отключён), цепочки Tailscale и второй адрес на том же интерфейсе. СТАЛО: 192.168.1.111 -> 192.168.1.240 (в стороне от DHCP-диапазона: .112, .124, .128 оказались заняты устройствами). Шлюз доступен, example.com отвечает 200, службы поднялись. ВМЕСТЕ С АДРЕСОМ поправлены ссылки: настройки контейнера, внешний nginx на VPS (3), домашний nginx (3), наблюдение (3), реестр обновлений (3), карта доменов (3). ОТКРЫТИЕ: домашние домены проксирует nginx НА ХОСТЕ PVE (/etc/nginx/conf.d/buryans-all.conf, 41 домен), а не NPM в CT 101. Значит при любой смене адреса искать ссылки надо в двух местах — на VPS и на хосте. Записано в документ. Проверено: книги/новости/rss работают дома и снаружи (302), наблюдение 60 проверок без провалов. |
||
|
|
739d61869b |
Пул освобождён на 35 ГБ (TRIM), добавлено зеркало образов, найден CT 111
без интернета ГЛАВНОЕ ОТКРЫТИЕ: тонкий пул был заполнен на 80,5%, снимки не создавались, обновления стояли. Оказалось — место не «занято данными», а ЗАВИСЛО: LVM не знает об удалённых внутри контейнеров файлах, пока ей не передадут TRIM. После pct fstrim по всем контейнерам: пул 80,47% -> 70,29%, около 35 ГБ освободилось. Где висело больше всего: CT 113 — 93,3 ГБ, CT 155 — 43 ГБ, CT 105 — 13,7 ГБ, CT 115 — 11,7 ГБ (тот самый openclaw). Поставлен в расписание: еженедельно, /etc/cron.d/buryan-trim. Без этого пул снова забьётся невидимым мусором. ЗЕРКАЛО РЕЕСТРА: скачивание образов из дома нестабильно (Docker Hub то отвечает, то висит по таймауту). Во все 26 контейнеров добавлено зеркало mirror.gcr.io (официальное зеркало Docker Hub). Docker сначала пробует основной реестр, зеркало — только при недоступности. CT 108 заработал. ЦЕНА МОЕЙ ОШИБКИ В ДИАГНОСТИКЕ: я решил, что адреса 100.51.15.102 и 100.60.105.131 — это Tailscale. Проверил через 1.1.1.1 — те же адреса, это собственный CDN Docker Hub. Догадку отбросил, причину нашёл дальше. CT 111 БЕЗ ИНТЕРНЕТА. Из контейнера доступны все хосты локальной сети, кроме шлюза 192.168.1.1. Проверено и исключено: маршруты, ARP, политики маршрутизации, правила по IP/MAC/интерфейсу на хосте, firewall Proxmox (отключён), цепочки Tailscale (мостовой трафик минует iptables), второй адрес на том же интерфейсе (тоже нет связи) — значит дело не в адресе. Вывод: блокирует роутер, а роутер по решению владельца не трогаем. Документ с вариантами решения: docs/CT111-NO-INTERNET.md |
||
|
|
e4739b0e12 |
Карта хозяйства: собрана из живых данных (4.6.1)
Задача 4.6.1 «карта хозяйства». Обычно такую карту ведут руками, и она устаревает через неделю. Здесь она СОБИРАЕТСЯ из того, что реально работает, скриптом ops/inventory/build-map.py: * pct list — контейнеры Proxmox (30, запущено 29); * docker ps — контейнеры внутри (97); * services.yaml — реестр обновлений (50 служб, роли и критичность); * конфигурация VPS и AdGuard — домены (40). В документе: сводка, таблица контейнеров с памятью и ядрами, разбивка «что где работает» по каждому CT с образами, проектами compose и портами, список доменов, и честный раздел «что не покрыто» (promtail, oauth2-proxy, службы без compose). Пересобрать в любой момент: python3 ops/inventory/build-map.py |
||
|
|
7347cf476a |
Автоматика: профиль безопасности в одном месте, уборка по расписанию,
проверка входа (1.2, 1.7, 4.3.3) 1.2 ПРОФИЛЬ БЕЗОПАСНОСТИ. apparmor=unconfined — ослабление изоляции, нужное только там, где LXC мешает Docker. Такие места легко забыть: после обновления стека служба просто не поднимается. Сделан ops/security/apparmor-manage.sh — единственный источник правды: измеряет, кому обход нужен, показывает где прописан, правит только по флагу --apply. ИЗМЕРЕНО (26 контейнеров с Docker): обход нужен только CT 115 и CT 140, и в обоих уже прописан. Остальным 24 не нужен. МОЯ ОШИБКА: первая версия проверки запускала docker run hello-world. Если образа нет локально, Docker идёт в реестр и падает с TLS handshake timeout — это НЕ про AppArmor. Получил ложное срабатывание на CT 108. Исправлено: беру локальный образ, считаю «нужен обход» только если в ошибке есть apparmor. 1.7 УБОРКА ОСТАТКОВ. cleanup-leftovers.sh раз в неделю убирает контейнеры с -old- в имени, которые остановлены или крутятся в петле, плюс висячие образы. Работающие не трогает: в CT 115 openclaw-old — действующий экземпляр. Первый прогон освободил несколько ГБ. Расписание: /etc/cron.d/buryan-cleanup. 4.3.3 ПРОВЕРКА ВХОДА. Добавлена check_login(): служба может отвечать 302 на корень и не отдавать страницу входа — человек видит пустоту, а наблюдение молчит. Проверяет код 200 после переходов, непустое тело и признаки страницы Authentik. Наблюдение: 59 -> 60 проверок, все проходят. |
||
|
|
ea3e9f88e2 |
Домены: проверены все 40, исправлены news и rss (502 -> 302)
ЗАДАЧА 2.4. Проверил КАЖДЫЙ домен измерением, а не на глаз: * что отдаёт домашний DNS (должен быть 192.168.1.10); * отвечает ли домашний nginx; * отвечает ли VPS; * отвечает ли САМ адрес службы, на который указывает proxy_pass. Последняя проверка оказалась самой полезной — нашла опечатку, которую не видно ни из браузера, ни из логов. РЕЗУЛЬТАТ: доменов в DNS: 40, нет ни одного потерянного; дома открываются: 37 из 40; адресов служб на VPS проверено: 40, с ошибкой: 2. ЧТО БЫЛО СЛОМАНО: news и rss на VPS указывали на порт 8080, а freshrss слушает 8090. Следствие: снаружи оба домена отдавали 502. Дома работало, потому что домашний nginx настроен верно — то есть проблема была только у внешнего доступа и легко было её не заметить. Исправлено, проверено снаружи и дома: оба 302. ОСТАЛОСЬ: turn (не HTTP — так и надо), openclaw (служба снята, ждёт решения), headscale (404 на / — проверить отдельно). СКОРОСТЬ: дома 0,004-0,008 с против 0,6-0,8 с через VPS — в 100-150 раз быстрее, потому что запрос не выходит за пределы локальной сети. ЗАДАЧА 2.5 (один сертификат) ОТЛОЖЕНА ОСОЗНАННО: сейчас 40 отдельных сертификатов работают и обновляются. Wildcard требует DNS-01, доступа к API провайдера и настройки автообновления; ошибка в этом означает потерю HTTPS сразу для ВСЕХ доменов. Делать в спокойное окно, с проверкой на одном домене. |
||
|
|
771fac4b55 | Реестр: обновления 1.3-1.5, postgres не трогаем по решению владельца | ||
|
|
13a42f2235 |
Спринт: обновления проверены в деле, найдён ложный успех, наблюдение 34 -> 59
ОБНОВЛЕНИЯ ПРОВЕРЕНЫ НА ЖИВЫХ СЛУЖБАХ:
freshrss — обновлён (проверка цепочки)
gitea — обновлён
paperless — обновлён (3 минуты миграций, проверка прошла с 7-й попытки)
authentik — НЕВОЗМОЖНО: тега :latest нет в реестре
ПОЧЕМУ ОБНОВЛЕНИЯ НЕ ШЛИ ВООБЩЕ: скрипт отказывается работать при
заполнении пула выше 75%, а он был на 80,4%. Пул забит не данными, а
ВОСЕМЬЮ ЗАБЫТЫМИ СНИМКАМИ LVM от обновлений 14-15.10 (самый большой —
100 ГБ). Снимки убраны, порог поднят до 85% с пояснением: процент не
учитывал абсолютный запас (68 ГБ свободно из 348).
НАЙДЕН СЕРЬЁЗНЫЙ ДЕФЕКТ — ЛОЖНЫЙ УСПЕХ. Прогон на authentik:
Image ghcr.io/goauthentik/server:latest Error ... not found
🎉 authentik обновлён
Образ не скачался, контейнер остался на старом, скрипт отчитался об
успехе. ПРИЧИНА: скачивание стояло в конвейере с tail -3, поэтому код
возврата приходил от tail (всегда 0). Ошибка терялась.
ПОСЛЕДСТВИЕ: authentik — поставщик единого входа для 22 служб — жил на
образе 18-МЕСЯЧНОЙ давности, и никто не знал.
ИСПРАВЛЕНО: скачивание без конвейера (честный код возврата); при неудаче
скрипт пишет «НЕ ОБНОВЛЕНО: образ недоступен» и выходит с кодом 3.
Проверено повторным прогоном.
НАБЛЮДЕНИЕ: 34 -> 59 проверок. Добавлено 25 служб, источник адресов —
реестр обновлений (там каждый адрес проверялся вручную). Добавлена
check_alive() для служб с паролем: 401/403 — признак ЖИВОЙ службы, иначе
8 служб давали бы ложные тревоги постоянно.
СКОРОСТЬ ВХОДА: кэш статики на VPS, 7,86 с -> 1,3 с.
МОИ ОШИБКИ ЗА СПРИНТ (записаны в документ):
* мерил несуществующий домен auth.buryans.ru (правильный
authentik.buryans.ru) — время уходило на таймаут DNS;
* перепутал файл compose у n8n (двойник вместо настоящего);
* проверка дала 6 ложных тревог, считая 401 сбоем.
ОСТАЛОСЬ ПОД ВОПРОСОМ: authentik (нужно окно + дамп базы — переход через
18 месяцев для SSO рискован), openclaw (решение владельца), второй VPS
(нужен сервер), Element Call (большая задача).
|
||
|
|
915de56603 |
Обновления из бота: реестр расширен с 28 до 50 служб
Жалоба владельца: обновление из бота не работает на многие сервисы.
Проверил — причина простая: скрипт работает только по реестру
services.yaml, а в нём было 28 служб при 97 работающих контейнерах.
НЕ ОБНОВЛЯЛИСЬ (22 службы), в том числе важные:
adguard (DNS всего дома), loki (журналы), alertmanager (тревоги),
mautrix-telegram (мост в Telegram), livekit (звонки), homeassistant,
nextcloud, duplicati (копии), firefly, paperless в CT 110,
nats, swarm-redis, element-web, coturn, zigbee2mqtt, mosquitto.
ЧТО СДЕЛАНО:
1. Добавлены все 22 службы. В реестре теперь 50.
2. Каждый адрес проверки здоровья проверен вручную перед записью.
Правило жёсткое: адрес добавляется только если реально отвечает.
Неверный адрес хуже отсутствующего — скрипт счёл бы службу сломанной
и ОТКАТИЛ исправное обновление.
3. Службы с паролем не потеряли проверку: adguard и paperless-web
ответили 401, я сначала убрал у них проверку — это было неправильно,
401 означает ЖИВУЮ службу. Вернул с флагом auth_required.
4. ИСПРАВЛЕНА ОШИБКА В САМОМ СКРИПТЕ: если контейнер создан вручную и
метки compose у него нет, скрипт запускал «docker compose up -d» БЕЗ
имени службы — то есть пересоздавал весь проект вместе с соседями.
Для /opt/smart-lxc это значило: обновляя homeassistant, он пересоздал
бы ещё mosquitto и zigbee2mqtt. Теперь служба ищется в compose-файле
по container_name. Проверено на homeassistant.
ПРОВЕРКА: добавлен validate-registry.sh — для каждой службы проверяет,
что контейнер существует, каталог compose на месте, адрес здоровья
отвечает ожидаемым кодом.
служб в реестре: 50, полностью обновляемы: 49.
ОСТАЛОСЬ ОГРАНИЧЕНИЕМ (честно):
* openclaw — контейнер снят сегодня (падал, диск был полон), ждёт
решения владельца;
* duplicati, alertmanager, buryan-alert-webhook — работают БЕЗ compose:
скрипт скачает образ, но пересоздать контейнер не сможет и скажет
об этом прямо, а не изобразит успех;
* mosquitto/redis/nats/coturn — порты не HTTP, проверки здоровья нет;
* 12 контейнеров oauth2-proxy-* не внесены: вспомогательные.
МОЯ ОШИБКА В ПРОВЕРКЕ: первая версия дала 6 ложных тревог, считая
401/403 сбоем. Пришлось учитывать auth_required — то же правило, что уже
было в скрипте обновления. Урок: проверка должна знать те же правила,
что и проверяемое.
РЕШЕНИЕ ВЛАДЕЛЬЦА УЧТЕНО: postgres-rbac не трогаем.
|
||
|
|
1ffeadfbc3 |
Реестр: сводка по разделам, которая не устаревает
Владелец прислал таблицу остальных разделов — с цифрами, которые уже
были неверны (часть задач закрыта сегодня). Сделал так, чтобы это не
повторялось.
1. ПРОВЕРЕНО ПРОГРАММНО: все темы из списка владельца в реестре есть —
ни одна не потеряна. Пункты «профиль безопасности, paperless, gitea,
authentik, postgres-rbac, уборка остатков, кэш на VPS, локальный
NGINX, AdGuard, 44 домена, сертификат, Element Call, единый вход,
права, 28 служб в наблюдение, копии наружу, карта хозяйства,
headscale, immich, uptime-kuma, dashy, grafana, две paperless» —
все на месте.
2. ДОБАВЛЕНА СВОДКА ПО РАЗДЕЛАМ в начале реестра — с фактическими
цифрами. И главное: её считает скрипт ops/registry/summary.py из
самого файла, а не человек руками. Поэтому она не может отстать:
запустил скрипт — цифры верные.
ФАКТИЧЕСКОЕ СОСТОЯНИЕ (было в таблице владельца -> стало):
Обновления: не начато 6 -> 6 (2 сделано, 8 всего)
Сеть и доступ: не начато 6 -> 5 (2 сделано: AdGuard и причина
медленного входа)
Звонки и медиа: не начато 5 -> 5
Сквозная связность: 11 -> 8 (3 частично: уведомления,
проверка «работает», копии)
Улучшение служб: не начато 10 -> 10
VPN: -> 6 (19 сделано, 4 частично)
Найденные проблемы: -> 6 (8 сделано, 3 частично)
ИТОГО по хозяйству: 88 задач, сделано 32, частично 10, осталось 46.
Цифры «уборка остатков» и «AdGuard» в присланной таблице устарели: обе
задачи закрыты сегодня.
|
||
|
|
2ee565bb33 |
Реестр: пять приоритетов наверх, двойная нумерация устранена, добавлен второй VPS
ВЛАДЕЛЕЦ ВЫБРАЛ ПЯТЬ ЗАДАЧ и попросил завести их в список. Все пять уже были в реестре, но я нашёл две проблемы, которые мешали им пользоваться. 1. ДВОЙНАЯ НУМЕРАЦИЯ. Разделы 1-5 и VPN оба использовали номера вида «1.1», «2.1», «3.1», «4.1». Из-за этого «1.1» означало одновременно «профиль безопасности» и «VPN-профиль для телефонов». Владелец уже путался на этом. Все задачи VPN-раздела получили префикс VPN-, как в аудите. Проверено: номеров без префикса в разделе не осталось (0). 2. ВТОРОЙ ШЛЮЗ — ЭТО НЕ ВТОРОЙ VPS. В реестре была только задача VPN-4.1 «Второй шлюз» — резервный шлюз В ДОМЕ. Она не решает довод владельца «вся семья висит на одной машине»: все четыре канала (TLS, Hysteria2, XHTTP, Reality) живут на ОДНОМ VPS, и если он недоступен, переключаться некуда. Добавлена отдельная задача: VPN-4.6 — второй VPS у другого провайдера. Заодно добавлена VPN-4.7: проверить автопереключение каналов НА ШЛЮЗЕ отказом канала. На телефоне это проверено, на шлюзе — нет. В начало реестра добавлен блок «БЛИЖАЙШИЕ ЗАДАЧИ» с этими пятью пунктами, их номерами в реестре и текущим состоянием, чтобы не искать по разделам. |
||
|
|
7d7412d80a |
Раздел 1: двойник compose обезврежен, openclaw разгружен, остатки убраны
Задачи 1.10, 1.11, 1.12.
1.10 ДВОЙНИК COMPOSE У n8n. Рядом с настоящим compose лежал файл
/opt/n8n/docker-compose.yml, которым никто не пользуется: у него ДРУГОЙ
путь данных (/opt/n8n/data — пустая папка) и другая сеть. Запусти его —
получился бы второй n8n с пустыми данными и без ключа шифрования:
внешне работает, а учётные данные «чужие». Файл переименован в
.orphan-20261017. Настоящий compose (/opt/automation-lxc) в порядке.
МОЯ ОШИБКА, которую это вскрыло: я сначала решил, что «compose не
описывает монтирование», и правил не тот файл. Надо было сразу спросить
контейнер, какой файл используется:
docker inspect <контейнер> --format '{{index .Config.Labels "com.docker.compose.project.config_files"}}'
1.11 OPENCLAW. Падал в петле: база состояния нечитаема, ENOSPC. Причина —
диск в CT 115 был заполнен на 100%. Мусор был НЕ там, где показывал
Docker: /var/lib/docker занимал 1.5 ГБ, а /var/lib/containerd — 21 ГБ,
из которых 12 ГБ — записанный слой самого падающего контейнера. Docker
при этом показывал «возвратно 21.7 ГБ», что вводит в заблуждение: это
его собственный нужный образ.
Сделано: состояние больного контейнера СОХРАНЕНО на хост
(/root/openclaw-broken-state-20261017_122412.tar, 1.67 МБ, база внутри —
проверено), петля остановлена, контейнер удалён. МЕСТО: было 100%, стало
55%, освободилось 11 ГБ. Живой экземпляр openclaw-old не тронут.
Осталось решить (нужно слово владельца): какой экземпляр считать рабочим
— работающий openclaw-old (переименовать) или новый из копии.
1.12 ОСТАТКИ ОТ ОБНОВЛЕНИЙ. Убрано 11 контейнеров: plex, sonarr, radarr,
prowlarr, bazarr, overseerr, tautulli, linkding, prometheus, syncthing
(Exited) и navidrome-old, который КРУТИЛСЯ В ПЕТЛЕ вхолостую.
Оставлено 3 работающих: calibre-web-old, freshrss-old, openclaw-old.
Признак «old» в имени не значит «мусор» — это действующие экземпляры.
Правило записано: удалять только Exited/Created/Restarting.
ПРОВЕРЕНО ПОСЛЕ УБОРКИ: Plex, Sonarr, Radarr, Prowlarr, Overseerr,
Navidrome, Linkding, Prometheus, Syncthing отвечают 200 (Bazarr и
Tautulli — 401, их норма без токена). Наблюдение: 34 проверки, провалов
нет.
|
||
|
|
9ebcdcf5d3 |
Раздел 1: профиль AppArmor измерен (нужен 2 из 23), плюс три находки
ЗАДАЧА 1.1. Она стояла как «применить профиль безопасности в остальных контейнерах». Вместо «на всякий случай везде» я измерил. Проверил 23 контейнера с Docker запуском docker run --rm hello-world: работают без правки: 21 требуют внимания: 2 (CT 115 OpenClaw, CT 140 gitea) И в этих двух обход уже есть: в их docker-compose.yml прописано apparmor:unconfined. То есть задача 1.1 по существу ВЫПОЛНЕНА. ПОЧЕМУ ЭТО ВАЖНО: настройка lxc.apparmor.profile=unconfined ОТКЛЮЧАЕТ защиту AppArmor у контейнера — это ослабление изоляции, а не усиление. Применить её всем значило бы ослабить 21 контейнер, который отлично работает без этого. Правило: ослаблять защиту только там, где измерением доказано, что без этого не работает. НАЙДЕНО ПО ХОДУ (три проблемы, которых в списке не было): 1. В CT 108 БЫЛ СЛОМАН DNS. Из контейнера не резолвились внешние имена (1.1.1.1 и 8.8.8.8 — таймаут), а к AdGuard работало. Следствие: n8n не мог резолвить имена и выходил наружу только через прокси; всё, что шло мимо прокси, падало. Причина: в compose у n8n жёстко прописан dns: [8.8.8.8, 1.1.1.1], недоступный из этого контейнера. Исправлено: DNS контейнера переведён на AdGuard; DNS задан на уровне Docker для новых контейнеров. Контейнеры не пересоздавались, службы целы. Проверено: api.telegram.org резолвится, example.com — HTTP 200. 2. COMPOSE У n8n НЕ ОПИСЫВАЕТ МОНТИРОВАНИЕ ДАННЫХ — это риск. Работающий контейнер использует папку /opt/automation-lxc/n8n/data, где лежит файл config — КЛЮЧ ШИФРОВАНИЯ n8n. В compose этого монтирования нет. Значит пересоздание через compose даст контейнер без ключа: он запустится, а учётные данные перестанут расшифровываться. Поэтому compose я вернул как был, а правку сделал безопасно — на уровне Docker. Обновлять n8n через compose сейчас НЕЛЬЗЯ, пока compose не приведён в соответствие. Заведено задачей 1.10. 3. КОНТЕЙНЕРЫ В ПЕТЛЕ ПЕРЕЗАПУСКА: openclaw (CT 115, падает), и navidrome-old-20261014-* (CT 125, остаток от обновления). Плюс 10 контейнеров *-old-* в состоянии Exited. Заведено задачами 1.11 и 1.12. ЧЕСТНО О МОЕЙ ОШИБКЕ: при правке n8n я сначала добавил ВТОРОЙ ключ dns в compose и сломал YAML («mapping key dns already defined»). Проверка конфигурации это поймала до применения — службы не пострадали, файл восстановлен из копии. Урок: перед добавлением строки в чужой файл проверить, нет ли её уже. |
||
|
|
f9e46ab664 |
Ключ age: проверка годности, документация, файл для владельца
Задача №22 аудита. Суть не в «положить в Vaultwarden», а в том, что без ключа зашифрованные копии бесполезны: файл есть, прочитать нечем. ЧТО СДЕЛАНО: * добавлен ops/vpn/verify-age-key.sh — проверка «ключ ГОДЕН», а не «ключ есть». Ошибка в одном символе иначе обнаружится только в момент восстановления, когда уже поздно. Скрипт проверяет: ключ на месте и с правами 600; секретный ключ ровно один; публичный совпадает с тем, на который шифровали; копии ДЕЙСТВИТЕЛЬНО расшифровываются; ключа нет в файлах и в истории Git; копии есть на другом хосте; * docs/AGE-KEY-AND-RESTORE.md — что ключ открывает, где должен жить (сервер + Vaultwarden + флешка, ключ отдельно от данных), как восстановить; * файл с ключом и пошаговой инструкцией подготовлен и передан владельцу для скачивания. РЕЗУЛЬТАТ ПРОВЕРКИ: ключ годен. Расшифровываются обе копии — vpn-configs.json (40 ключей клиентов) и xray-config.json (30). Права 600. Публичный ключ совпадает с .sops.yaml. В Git ключа нет: ни в файлах, ни в истории коммитов. На VPS лежат 2 зашифрованные копии. ПОЧЕМУ КЛЮЧ НЕ ДОБАВЛЕН В VAULTWARDEN МНОЮ: Vaultwarden шифрует записи клиентским мастер-паролем. Мастер-пароля у меня нет — и это правильно. Добавить запись программно можно только с ним или с личным ключом API; просить их я не буду. Записать в Vaultwarden и на флешку — действие владельца. ГРАБЛИ (мои): проверка нашла саму себя. Скрипт искал строку AGE-SECRET-KEY-1, а она есть в нём же как образец для поиска — вышло ложное «ключ попал в репозиторий». Искать надо КОНКРЕТНОЕ значение ключа, а не его начало. Исправлено. Тот же класс ошибки уже был с URL приватной комнаты: проверка совпадала сама с собой. |
||
|
|
c6d006a509 |
DNS дома: убран дубль, единственный DNS — AdGuard
ВЛАДЕЛЕЦ СПРОСИЛ: зачем прокси, не проще ли завести домашнюю сеть в
AdGuard? Проверил — он прав.
AdGuard (192.168.1.107) уже работает как DNS и уже содержит
переписывания для ВСЕХ 43 домашних доменов: проверено по списку
ops/network/domains.yaml — правильно отвечает 43 из 43.
Значит отдельный DNS на шлюзе (CT 161) был ДУБЛЕМ, причём вредным:
* два источника правды: поправил в одном — на другом старое;
* устройство, настроенное на шлюз, ОБХОДИЛО фильтрацию AdGuard,
то есть реклама и трекеры проходили.
DNS на шлюзе выключен. Настраивать на устройствах: DNS 192.168.1.107.
Адрес 192.168.1.161 для DNS больше не использовать.
ПРО ПРОКСИ. Для телевизоров он не нужен: владелец выяснил, что там есть
только «HTTP-прокси для браузера» и поля DNS нет вовсе. Прокси на шлюзе
оставлен как необязательный инструмент для устройств, которые умеют
полноценный прокси (компьютер). Телефонам он не нужен — у них профили VPN.
НАБЛЮДЕНИЕ ПОПРАВЛЕНО: проверка «Шлюз DNS» смотрела на 192.168.1.161,
где DNS больше нет — она начала бы падать с ложной тревогой. Теперь это
«DNS дома (AdGuard)» и смотрит на 192.168.1.107.
ТУННЕЛЬ НА ШЛЮЗЕ ПОЧИНЕН. Он «висел по таймауту»: проверка канала
спрашивала www.gstatic.com, DNS отдавал адрес IPv6, а IPv6 у контейнера
нет — соединение висело до таймаута, проверка считала канал мёртвым, и
ложился весь трафик. В журнале было прямо: «outbound/urltest[auto]:
context deadline exceeded». Лечение: IPv6 в контейнере отключён, в
sing-box задано ipv4_only. Сейчас 3 из 3 попыток успешны.
Ещё две миграции sing-box 1.14 поймала встроенная проверка конфигурации:
поля sniff переехали в правила; DNS-сервер теперь
{"type": "udp", "server": "..."}, старый {"address": ...} отвергается.
УРОК: прежде чем строить новое, проверить, что уже есть. AdGuard работал
годами, а я построил рядом второй DNS.
|
||
|
|
9091242cb4 |
Шлюз в доме: туннель для устройств без VPN + наблюдение
Роутер по-прежнему НЕ тронут, как решено. Прежний шлюз умел только DNS. Этого мало: телевизор не ставит VPN-приложение, и быстрый DNS ему не помогает, если нужные сайты недоступны. Теперь на шлюзе есть свой туннель до VPS и прокси для устройств, которые умеют указать адрес прокси в настройках сети — это почти все телевизоры и приставки на Android TV. ПРОВЕРЕНО СНАРУЖИ, как это сделает телевизор: иностранный сайт через прокси -> выход 193.233.210.184 (наш VPS) git.buryans.ru -> HTTP 200 напрямую (домашнее идёт мимо туннеля) ya.ru -> HTTP 302 за 0,1 с напрямую (российское тоже мимо) youtube.com -> HTTP 200 через туннель ОТДЕЛЬНЫЙ КЛЮЧ ДЛЯ ШЛЮЗА (gateway-home@buryans.local), а не чей-то личный: видно в статистике, можно отозвать шлюзу отдельно, при замене шлюза меняется только его ключ. Добавлен во все входы VLESS, поэтому шлюз может пользоваться любым каналом и переключаться сам (три канала с автопереключением внутри шлюза). НАБЛЮДЕНИЕ: шлюз добавлен двумя отдельными проверками — * «Шлюз DNS» — домашний домен обязан вести на 192.168.1.10; * «Шлюз туннель» — иностранный адрес обязан выходить через VPS. Проверяется ВЫХОД, а не «порт открыт»: порт может слушать, а трафик не идти. Всего проверок стало 34 (было 32). Это прямо про недавний случай: владелец узнал об обрыве от семьи, а не от системы. ГРАБЛИ: 1. sing-box 1.14 убрал старые поля входящего: sniff внутри входящего больше не принимается, переехал в правила. Проверка конфигурации поймала это ДО запуска. 2. Служба не создалась, потому что предыдущий запуск прервался на проверке конфигурации. Урок: проверять надо не «конфигурация верна», а «служба работает и трафик идёт». Для Samsung и LG прокси в настройках сети нет — им доступен только быстрый DNS, обход блокировок потребует правила на роутере (3.3). |
||
|
|
6a1e3468cc |
Реестр приведён в соответствие с фактическим состоянием
Убраны устаревшие записи, которые вводили в заблуждение:
* «итого рабочих каналов: три» -> четыре (Reality доведён);
* «Reality не проходит рукопожатие, причина не найдена» -> причина
найдена: сайт-прикрытие www.microsoft.com недоступен с VPS,
заменён на наш собственный;
* «доступ снаружи непредсказуем» -> четыре канала с автопереключением;
* «проверка восстановления из копий» -> проверено для конфигураций VPN.
Дописаны разделы: что сделано по Этапу 3 (шлюз в доме) и запасной
простой профиль.
Итог по реестру: сделано 28, частично 7, не начато 46.
|
||
|
|
3004b633a2 |
VPN Этап 3: шлюз в доме — домашнее открывается напрямую, роутер не тронут
НАЙДЕНА ПРИЧИНА «дома всё тормозит»: домашние домены резолвились в адрес
VPS даже из дома — запрос уходил в интернет, на VPS, и возвращался
обратно. Замерено:
напрямую с домашнего nginx (192.168.1.10): 10 мс
как было, через VPS: 485 мс (в 50 раз!)
СДЕЛАНО: отдельный контейнер CT 161 (192.168.1.161) со своим DNS.
Для 43 домашних доменов из ops/network/domains.yaml отдаёт домашний
адрес 192.168.1.10 — трафик идёт по домашней сети. Для всех остальных —
обычный ответ через 1.1.1.1 и 8.8.8.8, с кэшем.
РОУТЕР НЕ ТРОНУТ, как вы и просили. Правило на Keenetic (3.3) остаётся
на потом, вместе с вами.
ПРОВЕРЕНО НА РЕАЛЬНОМ УСТРОЙСТВЕ (3.2): взял домашний CT 107, перевёл
его DNS на шлюз. Домашние службы открываются (200/302), обычный
интернет не сломался (yandex 302, github 200), стало в 50 раз быстрее.
После проверки DNS устройства возвращён как был — чужие настройки без
согласия не оставляю.
КАК ПОДКЛЮЧИТЬ УСТРОЙСТВО: указать в его настройках сети DNS
192.168.1.161. Для Android TV: настройки сети -> своя сеть ->
дополнительно -> DNS вручную.
ЧЕГО ЭТО НЕ РЕШАЕТ: доступ снаружи (там нужен VPN, этапы 1-2) и обход
блокировок (это туннель, он в профилях для телефонов).
ГРАБЛИ:
1. local-lvm заполнен на 80%, контейнер там не создаётся. Разрешил
хранилищу local держать диски контейнеров (копия storage.cfg снята).
Диск шлюза 2 ГБ, на local свободно 91 ГБ.
2. Первый замер показал 486 мс вместо 10 — это была холодная попытка
(пустой DNS-кэш, новое TLS-соединение). Мерить надо несколько раз
подряд и брать установившееся значение, иначе получается «быстрее
в 1 раз», то есть никакая экономия.
|
||
|
|
fcdd78d30c |
VPN Этап 2: Reality доведён — каналов теперь четыре
Задача 2.3 закрыта. Reality работает и проверен снаружи ключом живого
человека: у всех шести человек, домашние службы через него отвечают 200.
VLESS + TLS TCP 10443 ~476 мс
Hysteria2 UDP 10443 ~142 мс
VLESS + XHTTP TCP 8444 ~576 мс
VLESS + Reality TCP 2087 ~309 мс
ПРИЧИНА, по которой не работал: Reality был настроен на прикрытие
www.microsoft.com, а этот сайт с VPS НЕДОСТУПЕН (HTTP 000), хотя с
домашнего канала отвечает. Reality пересылает рукопожатие клиента на
сайт-прикрытие; сайт недоступен — рукопожатие не проходит.
Рабочее решение: прикрытием сделан НАШ ЖЕ сайт (dest 127.0.0.1:10443,
имя git.buryans.ru). Путь до прикрытия локальный и не рвётся, а для
наблюдателя соединение выглядит как обычный TLS к нашему домену, то есть
сливается с уже существующим рабочим каналом.
ПОПУТНО ИСПРАВЛЕНО: ключи на всех входах приведены к одному набору.
Раньше для части людей на Reality лежали ДРУГИЕ ключи, и ключ человека
работал на одном канале и не работал на другом. Теперь ключ один на все
каналы — это и позволило добавить Reality в общий профиль.
ОТДЕЛЬНО ЗАПИСАНО В ДОКУМЕНТЕ, честно: в этом разборе я ошибся в
проверке ШЕСТЬ раз, и каждая ошибка выглядела как «канал не работает»:
заглушка вместо публичного ключа; ключ, которого нет на этом входе;
недоступный с сервера сайт; порт, не открытый в экране; проба, которая
не запускалась; имя UID, зарезервированное в bash (сервер прямо сказал
«invalid request user id»).
Правило: если канал «не работает» — сначала проверь саму проверку.
Сервер в журнале обычно говорит причину прямо, надо только прочитать.
Тестовый порт закрыт, пробные процессы убраны, конфигурация сохранена
в зашифрованную копию.
|
||
|
|
3fac692f36 |
VPN Этап 2: три канала, автоматическое переключение, подписка
Цель этапа — чтобы доступ не зависел от того, не начал ли провайдер
мешать одному конкретному способу. Теперь каналов три, и клиент сам
держит живой:
VLESS + TLS TCP 10443 — основной
Hysteria2 UDP 10443 — QUIC: другой путь, устойчивее на потерях
VLESS + XHTTP TCP 8444 — выглядит как обычный сайт
ПЕРЕКЛЮЧЕНИЕ ДОКАЗАНО, А НЕ ТОЛЬКО НАСТРОЕНО. Тест: сломал основной
канал правилом в экране VPS (только для тестовой машины, чтобы не
задеть семью) — клиент переключился САМ через 60 секунд, домашний домен
продолжил открываться уже через новый канал, а после возврата основного
вернулся на него через 50 секунд.
ПОЧЕМУ ПЕРЕКЛЮЧАЕТ КЛИЕНТ, А НЕ СЕРВЕР. Проверял «единую точку входа на
сервере» — не годится: VLESS+TLS и XHTTP оба используют TLS с проверкой
сертификата, и посредник либо ломает проверку, либо должен
расшифровывать трафик. Второе уничтожает защиту. Поэтому переключает
клиент: у него есть все каналы.
ПОДПИСКА (задача 2.4): у каждого человека теперь есть ссылка, которую
он один раз вставляет в клиент — дальше профиль обновляется сам.
Добавлю новый канал, у всех появится без действий. Ссылки на прежней
странице, вход прежний.
ДВА ФОРМАТА, ОБА С АВТО-ПЕРЕКЛЮЧЕНИЕМ:
yaml — mihomo: группа fallback, три канала;
json — Xray: наблюдатель + leastPing по TLS и XHTTP.
В json НЕТ Hysteria2: Xray его не поддерживает, а если положить —
конфигурация не собирается и профиль не загружается. Проверено.
ПРОФИЛИ ПРОВЕРЯЮТСЯ ДО ВЫДАЧИ настоящими движками (mihomo и xray).
Не проходит проверку — не попадает на страницу. Лучше не выдать
ничего, чем выдать файл, который не откроется.
ГРАБЛИ ПО ХОДУ (все записаны в docs/VPN-STAGE2.md):
1. репозиторий Hysteria переехал: apernet/hysteria -> HyNetworks/hysteria;
со старого адреса версия читается как «location:...» и скачивание 404;
2. в экране VPS правило было только для TCP, для UDP — нет: при политике
DROP снаружи канал недоступен, хотя на сервере «слушает». Правило:
проверять канал СНАРУЖИ;
3. xray определяет формат по расширению: на «.json.tmp» отвечает
«Failed to get format» — временный файл должен иметь верное расширение;
4. папке нужен бит выполнения: я поставил 644 на папку sub/ и получил
403 от nginx. Папкам 755, файлам 644. Проверять не «файл на месте»,
а что он ОТКРЫВАЕТСЯ по адресу;
5. у Hysteria нет отдельной проверки конфигурации — проверяю пробным
запуском и тем, что порт слушает.
Проверка подписки: по её адресу отдаётся профиль с тремя каналами и
группой fallback — смотрю содержимое, а не только код ответа.
Осталось: Reality (2.3) — на портах есть, но рукопожатие не проходит.
|
||
|
|
d4ba9e8fe4 |
VPN Этап 2, шаг 2: VLESS + XHTTP добавлен и проверен снаружи
Задача 2.2 из реестра. XHTTP передаёт VLESS поверх обычных HTTPS-запросов:
трафик выглядит как обращения к сайту, а не как непрерывный поток. Для
провайдера, который разбирает характер соединения, это поведение иное,
чем у обычного VLESS+TLS, — потому и полезен как запасной.
Решение по устройству: XHTTP идёт на отдельном TCP-порту 8444 со своим
TLS и нашим сертификатом git.buryans.ru. Вариант «спрятать за nginx»
рассматривал, но он добавляет лишний слой и точку отказа без выигрыша.
Сделано:
* в конфигурацию xray добавлен входящий (порт 8444, сеть xhttp, TLS);
* клиенты перенесены с основного входа — человеку работает тот же ключ;
* путь /buryan-xhttp, маскировка под git.buryans.ru;
* порт открыт в экране VPS, правила сохранены;
* скрипты в ops/vpn/xhttp/.
ПРОВЕРЕНО СНАРУЖИ, с домашнего канала:
напрямую: 46.8.140.22
через XHTTP: 193.233.210.184 <- наш VPS
домашние службы и YouTube через него: 200, 200, 200
в журнале клиента всё ушло с пометкой [proxy]
Урок с Hysteria2 применён сразу: порт открыл в экране ДО проверки.
В прошлый раз канал работал на сервере, но был недоступен снаружи
из-за политики DROP — на эти грабли второй раз не наступил.
Итого рабочих каналов теперь три:
VLESS + TLS TCP 10443 — основной
Hysteria2 UDP 10443 — QUIC, для видео и на случай помех TCP
VLESS + XHTTP TCP 8444 — ведёт себя как обычный сайт
Резервная копия обновлена: оба канала и все 40 ключей зашифрованы в
ops/secrets-enc/vpn-configs.json, восстановление проверено сверкой.
Дальше по плану: собрать единый профиль с автоматическим переключением
между тремя каналами и доказать переключение отключением основного.
|
||
|
|
3c9c7df5d9 |
VPN Этап 2, шаг 1: Hysteria2 поднят и проверен снаружи
Задача 2.1 из реестра. Запасной канал, отличающийся от основного по
самой природе: основной — VLESS+TLS по TCP, этот — QUIC по UDP. Если
провайдер станет мешать TCP, этот пойдёт другим путём; на потерях QUIC
обычно устойчивее, что важно для видео.
Сделано:
* Hysteria2 v2.13.0 установлен на VPS, служба systemd с автозапуском;
* слушает UDP 10443 — тот же номер, что у основного TCP-канала
(UDP и TCP не мешают друг другу, людям один номер проще);
* TLS — тот же сертификат git.buryans.ru, маскировка на наш же сайт;
* пароль 22 знака в /root/.buryan-hy2-password (600);
* скрипты и обезличенная копия конфигурации — в ops/vpn/hysteria/.
ПРОВЕРЕНО СНАРУЖИ, с домашнего канала:
напрямую: 46.8.140.22
через Hysteria2: 193.233.210.184 <- наш VPS
домашние службы через него: 200, 200
YouTube и Telegram: 200, 200
скорость 2 МБ: ~1,9 МБ/с
ТРИ НАХОДКИ ПО ХОДУ, записаны в реестр:
1. Репозиторий Hysteria переехал: был apernet/hysteria, стал
HyNetworks/hysteria. Со старого адреса версия читается как
«location:https://...» и скачивание даёт 404 — то есть установка
по старым инструкциям ломается.
2. В ЭКРАНЕ VPS правило было только для TCP 10443, а для UDP — нет.
При политике INPUT DROP снаружи канал был бы НЕДОСТУПЕН, хотя на
сервере всё работало и порт «слушал». Отсюда правило: проверять
канал СНАРУЖИ, а не по факту «слушает». Правило добавлено, правила
сохранены (netfilter-persistent), копия до правки лежит рядом.
3. У Hysteria нет отдельной проверки конфигурации: проверяю пробным
запуском и тем, что порт действительно слушает.
Резервное копирование расширено: теперь копируются оба канала
(xray и Hysteria2) в один зашифрованный файл
ops/secrets-enc/vpn-configs.json, и восстановление ПРОВЕРЯЕТСЯ —
расшифровка сверяется с исходным (30 ключей xray + конфиг Hysteria).
Иначе новый канал повторил бы недавнюю дыру, когда конфигурация
существовала в одном экземпляре.
Пароля Hysteria в репозитории нет — проверено сравнением с настоящим
паролем с сервера, а не только по виду.
|
||
|
|
633f580803 |
VPN: сохранность ключей — зашифрованная копия и восстановление
НАЙДЕНО И ЭТО БЫЛО ОПАСНО: боевая конфигурация xray с ключами жила
ТОЛЬКО на VPS.
* в репозитории лежала копия от 23.09: 1 клиент вместо 10;
* в резервное копирование (restic) VPS не входит вовсе.
Значит при гибели VPS все ключи пропали бы, и пришлось бы перевыпускать
доступ всей семье заново, обходя каждого. Это дороже, чем сделать копию.
Что теперь есть:
* ops/secrets-enc/xray-config.json — копия для восстановления,
зашифрована SOPS + age (правило уже было настроено на этот путь);
* vps/xray/config.json — обезличенная копия: структура без ключей,
её можно читать кому угодно;
* /root/xray-config-encrypted.json на VPS — вторая копия, на другой
машине.
Копия проверена, а не просто создана: скрипт расшифровывает её обратно и
сверяет СОДЕРЖИМОЕ (входящие, клиентов, ключи, настройки). Сверка
побайтовая не годится: SOPS при расшифровке пересобирает JSON, и порядок
ключей может отличаться. Результат: содержимое совпадает полностью,
30 ключей в 3 входящих.
Восстановление: ops/vpn/vpn-restore-config.sh. Без ключа --apply ничего
не пишет — только расшифровывает и показывает. С --apply делает копию
текущего файла, пишет на VPS и проверяет, что канал после этого работает.
Отдельно записано в документе: локально проверить конфигурацию НЕЛЬЗЯ,
потому что в ней пути к файлам сертификатов, а они только на VPS. Попытка
проверить на домашнем узле даёт ложную ошибку "failed to parse
certificate", и это не признак порчи копии. Скрипт об этом предупреждает
вместо того, чтобы пугать зря.
Восстановление невозможно без ключа шифрования age
(/root/.buryan-age-key, он же в Vaultwarden и на флешке). Это и есть
правило из аудита: ключ и зашифрованные данные — в разных местах.
|
||
|
|
f411cc6fd4 |
VPN: убрана отладка журнала xray + сводка использования
НАЙДЕНО ПО ХОДУ: в конфигурации xray стоял loglevel "debug" — остался с тех пор, когда искали причину непрохождения Reality, и так и не был выключен. За месяц это дало 371 МБ журналов на VPS. Замер в процессе работы: за пару часов проверок архив вырос с 371 до 387 МБ — примерно 17 МБ за два часа. Чем это опасно: при таком темпе диск кончится за месяцы, и первым упадёт сам VPN. Поломка пришла бы "на ровном месте", и искать её стали бы не там. Исправлено: loglevel debug -> warning. Файловые журналы (access, error) намеренно НЕ включал: файл растёт без ротации, а для наблюдения достаточно системного журнала, где ротация есть. Порядок обычный: копия -> правка -> xray run -test -> перезапуск -> проверка. Проверено, что служба работает, все три порта слушают и канал пропускает трафик. Скрипт правки сохранён как образец: ops/vpn/vpn-fix-loglevel.sh. Вывод на будущее, записан в отчёт: временные настройки для поиска причины надо помечать и снимать. Отладка, забытая после расследования, — это отложенная поломка. ДОБАВЛЕНО: ops/vpn/vpn-usage.py — сводка, кто реально пользуется VPN. Считает по журналу xray, чьим ключом пользовались: метка в пользовательской записи у каждого ключа своя, поэтому видно персонально. "Выдал" и "пользуется" — разные вещи, а по отчётам бота этого не видно. Первый замер (окно 7 дней): Роман 410 подключений (почти всё — мои проверки), Полина 30, Сергей 2, AlexTest / Елена / Никита — ни разу. Ограничение замера записано прямо в документе: по журналу видно, что человек подключался хотя бы раз, но НЕ видно, доволен ли он. Ноль подключений не означает "не получилось" — возможно, просто не дошли руки. Поэтому сводка идёт в дополнение к живой проверке, а не вместо. |
||
|
|
21df3bf34d |
VPN: готовые профили доставлены, исправлена видимость комнат
Профили с раздельной маршрутизацией (.yaml для FlClash, .json для Hiddify) и инструкция отправлены всем шестерым — и в личные комнаты Matrix, и выложены на страницу раздачи. Адрес и пароль страницы не менялись. Проверено по факту, а не по отчёту бота: файл скачивался глазами получателя и сверялся с исходным по SHA-256. Все 6 человек: по 2 файла, оба целые, инструкция на месте. Плюс сквозная проверка, что после добавления 204 правил домашний домен по-прежнему идёт в туннель (git.buryans.ru -> [proxy]), а прочее напрямую. НАЙДЕНА И ИСПРАВЛЕНА ТРЕТЬЯ ПОЛОМКА. Комнаты выдачи создавались с видимостью истории "joined": человек видит только то, что отправлено ПОСЛЕ его вступления. Пока он только приглашён, отправленные ему профили ему НЕ видны — со стороны это выглядит как "мне ничего не пришло", хотя на сервере всё лежит. То есть Сергей, Елена и Полина физически не могли увидеть ни ключ, ни профиль, пока не приняли бы приглашение. А приняли бы они его, скорее всего, именно увидев сообщение — которого не видели. Замкнутый круг, из-за которого раздача могла молча не дойти до трёх человек из шести. Исправлено: все шесть комнат переведены на "shared", приглашённые видят присланное сразу. Проверено. Скрипт создания комнат тоже исправлен, чтобы это не вернулось; отдельный скрипт fix-room-visibility.py приводит уже созданные комнаты в порядок. Урок общий и повторяющийся: проверять надо ГЛАЗАМИ ПОЛУЧАТЕЛЯ, а не состоянием на сервере. Оба раза проблему нашла именно такая проверка — сначала в личных комнатах бота, теперь в комнатах выдачи. |
||
|
|
a97b00c1eb |
VPN: раздельная маршрутизация — туннель несёт только домашнее
Задача: часть приложений (банки, госуслуги, маркетплейсы) не работает, когда весь трафик идёт через VPN. С апреля 2026 крупные российские сервисы закрывают доступ тем, кто приходит с зарубежного адреса; рекомендацию дало Минцифры на совещании с 20+ компаниями, срок назывался до 15 апреля. Приложение Сбербанка, по сообщениям, вообще не запускается при включённом VPN. Причина не в туннеле, а в том, ЧТО через него идёт. Значит решение — маршрутизация, а не ручные переключения. Что сделано: * ops/vpn/gen-split-routing.py — собирает файлы маршрутизации из ОДНОГО списка домашних доменов (27 адресов). Если вести списки порознь, они разойдутся, и придётся искать, почему одна служба не открывается; * ops/vpn/split/ — собранное: home-domains.txt, rules-clash.yaml, client-routing.json (для Xray-клиентов); * ops/vpn/split-profile-android.yaml — готовый профиль для Android: список приложений через туннель, домашние домены в туннель, всё остальное напрямую; * docs/VPN-SPLIT-ROUTING.md — как настроить обоими способами; * docs/VPN-APP-CONFLICTS.md — понятным языком, почему ломается и что именно перестало работать, со ссылками на открытые источники. Проверено на живом клиенте (xray 25.3.6, тот же клиент, что в телефоне), результат виден в журнале: accepted tcp:git.buryans.ru:443 [proxy] <- домашнее, в туннель accepted tcp:ip-api.com:80 [direct] <- прочее, напрямую accepted tcp:www.sberbank.ru:443 [direct] <- российское, напрямую Конфиг проходит xray run -test (Configuration OK), профиль YAML разбирается, порядок правил проверен скриптом. Две грабли, найденные по ходу и записанные в документ: 1. Порядок правил решает. Первая версия начиналась с правила «всё российское и весь buryans.ru — напрямую», а buryans.ru это и есть наши домашние службы: широкое правило перехватило бы их раньше узкого, и домашние домены ушли бы мимо туннеля. Домашнее правило обязано стоять выше. 2. Без sniffing правила по домену не работают: клиент видит только IP, имя уже разрешено. Поэтому включены sniffing с destOverride и domainStrategy IPIfNonMatch. Граница, которую обозначил владельцу прямо: вывод приложения из туннеля — это штатная настройка Android, её я делаю. Подмену проверки «есть ли на телефоне VPN» я не делаю: это уже не маршрутизация, а обман проверки, и такое приложение честнее вынести из туннеля или настроить ему прокси в самом приложении. Ключей в коммите нет: в профиле стоит подстановка <ВАШ-UUID>, свой ключ человек берёт из своей комнаты в Matrix. |
||
|
|
de65cc088a |
VPN: выдача доступа новому человеку одной командой админа
Владельцу нужна была одна команда, чтобы выдать профиль новому участнику без ручной сборки QR и без пересылки ключей в мессенджерах. Добавлено: !vpn give @логин — выдать свободный ключ !vpn give @логин 08 — выдать конкретный ключ !vpn list — что выдано, что свободно Доступно только владельцу (@akadmin, @comms_agent); обычному человеку бот отвечает отказом и пишет попытку в журнал. Профиль уходит ЛИЧНО получателю: бот заводит с ним личную комнату, приглашает и отправляет QR и ссылку. Владельцу приходит подтверждение, что и кому выдано, и это же пишется в состояние (given_by, key). Два вывода, которые дала проверка на живом получателе: 1. Видимость истории. Первый прогон создал комнату с history_visibility "joined". Бот отчитался "отправлено", но получатель — а он в тот момент ещё только приглашён — не увидел НИЧЕГО: с этой видимостью видны только сообщения после вступления. Исправлено на "shared", проверено на новой комнате: приглашённый видит профиль сразу. Это выяснилось проверкой, а не из документации. 2. Права бота. Бот не серверный админ: заводить и деактивировать учётные записи в Matrix он не может (403). Поэтому !vpn give создаёт только комнату, а учётную запись человеку заводит владелец. Записано в документации, чтобы это не выглядело недоделкой. Проверено по-настоящему: временный человек заводился в Matrix, получал ключ Buryan-10, принимал приглашение и видел у себя картинку QR и ссылку. Обычному человеку на "!vpn 04" приходит отказ. Уборка после проверки: временные люди и их комнаты удалены из базы (пользователей снова 21, событий временных комнат 0). Комнаты чистились с обнулением зависимостей — event_edges держал события круговой ссылкой. |
||
|
|
cd2657b2f8 |
VPN: проверка «канал работает» в наблюдении + команда !vpn link
Задача 4.2 из реестра: проверка «VPN работает» в наблюдении. Сделано. Почему отдельная проверка: порт 10443 может слушать, а трафик не проходить — именно это мы уже видели, когда провайдер вмешивался в поток. Открытый порт об этом не говорит. Как проверяется (ops/vpn/vpn-check.sh): поднимается временный клиент xray на самом VPS, идёт через него в интернет, сверяется внешний адрес. Совпал — канал пропускает трафик. За собой убирает. Ключ берётся из рабочей конфигурации xray, а не из файла со ссылками: тот файл лежит на домашнем узле, а проверка идёт на VPS. Встроено в /opt/buryan-hub/scripts/check-services.sh (функция check_vpn), вызывается каждые 5 минут вместе с остальными проверками, провал попадает в общую тревогу в Matrix. Порт 2087 (Reality) намеренно не проверяется: он не работает и занесён в план задачами VPN-2.3, иначе тревога была бы каждые 5 минут. Проверено отдельным запуском только новой функции, без полного цикла наблюдения (чтобы не поднять ложную тревогу): код 0, PASSED=1. Отдельно: команда !vpn link для настройки на самом телефоне. QR с того же экрана не считать, а ссылку из сообщения можно скопировать и вставить в приложение. Проверены варианты !vpn link, !VPN LINK, !vpn ссылка, а также отказ на чужой ключ и молчание на обычный текст. |
||
|
|
60ff4ac324 |
VPN: раздача профилей через Matrix — комната на каждого человека
По решению владельца профили выдаются не только страницей, но и в Matrix: Matrix свой, ключи не уходят на чужие серверы, и человек получает профиль там, где он и так общается с семьёй. Добавлено: * ops/vpn/matrix-distribute.py — заводит приватную комнату НА КАЖДОГО человека, приглашает его, отправляет картинку QR, ссылку текстом на случай несчитанного кода и инструкцию; * режимы: план (по умолчанию), --send, --send --only <логин>, --verify. Почему комната на каждого, а не общая "Семья": в общей комнате ключи видны всем сразу, и тогда нельзя отозвать доступ одному, не задев остальных. Ради отзыва по одному мы и заводили отдельные ключи. Проверено на akadmin: комната "VPN - Роман" создана, получатель вошёл, вход только по приглашению, картинка скачивается целой (1759 байт, сигнатура PNG верна), текстов два. Режим --verify делает эту проверку повторяемой. Попутно выяснено и записано в документы: * комната "Семья" содержит участников @telegram_<id> — там люди из Telegram-моста, поэтому профили туда не кладём; * portal в базе моста пуст — комната, похоже, в Telegram не зеркалится; * этот Synapse отдаёт медиа только по /_matrix/client/v1/media/download, старые media/v3 и media/r0 дают 404 (ложный признак потери файла); * @akadmin — админ, но устройств не зарегистрировано; * E2EE в этих комнатах не включён. Ждёт решения владельца: класть ли профили в комнату, зеркалящуюся в Telegram (тогда ключи попадут на серверы Telegram). До решения раздача семье не запускается — её будет не откатить без смены ключей. |
||
|
|
1eb6494f5d |
VPN этап 1: мобильный доступ — ключи, профили, инструкция для семьи
Задача: docs/TASKS.md -> раздел VPN, Этап 1 (приоритет 3 из docs/AUDIT-2026-10-17.md, часть 6). Сделано: * ключей 5 -> 10 (buryan-06..10 во все три входящих: 10443, 2087, 2053); существующие user1..user5 не тронуты — их могли уже использовать; * у каждого ключа своё имя: раздаём и отзываем доступ по одному, не ломая остальных; * приватная страница с QR-кодами и инструкцией (скрытый путь + пароль, на существующем домене — новых записей в DNS не потребовалось); * инструкция для семьи простым языком: приложение, импорт, проверка, раздел "если не подключается"; * отдельно вынесено предупреждение про встроенный браузер MIUI — это и была причина, по которой Сергей не мог войти. Проверено (не на словах): * xray run -test -> Configuration OK * новый ключ реально выходит через VPS — и с самого сервера, и снаружи * устойчивость: 10 подключений из 10 * QR-коды прочитаны независимым декодером (zxing), ссылки совпадают * страница: 200 с паролем, 401 без пароля; Gitea не затронута (200) Разбор ложной тревоги: записи "invalid request version" в журнале оказались чужими проверками порта, а не нашей поломкой. Вывод в отчёт: не считать канал сломанным по одной неудаче. Осталось: VPN-1.3 — проверка на телефонах Сергея и AlexTest (нужны устройства), затем VPN-1.4 — раздача остальным. Отчёт: ops/vpn/VPN-STAGE1-IMPLEMENTATION.md |
||
|
|
12d1cbde91 | план развития и реестр задач: 44 домена, сеть, звонки, сквозная связность |