Поправка к предыдущему коммиту: бэкапы Matrix уже существовали
(/root/matrix-backups/backup-matrix.sh, 03:00). Мониторы показывали down
не из-за отсутствия бэкапов, а из-за отсутствия heartbeat.
Дубль удалён. Вместо него — проверка (03:20): свежесть дампа, копия на VPS,
разворачивание в тестовую базу, сравнение с живой базой и три heartbeat.
Проверено: дамп 2.8M, восстановление ок (22 пользователя, 4109 событий),
разница с живой = 8 аккаунтов ботов (норма), офсайт копируется, все три
монитора up.
Ловушки: scp на VPS нестабилен (заменён на ssh cat), pg_dump из CT 155
не работает, вывод psql требует разбора по меткам.
Обнаружено, что бэкапов Matrix не существовало: три монитора Kuma честно
показывали down, но никто не разбирался.
Скрипт на узле (03:15): pg_dump matrix_db (3.3 МБ) + tar данных CT 155
(17 МБ) + копия базы на VPS + разворачивание дампа в тестовую базу с
подсчётом пользователей (30) + ротация 14 + heartbeat в три монитора.
Проверено: все три монитора стали up (local, offsite, restore), офсайт
копируется, восстановление подтверждено.
Ловушки: pg_dump из CT 155 не работает (нет клиента) — запуск с узла;
scp на VPS нестабилен — заменён на ssh cat; мониторы были push-типа и
ждали сигнала, которого не было.
Симптом: при отправке контента зависание, потом обрыв.
ЧТО ВЫЯСНЕНО:
1. Дело НЕ в звонках: в журналах ОБОИХ LiveKit (VPS и домашнего) ни
одной комнаты — звонки к медиасерверам не подключались.
2. Загрузка работает, но путь медленный: напрямую в дом 5 МБ за 0,001 с,
через публичный адрес — за 5,6 с, с скачками до 31 с и зависаниями
на 120 с.
3. ПРИЧИНА: канал VPS <-> дом. Задержка 236-312 мс (до Matrix-контейнера
до 539), потери 5%. При такой задержке TCP не разгоняется, клиент
решает, что соединение мертво, и обрывает. Интернет дома в порядке
(11 МБ/с).
4. ВАЖНОЕ: у владельца старый клиент — Element Classic 1.6.66 (Samsung
S25). В журнале Synapse его запрос закрыт кодом 499 (клиент сам
оборвал, не дождавшись). Element X переживает медленный канал лучше.
СДЕЛАНО: BBR на обоих концах; TCP настроен под потери (подбор MTU,
отключён сброс окна после простоя, буферы 32 МБ); nginx на VPS не
буферизует тело запроса для Matrix, таймауты 300 с; лимит загрузки в
Synapse поднят с 50 до 200 МБ.
МОЯ ОШИБКА: поднял MTU туннеля с 1280 до 1400 — все загрузки перестали
проходить (5 из 5 по 90 с), Element перестал отвечать. Проверка показала
33% потерь. Вернул 1280, всё заработало. Урок: MTU менять только с
проверкой проходимости и немедленным откатом.
РЕКОМЕНДАЦИЯ ВЛАДЕЛЬЦУ: обновить клиент на Element X — это самая
вероятная причина обрыва. Если не поможет, менять транспорт VPS<->дом на
Hysteria2 (задача 3.5).