diff --git a/ops/audits/REBOOT-MEASURE-2026-11-13.md b/ops/audits/REBOOT-MEASURE-2026-11-13.md new file mode 100644 index 0000000..a9aa4e9 --- /dev/null +++ b/ops/audits/REBOOT-MEASURE-2026-11-13.md @@ -0,0 +1,93 @@ +# Перезагрузка и замеры (13.11.2026, 14:00–14:35) + +## Что сделано + +Три перезагрузки подряд: первая — чтобы применить настройки, вторая и третья — +чтобы проверить, что всё встаёт само. + +## Что нашлось при перезагрузках (и исправлено) + +### 1. `softdog` в deny-list + +При загрузке `systemd-modules-load` отказывался грузить модуль: + +``` +Module 'softdog' is deny-listed (by kmod) +``` + +Причина — строка `blacklist softdog` в +`/lib/modprobe.d/blacklist_proxmox-kernel-*.conf`. + +Решение: юнит `softdog-reexec.service` сам вызывает `modprobe softdog` +(явный вызов игнорирует deny-list), ждёт устройство и делает +`systemctl daemon-reexec`, чтобы systemd его подхватил. + +Проверено: `fd у PID1 = 1`, `softdog-reexec = active`. + +### 2. Пропала команда запуска контейнеров — нет, это zram + +В первой загрузке systemd **удалил из очереди** `hub-core`, `hermes`, +мониторы и другие юниты, разрывая циклы зависимостей: + +``` +multi-user.target: Found ordering cycle on hub-core.service/start +... Job hub-core.service/start deleted to break ordering cycle +``` + +Корень — два юнита zram: + +| Юнит | Было | Стало | +|---|---|---| +| `zram-swap` | `After=multi-user.target`, `Before=swap.target` | `DefaultDependencies=no`, `Before=swap.target`, `WantedBy=swap.target` | +| `zram-extra` | `After=local-fs.target`, `Before=swap.target` | `DefaultDependencies=no`, `After=local-fs.target`, `WantedBy=swap.target` | + +После правки: **было 8 циклов — стало 2, затем 0** (второй цикл давал +`zram-extra`, убрал `Before=swap.target`). + +### 3. `hub-core` не поднимался при загрузке + +В `override.conf` стояло `Restart=no`. При загрузке Postgres (CT151) ещё +не был готов → `psycopg2.OperationalError: No route to host` → hub падал и +**не перезапускался**. + +Стало: `Restart=on-failure`, `RestartSec=30`. Проверено — после ребута +hub-core поднимается сам. + +### 4. DNS хоста перезаписан Tailscale + +`/etc/resolv.conf` указывал на `100.100.100.100` (MagicDNS), но +`tailscaled` не работал → ни один домен не резолвился +(`urlopen error [Errno -3]` в логах ботов). + +Решение: `tailscale set --accept-dns=false`, resolv.conf — +`nameserver 192.168.1.1` и `192.168.1.107`. + +### 5. swapfile16 + +Юнит `/swapfile16` падал при загрузке. Файл на месте, `swapon` вручную +работает — поднял и перезапустил юнит, сейчас `active`. + +## Замеры после загрузки + +| Параметр | Значение | +|---|---| +| Время загрузки | **3 мин 52 с** (firmware 16 с, loader 9 с, ядро 4 с, userspace 3:23) | +| userspace | почти всё — `hub-boot-recover` (постепенный подъём 30 CT) | +| Контейнеры | **30/30** | +| Matrix публично | **200** | +| Authentik | **200** | +| Git | **200** | +| Hub `/status.json` | **200** | +| Боты / Hermes | active / active | +| TCP до VDS 443 / 8445 | **5/5** и **5/5** | +| TLS до VDS 443 | **5/5** | +| Watchdog | держит `/dev/watchdog0` | +| Память | 10 / 15 ГБ, swap 7.6 ГБ (zram + media) | +| Load average | 3.87 (через 4 мин после старта) | + +## Что осталось + +- Последний цикл `zram-extra` убран правкой уже **после** этой загрузки — + окончательное подтверждение (0 циклов) будет при следующем плановом ребуте. +- Память под 30 CT по-прежнему около 10 ГБ, swap активно используется — + это норма для текущего набора сервисов, но следить стоит.