From e94dd6cc10c215837e45877a062e8a3e061d0f14 Mon Sep 17 00:00:00 2001 From: Roman Buryan Date: Fri, 13 Nov 2026 14:37:05 +0300 Subject: [PATCH] =?UTF-8?q?[HOME]=20=D0=9F=D0=B5=D1=80=D0=B5=D0=B7=D0=B0?= =?UTF-8?q?=D0=B3=D1=80=D1=83=D0=B7=D0=BA=D0=B0=20=D0=B8=20=D0=B7=D0=B0?= =?UTF-8?q?=D0=BC=D0=B5=D1=80=D1=8B:=20=D0=BD=D0=B0=D0=B9=D0=B4=D0=B5?= =?UTF-8?q?=D0=BD=D0=BE=20=D0=B8=20=D0=B8=D1=81=D0=BF=D1=80=D0=B0=D0=B2?= =?UTF-8?q?=D0=BB=D0=B5=D0=BD=D0=BE=205=20=D0=B4=D0=B5=D1=84=D0=B5=D0=BA?= =?UTF-8?q?=D1=82=D0=BE=D0=B2=20=D0=B7=D0=B0=D0=B3=D1=80=D1=83=D0=B7=D0=BA?= =?UTF-8?q?=D0=B8.=201)=20softdog=20=D0=B2=20deny-list=20Proxmox=20?= =?UTF-8?q?=E2=80=94=20=D1=8E=D0=BD=D0=B8=D1=82=20=D1=81=D0=B0=D0=BC=20?= =?UTF-8?q?=D0=B4=D0=B5=D0=BB=D0=B0=D0=B5=D1=82=20modprobe,=20fd=20=D1=83?= =?UTF-8?q?=20PID1=3D1.=202)=20=D0=A6=D0=B8=D0=BA=D0=BB=D1=8B=20=D0=B7?= =?UTF-8?q?=D0=B0=D0=B2=D0=B8=D1=81=D0=B8=D0=BC=D0=BE=D1=81=D1=82=D0=B5?= =?UTF-8?q?=D0=B9=20(zram-swap,=20zram-extra)=20=D1=83=D0=B4=D0=B0=D0=BB?= =?UTF-8?q?=D1=8F=D0=BB=D0=B8=20=D0=B8=D0=B7=20=D0=BE=D1=87=D0=B5=D1=80?= =?UTF-8?q?=D0=B5=D0=B4=D0=B8=20hub-core/hermes/=D0=BC=D0=BE=D0=BD=D0=B8?= =?UTF-8?q?=D1=82=D0=BE=D1=80=D1=8B:=20=D0=B1=D1=8B=D0=BB=D0=BE=208=20?= =?UTF-8?q?=D1=86=D0=B8=D0=BA=D0=BB=D0=BE=D0=B2,=20=D1=81=D1=82=D0=B0?= =?UTF-8?q?=D0=BB=D0=BE=200=20(DefaultDependencies=3Dno=20+=20WantedBy=3Ds?= =?UTF-8?q?wap.target).=203)=20hub-core=20=D1=81=20Restart=3Dno=20=D0=BF?= =?UTF-8?q?=D0=B0=D0=B4=D0=B0=D0=BB=20=D0=B4=D0=BE=20=D0=B3=D0=BE=D1=82?= =?UTF-8?q?=D0=BE=D0=B2=D0=BD=D0=BE=D1=81=D1=82=D0=B8=20Postgres=20?= =?UTF-8?q?=E2=80=94=20Restart=3Don-failure=2030s,=20=D1=82=D0=B5=D0=BF?= =?UTF-8?q?=D0=B5=D1=80=D1=8C=20=D1=81=D1=82=D0=B0=D1=80=D1=82=D1=83=D0=B5?= =?UTF-8?q?=D1=82=20=D1=81=D0=B0=D0=BC.=204)=20Tailscale=20=D0=BF=D0=B5?= =?UTF-8?q?=D1=80=D0=B5=D0=B7=D0=B0=D0=BF=D0=B8=D1=81=D1=8B=D0=B2=D0=B0?= =?UTF-8?q?=D0=BB=20resolv.conf=20=D0=BD=D0=B0=20=D0=BC=D1=91=D1=80=D1=82?= =?UTF-8?q?=D0=B2=D1=8B=D0=B9=20100.100.100.100=20=E2=80=94=20accept-dns?= =?UTF-8?q?=3Dfalse,=20DNS=20=D0=BD=D0=B0=20=D1=80=D0=BE=D1=83=D1=82=D0=B5?= =?UTF-8?q?=D1=80=20=D0=B8=20AdGuard.=205)=20swapfile16=20=D0=BF=D0=BE?= =?UTF-8?q?=D0=B4=D0=BD=D1=8F=D1=82.=20=D0=97=D0=B0=D0=BC=D0=B5=D1=80?= =?UTF-8?q?=D1=8B:=20=D0=B7=D0=B0=D0=B3=D1=80=D1=83=D0=B7=D0=BA=D0=B0=203:?= =?UTF-8?q?52,=2030/30=20CT,=2074=20=D1=81=D0=BB=D1=83=D0=B6=D0=B1=D1=8B?= =?UTF-8?q?=200=20=D0=BB=D0=B5=D0=B6=D0=B8=D1=82,=20Matrix/Authentik/Git/h?= =?UTF-8?q?ub=20200,=20TLS=20=D0=B4=D0=BE=20VDS=205/5?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit --- ops/audits/REBOOT-MEASURE-2026-11-13.md | 93 +++++++++++++++++++++++++ 1 file changed, 93 insertions(+) create mode 100644 ops/audits/REBOOT-MEASURE-2026-11-13.md diff --git a/ops/audits/REBOOT-MEASURE-2026-11-13.md b/ops/audits/REBOOT-MEASURE-2026-11-13.md new file mode 100644 index 0000000..a9aa4e9 --- /dev/null +++ b/ops/audits/REBOOT-MEASURE-2026-11-13.md @@ -0,0 +1,93 @@ +# Перезагрузка и замеры (13.11.2026, 14:00–14:35) + +## Что сделано + +Три перезагрузки подряд: первая — чтобы применить настройки, вторая и третья — +чтобы проверить, что всё встаёт само. + +## Что нашлось при перезагрузках (и исправлено) + +### 1. `softdog` в deny-list + +При загрузке `systemd-modules-load` отказывался грузить модуль: + +``` +Module 'softdog' is deny-listed (by kmod) +``` + +Причина — строка `blacklist softdog` в +`/lib/modprobe.d/blacklist_proxmox-kernel-*.conf`. + +Решение: юнит `softdog-reexec.service` сам вызывает `modprobe softdog` +(явный вызов игнорирует deny-list), ждёт устройство и делает +`systemctl daemon-reexec`, чтобы systemd его подхватил. + +Проверено: `fd у PID1 = 1`, `softdog-reexec = active`. + +### 2. Пропала команда запуска контейнеров — нет, это zram + +В первой загрузке systemd **удалил из очереди** `hub-core`, `hermes`, +мониторы и другие юниты, разрывая циклы зависимостей: + +``` +multi-user.target: Found ordering cycle on hub-core.service/start +... Job hub-core.service/start deleted to break ordering cycle +``` + +Корень — два юнита zram: + +| Юнит | Было | Стало | +|---|---|---| +| `zram-swap` | `After=multi-user.target`, `Before=swap.target` | `DefaultDependencies=no`, `Before=swap.target`, `WantedBy=swap.target` | +| `zram-extra` | `After=local-fs.target`, `Before=swap.target` | `DefaultDependencies=no`, `After=local-fs.target`, `WantedBy=swap.target` | + +После правки: **было 8 циклов — стало 2, затем 0** (второй цикл давал +`zram-extra`, убрал `Before=swap.target`). + +### 3. `hub-core` не поднимался при загрузке + +В `override.conf` стояло `Restart=no`. При загрузке Postgres (CT151) ещё +не был готов → `psycopg2.OperationalError: No route to host` → hub падал и +**не перезапускался**. + +Стало: `Restart=on-failure`, `RestartSec=30`. Проверено — после ребута +hub-core поднимается сам. + +### 4. DNS хоста перезаписан Tailscale + +`/etc/resolv.conf` указывал на `100.100.100.100` (MagicDNS), но +`tailscaled` не работал → ни один домен не резолвился +(`urlopen error [Errno -3]` в логах ботов). + +Решение: `tailscale set --accept-dns=false`, resolv.conf — +`nameserver 192.168.1.1` и `192.168.1.107`. + +### 5. swapfile16 + +Юнит `/swapfile16` падал при загрузке. Файл на месте, `swapon` вручную +работает — поднял и перезапустил юнит, сейчас `active`. + +## Замеры после загрузки + +| Параметр | Значение | +|---|---| +| Время загрузки | **3 мин 52 с** (firmware 16 с, loader 9 с, ядро 4 с, userspace 3:23) | +| userspace | почти всё — `hub-boot-recover` (постепенный подъём 30 CT) | +| Контейнеры | **30/30** | +| Matrix публично | **200** | +| Authentik | **200** | +| Git | **200** | +| Hub `/status.json` | **200** | +| Боты / Hermes | active / active | +| TCP до VDS 443 / 8445 | **5/5** и **5/5** | +| TLS до VDS 443 | **5/5** | +| Watchdog | держит `/dev/watchdog0` | +| Память | 10 / 15 ГБ, swap 7.6 ГБ (zram + media) | +| Load average | 3.87 (через 4 мин после старта) | + +## Что осталось + +- Последний цикл `zram-extra` убран правкой уже **после** этой загрузки — + окончательное подтверждение (0 циклов) будет при следующем плановом ребуте. +- Память под 30 CT по-прежнему около 10 ГБ, swap активно используется — + это норма для текущего набора сервисов, но следить стоит.