Files
buryan-infra/ops/recovery/OUTAGE-2026-10-20.md
T
buryan-agent 4d9950b71e Восстановление после перезагрузки и устройства сети в хабе и HA
После перезагрузки хоста: docker не стартовал из-за битого CIDR
(192.168.1.115.1/24), arr-сервисы висели из-за залипшего docker-proxy,
Authentik был остановлен, 8 oauth2-proxy падали без него. Исправлено:
корректный bip/fixed-cidr, рестарт контейнеров, запуск Authentik, остановка
дубля Navidrome. Все сервисы 200, failed-юнитов нет.

Устройства: device_ident.py опознаёт 106 клиентов (бренд по MAC, тип по
имени/портам/бренду), пишет в ядро; добавлена страница /devices.html с
фильтрами. В HA добавлен Google Cast и ping-сенсоры для 9 ключевых устройств.

Ловушки: правки daemon.json проверять dockerd --validate; «порт слушается» не
значит «отвечает»; nmap_tracker в HA 2026.2 не создаёт сущности ни из YAML,
ни через config flow.
2026-10-20 16:17:22 +03:00

3.0 KiB
Raw Blame History

Разбор: сервер перезагрузился и половина сервисов не поднялась

Что произошло

Хост Proxmox перезагрузился (uptime сбросился). После загрузки не поднялись:

Что Симптом Причина
docker на хосте failed битый CIDR в /etc/docker/daemon.json
Radarr/Sonarr/Prowlarr порт открыт, ответа нет залипший docker-proxy после смены подсети
Authentik (CT 114) все контейнеры Exited (255) контейнеры не стартовали автоматически
oauth2-proxy (8 шт.) Restarting (1) не видели Authentik → 502
navidrome на хосте Restarting дубль: второй экземпляр конфликтовал портом

Как чинилось

  1. Docker. daemon.json содержал:

    {"bip": "192.168.1.115.1/24",
     "fixed-cidr": "192.168.1.115.100-192.168.1.115.200"}
    

    Пять октетов в bip и диапазон вместо CIDR — демон падал с invalid CIDR address. Заменено на корректное:

    {"bip": "10.115.0.1/24", "fixed-cidr": "10.115.0.0/24"}
    

    Старый конфиг сохранён в daemon.json.bak-cidr.

  2. Arr-сервисы. После смены подсети правила DNAT остались, а docker-proxy завис: ss показывает LISTEN, но соединение отклоняется. Помог docker restart radarr|sonarr|prowlarr.

  3. Authentik. Контейнеры были остановлены (Exited 255). Подняты по одному docker start; все четыре стали healthy, /‑/health/live/ → 200.

  4. SSO-прокси. Как только Authentik поднялся, все восемь oauth2-proxy перешли в Up без вмешательства.

  5. Дубль Navidrome. На хосте жил второй экземпляр (порт 4533 занят версией в CT 125) — остановлен, автозапуск отключён.

Проверка после

Radarr 200 · Sonarr 200 · Prowlarr 200 · Lidarr 200 · Immich 200
Seerr 307 · Navidrome 302 · Jellyfin 302 · Authentik 302 · Prometheus 302
Hub: панель, /devices.html, /graph.html, /ask.html, /yandex.html — 200
systemctl --failed: пусто

Выводы

  • Правки daemon.json надо проверять dockerd --validate до перезапуска.
  • Контейнеры без restart: unless-stopped не переживают перезагрузку — у Authentik это так; стоит добавить политику.
  • Проверять сервис надо не «порт слушается», а живым HTTP-запросом: docker-proxy может слушать и не отвечать.