Files
buryan-infra/ops/security/fix-watchdog.sh
T
root 25ef17ad18 n8n 500 и системная проблема сторожа: исправлено
1. ОШИБКА 500 У N8N. Сам n8n был здоров (API 200, миграции применены).
Причина на стороне входа: провайдеры, созданные мной через API, вышли с
ПУСТЫМ grant_types, поэтому Authentik отклонял обмен кода на токен
(«Invalid grant_type for provider»). Прописал authorization_code и
refresh_token всем девяти; проверено — у всех 33 провайдеров теперь есть
типы обменов и приложение.

2. СИСТЕМНАЯ ПРОБЛЕМА: сторож buryan-agent каждые 5 минут перезапускал
ЛЮБОЙ остановленный контейнер. Отсюда «NPM сам вернулся», «старые
calibre поднялись снова» и невозможность что-либо осознанно выключить.
ИСПРАВЛЕНО в 28 контейнерах: если политика перезапуска no — не трогаем;
добавлен файл исключений /opt/buryan-agent/ignore.txt; в отчёте такие
контейнеры помечаются stopped-intentionally. ПРОВЕРЕНО: остановил три,
запустил сторожа вручную — failed=0 restarted=0, всё осталось выключено.

3. turn.buryans.ru отдавал 502 (HTTP-прокси на TURN-сервер) — теперь
перенаправление на call.buryans.ru.

СОСТОЯНИЕ: 40 доменов работают, n8n 200/302, библиотека работает,
наблюдение 58 проверок без провалов, активных тревог нет.

ОСТАЛОСЬ МЕЛОЧЬ: старый дубль freshrss-old-20261014-180053 всё ещё
работает — остановить и переименовать.
2026-10-18 19:27:37 +03:00

84 lines
4.1 KiB
Bash
Executable File

#!/bin/bash
# ============================================================
# fix-agent.sh — сторож не должен поднимать намеренно остановленное
# ============================================================
# ПРОБЛЕМА: /opt/buryan-agent/healthcheck.sh раз в 5 минут делает
# for c in $(docker ps -a ...); do if [ status != running ]; then
# docker restart $c
# То есть ЛЮБОЙ остановленный контейнер поднимается обратно. Из-за этого
# NPM, старые calibre и всё, что мы осознанно отключаем, возвращается
# через пять минут.
#
# РЕШЕНИЕ: перезапускать только те, у кого политика перезапуска НЕ "no".
# "no" — это осознанная остановка, её трогать нельзя. Плюс файл
# исключений /opt/buryan-agent/ignore.txt.
# ============================================================
set -uo pipefail
NEW='#!/bin/bash
# Сторож контейнеров. ВАЖНО: намеренно остановленные (политика no)
# НЕ поднимаем — иначе нельзя ничего отключить.
N8N="http://192.168.1.108:5678/webhook/buryan-health"
H=$(hostname); IP=$(hostname -I | awk "{print \$1}")
IGNORE_FILE=/opt/buryan-agent/ignore.txt
F=0; R=0; C="["
for c in $(docker ps -a --format "{{.Names}}" 2>/dev/null); do
S=$(docker inspect -f "{{.State.Status}}" $c 2>/dev/null)
P=$(docker inspect -f "{{.HostConfig.RestartPolicy.Name}}" $c 2>/dev/null)
if [ "$S" != "running" ]; then
if grep -qx "$c" "$IGNORE_FILE" 2>/dev/null; then
C="$C{\"name\":\"$c\",\"was\":\"$S\",\"now\":\"ignored\"},"
continue
fi
if [ "$P" = "no" ]; then
C="$C{\"name\":\"$c\",\"was\":\"$S\",\"now\":\"stopped-intentionally\"},"
continue
fi
F=$((F+1)); docker restart $c >/dev/null 2>&1; sleep 3
N=$(docker inspect -f "{{.State.Status}}" $c 2>/dev/null)
[ "$N" = "running" ] && R=$((R+1))
C="$C{\"name\":\"$c\",\"was\":\"$S\",\"now\":\"$N\"},"
fi
done
C="${C%,}]"; [ -z "$C" ] && C="[]"
M=$(free | awk "/Mem:/{printf \"%.0f\",\$3/\$2*100}")
D=$(df -h / | awk "NR==2{print int(\$5)}")
curl -s -m 5 -X POST $N8N -H "Content-Type: application/json" \
-d "{\"host\":\"$H\",\"ip\":\"$IP\",\"failed\":$F,\"restarted\":$R,\"mem\":$M,\"disk\":$D,\"containers\":$C}" >/dev/null 2>&1
echo "agent: host=$H failed=$F restarted=$R mem=$M% disk=$D%"'
echo "=== 1. ГДЕ ЕСТЬ СТОРОЖ ==="
found=0
for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}'); do
if pct exec $ct -- test -f /opt/buryan-agent/healthcheck.sh 2>/dev/null; then
echo " CT $ct"
found=$((found+1))
fi
done
echo " всего: $found"
echo
echo "=== 2. ПРАВЛЮ ==="
printf '%s\n' "$NEW" > /tmp/healthcheck.new
for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}'); do
if pct exec $ct -- test -f /opt/buryan-agent/healthcheck.sh 2>/dev/null; then
pct exec $ct -- cp -p /opt/buryan-agent/healthcheck.sh /opt/buryan-agent/healthcheck.sh.before-fix 2>/dev/null
pct push $ct /tmp/healthcheck.new /opt/buryan-agent/healthcheck.sh 2>/dev/null
pct exec $ct -- chmod 755 /opt/buryan-agent/healthcheck.sh 2>/dev/null
pct exec $ct -- bash -c 'touch /opt/buryan-agent/ignore.txt'
ok=$(pct exec $ct -- bash -c 'grep -c "stopped-intentionally" /opt/buryan-agent/healthcheck.sh 2>/dev/null' 2>/dev/null | tr -d '\r')
echo " CT $ct: обновлён (проверка: $ok)"
fi
done
echo
echo "=== 3. ФАЙЛ ИСКЛЮЧЕНИЙ (для ручных случаев) ==="
echo " /opt/buryan-agent/ignore.txt — по одному имени контейнера в строке"
echo
echo "=== 4. ПРОВЕРКА СИНТАКСИСА ==="
for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}' | head -3); do
r=$(pct exec $ct -- bash -n /opt/buryan-agent/healthcheck.sh 2>&1 | tr -d '\r')
echo " CT $ct: ${r:-синтаксис в порядке}"
done