Files
buryan-infra/ops/scripts/grafana-rollback.sh
T

108 lines
7.3 KiB
Bash
Executable File
Raw Blame History

This file contains ambiguous Unicode characters
This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.
#!/bin/bash
# ============================================================
# grafana-diagnose-and-rollback.sh — что произошло и возврат
# ============================================================
# Образец переноса Grafana дал ложный успех: таблиц 0, а проверка
# сообщила о совпадении. Нужно понять, чем Grafana пользуется сейчас,
# и вернуть её в заведомо рабочее состояние.
#
# Запуск: bash grafana-diagnose-and-rollback.sh
# ============================================================
set -uo pipefail
CT=113
CONT=grafana
DB=grafana_db
p() { pct exec 151 -- sudo -u postgres psql "$@"; }
say() { echo "[$(date '+%T')] $*"; }
echo "═══════════════════════════════════════════════════════════"
echo " 1. ЧЕМ ПОЛЬЗУЕТСЯ GRAFANA — ПО ПОДКЛЮЧЕНИЯМ"
echo "═══════════════════════════════════════════════════════════"
echo " подключения к базе $DB:"
p -tAc "SELECT ' ' || usename || ' с ' || client_addr || ' с ' || to_char(backend_start,'HH24:MI:SS')
FROM pg_stat_activity WHERE datname='$DB'" 2>/dev/null
echo " всего подключений к ней: $(p -tAc "SELECT count(*) FROM pg_stat_activity WHERE datname='$DB'" 2>/dev/null)"
echo " таблиц в базе: $(p -tAc "SELECT count(*) FROM pg_tables WHERE schemaname='public'" 2>/dev/null)"
echo
echo "═══════════════════════════════════════════════════════════"
echo " 2. ЧТО В КОНФИГУРАЦИИ GRAFANA ВНУТРИ"
echo "═══════════════════════════════════════════════════════════"
echo " grafana.ini в томе:"
pct exec $CT -- bash -c 'F=/var/lib/docker/volumes/bb96ab0c4792f406a1d68f4935ff151e8da041c0bbcacb3262de776fd0428df5/_data/conf/grafana.ini
if [ -f "$F" ]; then grep -A3 "^\[database\]" "$F" 2>/dev/null | head -6; else echo " файла нет"; fi' 2>/dev/null
echo " что говорит сама Grafana о базе:"
pct exec $CT -- docker logs grafana 2>&1 | grep -iE 'database|sqlite|postgres|migrat' | tail -6 | sed 's/^/ /'
echo
echo "═══════════════════════════════════════════════════════════"
echo " 3. ЦЕЛА ЛИ ФАЙЛОВАЯ БАЗА"
echo "═══════════════════════════════════════════════════════════"
GDB=/var/lib/docker/volumes/bb96ab0c4792f406a1d68f4935ff151e8da041c0bbcacb3262de776fd0428df5/_data/grafana.db
pct exec $CT -- bash -c "
if [ -f '$GDB' ]; then
echo ' файл на месте, размер:' \$(du -h '$GDB' | cut -f1)
echo ' изменён:' \$(stat -c %y '$GDB' | cut -d. -f1)
else
echo ' ФАЙЛА НЕТ'
fi"
echo
echo "═══════════════════════════════════════════════════════════"
echo " 4. ВОЗВРАЩАЮ GRAFANA В РАБОЧЕЕ СОСТОЯНИЕ"
echo "═══════════════════════════════════════════════════════════"
say "восстанавливаю конфигурацию из копии"
pct exec $CT -- bash -c '
cd /opt/grafana
if [ -f docker-compose.yml.pilot-backup ]; then
cp docker-compose.yml.pilot-backup docker-compose.yml
echo " конфигурация восстановлена"
else
echo " ❌ копии конфигурации нет — правлю вручную"
sed -i "/GF_DATABASE_TYPE/d;/GF_DATABASE_HOST/d;/GF_DATABASE_NAME/d;/GF_DATABASE_USER/d;/GF_DATABASE_PASSWORD/d;/GF_DATABASE_SSL_MODE/d" docker-compose.yml
echo " строки с базой убраны"
fi
echo " что осталось в конфигурации:"
grep -cE "GF_DATABASE" docker-compose.yml || echo " 0 упоминаний базы"
' 2>&1 | sed 's/^/ /'
say "пересоздаю контейнер"
pct exec $CT -- bash -c 'cd /opt/grafana && DOCKER_API_VERSION=1.41 docker compose up -d grafana' 2>&1 | tail -3 | sed 's/^/ /'
sleep 30
echo
echo "═══════════════════════════════════════════════════════════"
echo " 5. ПРОВЕРКА"
echo "═══════════════════════════════════════════════════════════"
printf ' состояние: %s\n' "$(pct exec $CT -- docker inspect $CONT --format '{{.State.Status}}' 2>/dev/null)"
echo -n " health: "
curl -s -m 12 http://192.168.1.113:3000/api/health 2>/dev/null | jq -r '.database' 2>/dev/null
echo -n " дэшбордов: "
curl -s -m 12 'http://192.168.1.113:3000/api/search?type=dash-db' 2>/dev/null | jq -r 'length' 2>/dev/null
echo " переменные базы в контейнере (должно быть пусто):"
pct exec $CT -- docker inspect $CONT --format '{{range .Config.Env}}{{println .}}{{end}}' 2>/dev/null | grep -c 'GF_DATABASE' | sed 's/^/ найдено: /'
echo
echo " удаляю тестовую базу из PostgreSQL (она пустая и не нужна)"
p -tAc "DROP DATABASE IF EXISTS $DB" >/dev/null 2>&1
p -tAc "DROP ROLE IF EXISTS grafana_user" >/dev/null 2>&1
echo " удалено"
echo
echo "═══════════════════════════════════════════════════════════"
echo " ДЕФЕКТ, КОТОРЫЙ НАШЁЛСЯ В МОЕЙ ПРОВЕРКЕ"
echo "═══════════════════════════════════════════════════════════"
echo " Проверка полноты переноса сравнивала число строк в файловой"
echo " базе и в PostgreSQL. Когда список таблиц оказался пустым,"
echo " сравнение прошло УСПЕШНО: 0 расхождений из 0 таблиц."
echo
echo " Это тот же ложный успех, что весь день: проверка проходит,"
echo " когда проверять нечего. Правило: если сравнивать нечего —"
echo " это ОШИБКА, а не успех."
echo
echo " Причина пустого списка: в CT 113 не установлен sqlite3."
echo " Проверено: $(pct exec $CT -- bash -c 'command -v sqlite3 || echo не установлен' 2>/dev/null)"