108 lines
7.3 KiB
Bash
Executable File
108 lines
7.3 KiB
Bash
Executable File
#!/bin/bash
|
||
# ============================================================
|
||
# grafana-diagnose-and-rollback.sh — что произошло и возврат
|
||
# ============================================================
|
||
# Образец переноса Grafana дал ложный успех: таблиц 0, а проверка
|
||
# сообщила о совпадении. Нужно понять, чем Grafana пользуется сейчас,
|
||
# и вернуть её в заведомо рабочее состояние.
|
||
#
|
||
# Запуск: bash grafana-diagnose-and-rollback.sh
|
||
# ============================================================
|
||
set -uo pipefail
|
||
|
||
CT=113
|
||
CONT=grafana
|
||
DB=grafana_db
|
||
|
||
p() { pct exec 151 -- sudo -u postgres psql "$@"; }
|
||
say() { echo "[$(date '+%T')] $*"; }
|
||
|
||
echo "═══════════════════════════════════════════════════════════"
|
||
echo " 1. ЧЕМ ПОЛЬЗУЕТСЯ GRAFANA — ПО ПОДКЛЮЧЕНИЯМ"
|
||
echo "═══════════════════════════════════════════════════════════"
|
||
echo " подключения к базе $DB:"
|
||
p -tAc "SELECT ' ' || usename || ' с ' || client_addr || ' с ' || to_char(backend_start,'HH24:MI:SS')
|
||
FROM pg_stat_activity WHERE datname='$DB'" 2>/dev/null
|
||
echo " всего подключений к ней: $(p -tAc "SELECT count(*) FROM pg_stat_activity WHERE datname='$DB'" 2>/dev/null)"
|
||
echo " таблиц в базе: $(p -tAc "SELECT count(*) FROM pg_tables WHERE schemaname='public'" 2>/dev/null)"
|
||
|
||
echo
|
||
echo "═══════════════════════════════════════════════════════════"
|
||
echo " 2. ЧТО В КОНФИГУРАЦИИ GRAFANA ВНУТРИ"
|
||
echo "═══════════════════════════════════════════════════════════"
|
||
echo " grafana.ini в томе:"
|
||
pct exec $CT -- bash -c 'F=/var/lib/docker/volumes/bb96ab0c4792f406a1d68f4935ff151e8da041c0bbcacb3262de776fd0428df5/_data/conf/grafana.ini
|
||
if [ -f "$F" ]; then grep -A3 "^\[database\]" "$F" 2>/dev/null | head -6; else echo " файла нет"; fi' 2>/dev/null
|
||
|
||
echo " что говорит сама Grafana о базе:"
|
||
pct exec $CT -- docker logs grafana 2>&1 | grep -iE 'database|sqlite|postgres|migrat' | tail -6 | sed 's/^/ /'
|
||
|
||
echo
|
||
echo "═══════════════════════════════════════════════════════════"
|
||
echo " 3. ЦЕЛА ЛИ ФАЙЛОВАЯ БАЗА"
|
||
echo "═══════════════════════════════════════════════════════════"
|
||
GDB=/var/lib/docker/volumes/bb96ab0c4792f406a1d68f4935ff151e8da041c0bbcacb3262de776fd0428df5/_data/grafana.db
|
||
pct exec $CT -- bash -c "
|
||
if [ -f '$GDB' ]; then
|
||
echo ' файл на месте, размер:' \$(du -h '$GDB' | cut -f1)
|
||
echo ' изменён:' \$(stat -c %y '$GDB' | cut -d. -f1)
|
||
else
|
||
echo ' ФАЙЛА НЕТ'
|
||
fi"
|
||
|
||
echo
|
||
echo "═══════════════════════════════════════════════════════════"
|
||
echo " 4. ВОЗВРАЩАЮ GRAFANA В РАБОЧЕЕ СОСТОЯНИЕ"
|
||
echo "═══════════════════════════════════════════════════════════"
|
||
say "восстанавливаю конфигурацию из копии"
|
||
pct exec $CT -- bash -c '
|
||
cd /opt/grafana
|
||
if [ -f docker-compose.yml.pilot-backup ]; then
|
||
cp docker-compose.yml.pilot-backup docker-compose.yml
|
||
echo " конфигурация восстановлена"
|
||
else
|
||
echo " ❌ копии конфигурации нет — правлю вручную"
|
||
sed -i "/GF_DATABASE_TYPE/d;/GF_DATABASE_HOST/d;/GF_DATABASE_NAME/d;/GF_DATABASE_USER/d;/GF_DATABASE_PASSWORD/d;/GF_DATABASE_SSL_MODE/d" docker-compose.yml
|
||
echo " строки с базой убраны"
|
||
fi
|
||
echo " что осталось в конфигурации:"
|
||
grep -cE "GF_DATABASE" docker-compose.yml || echo " 0 упоминаний базы"
|
||
' 2>&1 | sed 's/^/ /'
|
||
|
||
say "пересоздаю контейнер"
|
||
pct exec $CT -- bash -c 'cd /opt/grafana && DOCKER_API_VERSION=1.41 docker compose up -d grafana' 2>&1 | tail -3 | sed 's/^/ /'
|
||
sleep 30
|
||
|
||
echo
|
||
echo "═══════════════════════════════════════════════════════════"
|
||
echo " 5. ПРОВЕРКА"
|
||
echo "═══════════════════════════════════════════════════════════"
|
||
printf ' состояние: %s\n' "$(pct exec $CT -- docker inspect $CONT --format '{{.State.Status}}' 2>/dev/null)"
|
||
echo -n " health: "
|
||
curl -s -m 12 http://192.168.1.113:3000/api/health 2>/dev/null | jq -r '.database' 2>/dev/null
|
||
echo -n " дэшбордов: "
|
||
curl -s -m 12 'http://192.168.1.113:3000/api/search?type=dash-db' 2>/dev/null | jq -r 'length' 2>/dev/null
|
||
echo " переменные базы в контейнере (должно быть пусто):"
|
||
pct exec $CT -- docker inspect $CONT --format '{{range .Config.Env}}{{println .}}{{end}}' 2>/dev/null | grep -c 'GF_DATABASE' | sed 's/^/ найдено: /'
|
||
|
||
echo
|
||
echo " удаляю тестовую базу из PostgreSQL (она пустая и не нужна)"
|
||
p -tAc "DROP DATABASE IF EXISTS $DB" >/dev/null 2>&1
|
||
p -tAc "DROP ROLE IF EXISTS grafana_user" >/dev/null 2>&1
|
||
echo " удалено"
|
||
|
||
echo
|
||
echo "═══════════════════════════════════════════════════════════"
|
||
echo " ДЕФЕКТ, КОТОРЫЙ НАШЁЛСЯ В МОЕЙ ПРОВЕРКЕ"
|
||
echo "═══════════════════════════════════════════════════════════"
|
||
echo " Проверка полноты переноса сравнивала число строк в файловой"
|
||
echo " базе и в PostgreSQL. Когда список таблиц оказался пустым,"
|
||
echo " сравнение прошло УСПЕШНО: 0 расхождений из 0 таблиц."
|
||
echo
|
||
echo " Это тот же ложный успех, что весь день: проверка проходит,"
|
||
echo " когда проверять нечего. Правило: если сравнивать нечего —"
|
||
echo " это ОШИБКА, а не успех."
|
||
echo
|
||
echo " Причина пустого списка: в CT 113 не установлен sqlite3."
|
||
echo " Проверено: $(pct exec $CT -- bash -c 'command -v sqlite3 || echo не установлен' 2>/dev/null)"
|