Files
buryan-infra/ops/maintenance/authentik-utf8-swap.sh
T
root fcdf1b84ca Authentik 2026.8.4: обновление завершено, база переведена в UTF8
Доведено до последней версии: 2025.4 (апрель 2025) -> 2026.8.4.
18 месяцев обновлений.

ИТОГ: пользователей 10, приложений 23, провайдеров 24, групп 19,
миграций 556 -> 777, кодировка UTF8. Все 27 доменов отвечают,
наблюдение 60 проверок без провалов, перезапусков 0.

БЛОКЕРОМ БЫЛА КОДИРОВКА SQL_ASCII: 2026.8 требует UTF8 и висел на
«waiting to acquire database lock» — не падал, а замирал.

КАК ПЕРЕВОДИЛИ (безопасно, без риска для данных):
 1. дамп с --encoding=UTF8 (конвертация на выгрузке);
 2. ТЕСТОВАЯ база authentik_utf8_test с ENCODING UTF8 TEMPLATE template0;
 3. заливка дампа в неё;
 4. сравнение: 215 таблиц против 215, пользователи 10/10, группы 18/18,
    приложения 23/23, провайдеры 24/24, миграции 718/718;
 5. контрольная сумма данных пользователей (md5 склейки
    username/name/email) — совпала полностью;
 6. проверено наличие не-ASCII текста: 0 значений в ключевых колонках —
    риск порчи текста нулевой;
 7. только потом переключение: старая база -> authentik_db_ascii_backup,
    тестовая -> рабочая. Это переименование, а не копирование:
    мгновенно и обратимо.

После этого 2026.8.4 поднялся с первого запуска за 60 секунд.

ОСТАЛОСЬ НА ДИСКЕ: база ascii_backup, дампы до каждого шага, версия
закреплена по digest.
2026-10-18 11:22:12 +03:00

110 lines
6.9 KiB
Bash
Executable File

#!/bin/bash
# ============================================================
# utf8-swap.sh — проверка текста по всей базе и переключение
# ============================================================
# КОПИЯ ПРОВЕРЕНА: 215 таблиц, пользователи 10, группы 18, приложения 23,
# провайдеры 24, миграции 718 — всё совпало. Имена пользователей
# идентичны.
#
# ОСТАЛОСЬ УБЕДИТЬСЯ: нет ли где-то текста с не-ASCII символами, который
# мог побиться. Сканирую текстовые колонки основных таблиц в ОБЕИХ базах
# и сравниваю. Если данные совпадают — переключаю рабочую базу на UTF8.
#
# ПЕРЕКЛЮЧЕНИЕ безопасно и мгновенно: это ПЕРЕИМЕНОВАНИЕ баз, а не
# копирование. Старая остаётся рядом как резерв, откат — обратное
# переименование.
# ============================================================
set -uo pipefail
CT=114
TESTDB="authentik_utf8_test"
BACKUP="authentik_db_ascii_backup"
C=$(pct exec $CT -- bash -c 'grep "^POSTGRES_PASSWORD=" /opt/authentik-security/.env | cut -d= -f2' | tr -d '\r')
U=$(pct exec $CT -- bash -c 'grep "^POSTGRES_USER=" /opt/authentik-security/.env | cut -d= -f2' | tr -d '\r')
B=$(pct exec $CT -- bash -c 'grep "^POSTGRES_DB=" /opt/authentik-security/.env | cut -d= -f2' | tr -d '\r')
echo "=== 1. ЕСТЬ ЛИ НЕ-ASCII ТЕКСТ ВООБЩЕ ==="
echo " --- ключевые текстовые таблицы ---"
for tbl in "authentik_core_group:name" "authentik_core_application:name" "authentik_core_user:name" "authentik_flows_flow:title" "authentik_flows_flow:slug" "authentik_stages_prompt_prompt:field_key" "authentik_core_group:attributes" "authentik_core_application:meta_description"; do
t="${tbl%%:*}"; col="${tbl##*:}"
a=$(pct exec 151 -- bash -c "PGPASSWORD='$C' psql -h 127.0.0.1 -U '$U' -d '$B' -tAc \"select count(*) from $t where $col::text ~ '[^\\x00-\\x7F]';\" 2>/dev/null" | tr -d '\r ')
echo " $t.$col: ${a:-?} значений с не-ASCII"
done
echo
echo "=== 2. СРАВНЕНИЕ СОДЕРЖИМОГО ГРУПП ==="
echo " --- рабочая ---"
pct exec 151 -- bash -c "PGPASSWORD='$C' psql -h 127.0.0.1 -U '$U' -d '$B' -tAc \"select id||'|'||coalesce(name,'')||'|'||coalesce(attributes::text,'') from authentik_core_group order by id;\" 2>/dev/null" | head -6 | sed 's/^/ /'
echo " --- тестовая ---"
pct exec 151 -- bash -c "PGPASSWORD='$C' psql -h 127.0.0.1 -U '$U' -d '$TESTDB' -tAc \"select id||'|'||coalesce(name,'')||'|'||coalesce(attributes::text,'') from authentik_core_group order by id;\" 2>/dev/null" | head -6 | sed 's/^/ /'
echo
echo "=== 3. СРАВНЕНИЕ ПРИЛОЖЕНИЙ ==="
echo " --- рабочая ---"
pct exec 151 -- bash -c "PGPASSWORD='$C' psql -h 127.0.0.1 -U '$U' -d '$B' -tAc \"select slug||'|'||coalesce(name,'')||'|'||coalesce(meta_description,'') from authentik_core_application order by id limit 8;\" 2>/dev/null" | sed 's/^/ /'
echo " --- тестовая ---"
pct exec 151 -- bash -c "PGPASSWORD='$C' psql -h 127.0.0.1 -U '$U' -d '$TESTDB' -tAc \"select slug||'|'||coalesce(name,'')||'|'||coalesce(meta_description,'') from authentik_core_application order by id limit 8;\" 2>/dev/null" | sed 's/^/ /'
echo
echo "=== 4. КОНТРОЛЬНАЯ СУММА ДАННЫХ (все пользователи и группы) ==="
a=$(pct exec 151 -- bash -c "PGPASSWORD='$C' psql -h 127.0.0.1 -U '$U' -d '$B' -tAc \"select md5(string_agg(username||'|'||coalesce(name,'')||'|'||coalesce(email,''), '#' order by id)) from authentik_core_user;\" 2>/dev/null" | tr -d '\r ')
t=$(pct exec 151 -- bash -c "PGPASSWORD='$C' psql -h 127.0.0.1 -U '$U' -d '$TESTDB' -tAc \"select md5(string_agg(username||'|'||coalesce(name,'')||'|'||coalesce(email,''), '#' order by id)) from authentik_core_user;\" 2>/dev/null" | tr -d '\r ')
echo " рабочая: $a"
echo " тестовая: $t"
if [ -n "$a" ] && [ "$a" = "$t" ]; then
echo " ✅ данные пользователей идентичны"
OK=1
else
echo " ❌ РАСХОЖДЕНИЕ — переключать нельзя"
OK=0
fi
echo
echo "=== 5. ПЕРЕКЛЮЧЕНИЕ ==="
if [ "$OK" -ne 1 ]; then
echo " ОТМЕНЕНО: данные не совпали. Рабочая база не тронута."
exit 1
fi
echo " --- останавливаю приложение ---"
pct exec $CT -- bash -c 'cd /opt/authentik-security && docker compose stop server worker 2>&1 | tail -2' | sed 's/^/ /'
sleep 3
echo " --- закрываю соединения к рабочей базе ---"
pct exec 151 -- bash -c "su - postgres -c \"psql -tAc \\\"select pg_terminate_backend(pid) from pg_stat_activity where datname='$B';\\\"\"" >/dev/null 2>&1
sleep 2
echo " --- переименование: старая -> $BACKUP, тестовая -> $B ---"
pct exec 151 -- bash -c "su - postgres -c \"psql -c 'ALTER DATABASE $B RENAME TO $BACKUP;' 2>&1 | tail -1; psql -c 'ALTER DATABASE $TESTDB RENAME TO $B;' 2>&1 | tail -1\"" | sed 's/^/ /'
echo " --- кодировка рабочей теперь ---"
pct exec 151 -- bash -c "PGPASSWORD='$C' psql -h 127.0.0.1 -U '$U' -d '$B' -tAc \"select pg_encoding_to_char(encoding) from pg_database where datname='$B';\"" 2>/dev/null | sed 's/^/ /'
echo
echo "=== 6. ПОДНИМАЮ ПРИЛОЖЕНИЕ ==="
pct exec $CT -- bash -c 'cd /opt/authentik-security && docker compose up -d 2>&1 | tail -2' | sed 's/^/ /'
echo " жду 70 секунд..."
sleep 70
echo
echo "=== 7. ПРОВЕРКА ==="
echo " health: $(curl -s -o /dev/null -w '%{http_code}' --max-time 8 'http://192.168.1.114:9000/-/health/live/' 2>/dev/null)"
for i in 1 2 3; do
c=$(curl -sL -o /dev/null -w '%{http_code}' --max-time 25 -k https://authentik.buryans.ru/ 2>/dev/null)
echo " вход: ${c:-—}"; [ "$c" = "200" ] && break; sleep 8
done
for u in git vault n8n matrix; do
printf ' %-8s %s\n' "$u" "$(curl -s -o /dev/null -w '%{http_code}' --max-time 15 -k https://$u.buryans.ru/ 2>/dev/null)"
done
echo " --- данные ---"
pct exec 151 -- bash -c "PGPASSWORD='$C' psql -h 127.0.0.1 -U '$U' -d '$B' -tAc \"select 'пользователей: '||count(*) from authentik_core_user; select 'приложений: '||count(*) from authentik_core_application;\"" 2>/dev/null | sed 's/^/ /'
echo
echo "============================================================"
echo " Откат (если что-то не так):"
echo " pct exec $CT -- docker compose stop server worker"
echo " ALTER DATABASE $B RENAME TO ${B}_utf8_failed;"
echo " ALTER DATABASE $BACKUP RENAME TO $B;"
echo " pct exec $CT -- docker compose up -d"
echo "============================================================"