Vaultwarden на PostgreSQL: хеши и соли сверены, 12 записей совпадают байт в байт
This commit is contained in:
1 parent
10b5a4cc27
commit
a5fa3dd4d8
5 files changed
+448
-13
No files matched your search
+59
-13
@@ -94,21 +94,44 @@ p -tAc "SELECT count(*) FROM pg_database WHERE datname='$PGDB'" 2>/dev/null | gr
|
||||
echo " база $PGDB"
|
||||
|
||||
say "4. включаю PostgreSQL в конфигурации"
|
||||
# ВАЖНО: в файле может быть НЕСКОЛЬКО служб. Прошлая попытка добавила
|
||||
# переменную в первый попавшийся блок environment (у службы db), и
|
||||
# Vaultwarden продолжил работать с файловой базой — схемы не появилось.
|
||||
# Теперь переменная вставляется строго в блок нужной службы.
|
||||
pct exec "$CT" -- bash -c "
|
||||
python3 - <<'PYEOF'
|
||||
import re
|
||||
p = '$CDIR/docker-compose.yml'
|
||||
s = open(p).read()
|
||||
if 'DATABASE_URL' not in s:
|
||||
add = ''' - DATABASE_URL=postgresql://$PGROLE:$PGPASS@192.168.1.151:5432/$PGDB
|
||||
'''
|
||||
s = s.replace(' environment:\n', ' environment:\n' + add, 1)
|
||||
open(p, 'w').write(s)
|
||||
print(' переменная DATABASE_URL добавлена')
|
||||
if 'DATABASE_URL' in s:
|
||||
print(' DATABASE_URL уже есть в файле')
|
||||
else:
|
||||
print(' DATABASE_URL уже есть')
|
||||
lines = s.split('\n')
|
||||
out = []
|
||||
inside = False
|
||||
inserted = False
|
||||
target = '$CONT'
|
||||
for i, ln in enumerate(lines):
|
||||
out.append(ln)
|
||||
m = re.match(r'^ ([A-Za-z0-9_.-]+):\s*\$', ln)
|
||||
if m:
|
||||
inside = (m.group(1) == target)
|
||||
continue
|
||||
if inside and re.match(r'^ environment:\s*\$', ln) and not inserted:
|
||||
out.append(' - DATABASE_URL=postgresql://$PGROLE:$PGPASS@192.168.1.151:5432/$PGDB')
|
||||
inserted = True
|
||||
inside = False
|
||||
if inserted:
|
||||
open(p, 'w').write('\n'.join(out))
|
||||
print(' переменная добавлена в блок службы $CONT')
|
||||
else:
|
||||
print(' ❌ не найдена служба $CONT с блоком environment — правка не сделана')
|
||||
PYEOF
|
||||
" 2>&1 | sed 's/^/ /'
|
||||
|
||||
# Проверяю, что переменная попала именно туда
|
||||
pct exec "$CT" -- bash -c "grep -n -B2 'DATABASE_URL' $CDIR/docker-compose.yml 2>/dev/null" | sed 's/^/ /'
|
||||
|
||||
say " перезапускаю службу для создания схемы"
|
||||
pct exec "$CT" -- bash -c "cd '$CDIR' && docker compose up -d --force-recreate $CONT" >/dev/null 2>&1
|
||||
created=0
|
||||
@@ -132,17 +155,31 @@ done
|
||||
echo " контейнер удалён: $removed"
|
||||
[ "$removed" = "yes" ] || { say "❌ не удалился"; rollback; exit 1; }
|
||||
|
||||
say "6. очищаю таблицы"
|
||||
say "6. очищаю таблицы (кроме служебных таблиц миграций)"
|
||||
# ПРАВИЛО, выученное на медиа-сервисах: таблицы версий миграций очищать
|
||||
# НЕЛЬЗЯ. По ним служба понимает, какие миграции применены. После очистки
|
||||
# она пытается применить их заново и падает, потому что таблицы уже есть.
|
||||
# У Vaultwarden эту роль играет __diesel_schema_migrations.
|
||||
p -d "$PGDB" -tAc "
|
||||
DO \$\$ DECLARE r record; BEGIN
|
||||
FOR r IN SELECT tablename FROM pg_tables WHERE schemaname='public' LOOP
|
||||
FOR r IN SELECT tablename FROM pg_tables
|
||||
WHERE schemaname='public'
|
||||
AND tablename NOT IN ('__diesel_schema_migrations','alembic_version','VersionInfo','__EFMigrationsHistory')
|
||||
LOOP
|
||||
EXECUTE 'TRUNCATE TABLE ' || quote_ident(r.tablename) || ' CASCADE';
|
||||
END LOOP;
|
||||
END \$\$;" >/dev/null 2>&1
|
||||
echo " очищено"
|
||||
left=$(p -d "$PGDB" -tAc "SELECT count(*) FROM \"__diesel_schema_migrations\"" 2>/dev/null)
|
||||
echo " очищено; записей о миграциях сохранено: ${left:-нет таблицы}"
|
||||
|
||||
say "7. загружаю данные"
|
||||
# ПРАВИЛО: при загрузке проверка связей между таблицами ОТКЛЮЧАЕТСЯ.
|
||||
# Иначе таблицы, ссылающиеся друг на друга, падают по внешнему ключу:
|
||||
# ciphers ссылается на users, а users грузится позже или сбоит — и тогда
|
||||
# валится всё, что от неё зависит. Порядок загрузки при этом не важен.
|
||||
p -d "$PGDB" -tAc "SET session_replication_role = replica" >/dev/null 2>&1
|
||||
loaded=0; failed=0; skipped=0
|
||||
: > "$WORK/failed.txt"
|
||||
while IFS='|' read -r t before; do
|
||||
[ -n "$t" ] || continue
|
||||
[ "${before:-0}" -eq 0 ] && { skipped=$((skipped + 1)); continue; }
|
||||
@@ -155,15 +192,24 @@ while IFS='|' read -r t before; do
|
||||
|
||||
blobs=$(awk -F'|' -v x="$t" '$1==x {print $2}' "$WORK/blobtables.txt")
|
||||
if [ -n "$blobs" ]; then
|
||||
if bash /root/load-blob-table.sh "$t" "$SQLITE" "$CT" "$PGDB" 2>&1 | grep -q '✅'; then
|
||||
# Вывод загрузчика показывается ЦЕЛИКОМ при сбое: раньше он
|
||||
# отфильтровывался по признаку успеха, и текст ошибки терялся.
|
||||
out=$(bash /root/load-blob-v2.sh "$t" "$SQLITE" "$CT" "$PGDB" 2>&1)
|
||||
if echo "$out" | grep -q '✅'; then
|
||||
loaded=$((loaded + 1)); printf ' ✅ %-26s (двоичные)\n' "$t"
|
||||
else
|
||||
failed=$((failed + 1)); printf ' ⚠️ %-26s двоичные не загружены\n' "$t"
|
||||
failed=$((failed + 1))
|
||||
printf ' ⚠️ %-26s двоичные не загружены:\n' "$t"
|
||||
echo "$out" | tail -10 | sed 's/^/ /'
|
||||
fi
|
||||
else
|
||||
pct exec "$CT" -- sqlite3 "$SQLITE" -header -csv "SELECT * FROM \"$t\"" > "$WORK/$t.csv" 2>/dev/null
|
||||
pct push 151 "$WORK/$t.csv" "/tmp/load-$t.csv" >/dev/null 2>&1
|
||||
if pct exec 151 -- sudo -u postgres psql -q -d "$PGDB" -c "\copy \"$t\" FROM '/tmp/load-$t.csv' CSV HEADER" >/dev/null 2>"$WORK/err.txt"; then
|
||||
# «SET session_replication_role» действует только внутри соединения,
|
||||
# поэтому идёт в ТОЙ ЖЕ команде psql, что и загрузка.
|
||||
if pct exec 151 -- sudo -u postgres psql -q -d "$PGDB" \
|
||||
-c "SET session_replication_role = replica" \
|
||||
-c "\copy \"$t\" FROM '/tmp/load-$t.csv' CSV HEADER" >/dev/null 2>"$WORK/err.txt"; then
|
||||
loaded=$((loaded + 1))
|
||||
else
|
||||
failed=$((failed + 1)); printf ' ⚠️ %-26s %s\n' "$t" "$(head -1 "$WORK/err.txt" | cut -c1-55)"
|
||||
|
||||
Reference in new issue
Block a user