From 7d7412d80a2b9621381f0b9e97267c27ecf60dc9 Mon Sep 17 00:00:00 2001 From: Roman Buryan Date: Sat, 17 Oct 2026 12:24:43 +0300 Subject: [PATCH] =?UTF-8?q?=D0=A0=D0=B0=D0=B7=D0=B4=D0=B5=D0=BB=201:=20?= =?UTF-8?q?=D0=B4=D0=B2=D0=BE=D0=B9=D0=BD=D0=B8=D0=BA=20compose=20=D0=BE?= =?UTF-8?q?=D0=B1=D0=B5=D0=B7=D0=B2=D1=80=D0=B5=D0=B6=D0=B5=D0=BD,=20openc?= =?UTF-8?q?law=20=D1=80=D0=B0=D0=B7=D0=B3=D1=80=D1=83=D0=B6=D0=B5=D0=BD,?= =?UTF-8?q?=20=D0=BE=D1=81=D1=82=D0=B0=D1=82=D0=BA=D0=B8=20=D1=83=D0=B1?= =?UTF-8?q?=D1=80=D0=B0=D0=BD=D1=8B?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit Задачи 1.10, 1.11, 1.12. 1.10 ДВОЙНИК COMPOSE У n8n. Рядом с настоящим compose лежал файл /opt/n8n/docker-compose.yml, которым никто не пользуется: у него ДРУГОЙ путь данных (/opt/n8n/data — пустая папка) и другая сеть. Запусти его — получился бы второй n8n с пустыми данными и без ключа шифрования: внешне работает, а учётные данные «чужие». Файл переименован в .orphan-20261017. Настоящий compose (/opt/automation-lxc) в порядке. МОЯ ОШИБКА, которую это вскрыло: я сначала решил, что «compose не описывает монтирование», и правил не тот файл. Надо было сразу спросить контейнер, какой файл используется: docker inspect <контейнер> --format '{{index .Config.Labels "com.docker.compose.project.config_files"}}' 1.11 OPENCLAW. Падал в петле: база состояния нечитаема, ENOSPC. Причина — диск в CT 115 был заполнен на 100%. Мусор был НЕ там, где показывал Docker: /var/lib/docker занимал 1.5 ГБ, а /var/lib/containerd — 21 ГБ, из которых 12 ГБ — записанный слой самого падающего контейнера. Docker при этом показывал «возвратно 21.7 ГБ», что вводит в заблуждение: это его собственный нужный образ. Сделано: состояние больного контейнера СОХРАНЕНО на хост (/root/openclaw-broken-state-20261017_122412.tar, 1.67 МБ, база внутри — проверено), петля остановлена, контейнер удалён. МЕСТО: было 100%, стало 55%, освободилось 11 ГБ. Живой экземпляр openclaw-old не тронут. Осталось решить (нужно слово владельца): какой экземпляр считать рабочим — работающий openclaw-old (переименовать) или новый из копии. 1.12 ОСТАТКИ ОТ ОБНОВЛЕНИЙ. Убрано 11 контейнеров: plex, sonarr, radarr, prowlarr, bazarr, overseerr, tautulli, linkding, prometheus, syncthing (Exited) и navidrome-old, который КРУТИЛСЯ В ПЕТЛЕ вхолостую. Оставлено 3 работающих: calibre-web-old, freshrss-old, openclaw-old. Признак «old» в имени не значит «мусор» — это действующие экземпляры. Правило записано: удалять только Exited/Created/Restarting. ПРОВЕРЕНО ПОСЛЕ УБОРКИ: Plex, Sonarr, Radarr, Prowlarr, Overseerr, Navidrome, Linkding, Prometheus, Syncthing отвечают 200 (Bazarr и Tautulli — 401, их норма без токена). Наблюдение: 34 проверки, провалов нет. --- docs/TASKS.md | 6 +- docs/UPDATE-2026-10-17-SECTION1.md | 93 ++++++++++++++++++++++ ops/maintenance/check-apparmor-need.sh | 67 ++++++++++++++++ ops/maintenance/cleanup-old-containers.sh | 96 +++++++++++++++++++++++ ops/maintenance/fix-duplicate-compose.sh | 82 +++++++++++++++++++ ops/maintenance/openclaw-rescue.sh | 86 ++++++++++++++++++++ 6 files changed, 427 insertions(+), 3 deletions(-) create mode 100644 docs/UPDATE-2026-10-17-SECTION1.md create mode 100644 ops/maintenance/check-apparmor-need.sh create mode 100644 ops/maintenance/cleanup-old-containers.sh create mode 100644 ops/maintenance/fix-duplicate-compose.sh create mode 100644 ops/maintenance/openclaw-rescue.sh diff --git a/docs/TASKS.md b/docs/TASKS.md index 7a3903f..9fb65a4 100644 --- a/docs/TASKS.md +++ b/docs/TASKS.md @@ -88,9 +88,9 @@ | 1.5 | Разместить ссылки в Vaultwarden | ⬜ | | 1.8 | **Ключ age**: файл с ключом и инструкцией передан владельцу | 🔶 ждёт записи в Vaultwarden и на флешку | | 1.9 | **Пароль root на PVE** → в Vaultwarden | ⬜ по слову владельца: пароль есть локально, пока не делает | -| 1.10 | n8n: compose не описывает монтирование данных (риск потери ключа шифрования) | ⬜ **важно** | -| 1.11 | Починить `openclaw` (падает в петле) | ⬜ владелец решил чинить | -| 1.12 | Убрать остатки `*-old-20261014-*` и петлю `navidrome-old` | ⬜ | +| 1.10 | n8n: двойник compose обезврежен, настоящий в порядке | ✅ | +| 1.11 | `openclaw`: диск освобождён (100%→55%), петля остановлена, состояние сохранено | 🔶 нужно решить, какой экземпляр рабочий | +| 1.12 | Убрать остатки `*-old-*` | ✅ убрано 11, оставлено 3 работающих | ### Этап 2. Больше протоколов diff --git a/docs/UPDATE-2026-10-17-SECTION1.md b/docs/UPDATE-2026-10-17-SECTION1.md new file mode 100644 index 0000000..902522c --- /dev/null +++ b/docs/UPDATE-2026-10-17-SECTION1.md @@ -0,0 +1,93 @@ +# Раздел 1: что сделано 17.10.2026 (второй проход) + +## 1.10 Двойник compose у n8n — обезврежен + +**Что было не так.** Рядом с настоящим compose лежал файл-двойник +`/opt/n8n/docker-compose.yml`, который **никем не использовался**: + +| | настоящий | двойник | +|---|---|---| +| файл | `/opt/automation-lxc/docker-compose.yml` | `/opt/n8n/docker-compose.yml` | +| проект | `automation-lxc` (запущен) | никем не запущен | +| данные | `./n8n/data` — там ключ шифрования | `/opt/n8n/data` — **пустая папка** | +| сеть | `automation_net` | `buryan-net` | + +**Чем опасен.** Запусти двойник — получится второй n8n с ПУСТЫМИ данными +и без ключа шифрования: внешне работает, а учётные данные «чужие». +Выглядит как потеря данных, хотя данные целы. + +**Что сделано:** двойник переименован в +`docker-compose.yml.orphan-20261017`. Настоящий compose в порядке — там и +монтирование, и ключ на месте. + +**Моя ошибка, которую это вскрыло.** Сначала я решил, что «compose не +описывает монтирование», и правил не тот файл. Проверять надо было, какой +файл реально используется: + +```bash +docker inspect <контейнер> --format \ + '{{index .Config.Labels "com.docker.compose.project.config_files"}}' +``` + +Это даёт точный путь. Впредь — сразу. + +## 1.11 openclaw: диск освобождён, петля остановлена + +**Что было.** Контейнер `openclaw` падал в петле (5 перезапусков), из +журнала: + +``` +DoctorUnreadableStateDatabaseError: shared state database is unreadable + at /home/node/.openclaw/state/openclaw.sqlite: ENOSPC: no space left + on device ... restore this file from a verified backup +``` + +**Причина — диск в CT 115 был заполнен на 100%** (25G из 25G, свободно 0). + +**Где был мусор.** Не там, где показывал Docker: + +``` +/var/lib/docker 1.5 ГБ +/var/lib/containerd 21 ГБ <- вот оно +``` + +Внутри containerd: 19 ГБ снимков. Из них **12 ГБ — записанный слой самого +падающего контейнера**. Docker при этом показывал «возвратно 21.7 ГБ», +что вводит в заблуждение: это его собственный нужный образ. + +**Что сделано:** +1. состояние больного контейнера **сохранено на хост** — + `/root/openclaw-broken-state-20261017_122412.tar` (1.67 МБ, база + состояния внутри — проверено); +2. петля остановлена (`--restart=no`), контейнер удалён; +3. **место: было 100%, стало 55%** (освободилось 11 ГБ). + +**Живой экземпляр не тронут:** `openclaw-old` работает 40 часов, healthy. + +**Что осталось решить (нужно ваше слово):** какой экземпляр считать +рабочим. +* `openclaw-old` — работает, данные целы, но имя «временное»; +* больной — данные сняты в копию, но база была повреждена. + +Варианты: переименовать working → нормальное имя, или поднять новый из +копии и лечить базу. Второе рискованнее. + +## 1.12 Остатки от обновлений — убраны + +После обновлений 14.10 оставались контейнеры `*-old-*`. + +**Убрано 11:** `plex`, `sonarr`, `radarr`, `prowlarr`, `bazarr`, +`overseerr`, `tautulli`, `linkding`, `prometheus`, `syncthing` (Exited) и +`navidrome-old` (**крутился в петле перезапуска** вхолостую). + +**Оставлено 3 работающих** — их удалять нельзя: +`calibre-web-old`, `freshrss-old`, `openclaw-old`. Признак «old» в имени +не значит «мусор»: это действующие экземпляры. + +**Правило:** удалять только `Exited`, `Created` и `Restarting`. +Работающие — не трогать, даже если имя выглядит старым. + +**Проверено после уборки:** все службы отвечают (Plex, Sonarr, Radarr, +Prowlarr, Overseerr, Navidrome, Linkding, Prometheus, Syncthing — 200; +Bazarr и Tautulli — 401, это их норма без токена). Наблюдение: 34 +проверки, провалов нет. diff --git a/ops/maintenance/check-apparmor-need.sh b/ops/maintenance/check-apparmor-need.sh new file mode 100644 index 0000000..fadb88b --- /dev/null +++ b/ops/maintenance/check-apparmor-need.sh @@ -0,0 +1,67 @@ +#!/bin/bash +# ============================================================ +# apparmor-inventory.sh — где Docker внутри LXC РЕАЛЬНО мешает +# ============================================================ +# ЗАЧЕМ СНАЧАЛА ИЗМЕРИТЬ. Настройка «unconfined» ОТКЛЮЧАЕТ защиту +# AppArmor у контейнера — это ослабление, а не усиление. Значит менять +# надо только там, где без этого не работает, и только с пониманием +# цены. +# +# Что проверяю: +# 1. в каких CT вообще есть Docker; +# 2. что стоит в настройках AppArmor у каждого; +# 3. работает ли запуск контейнера (docker run --rm hello-world); +# 4. только после этого — вывод: кому правка нужна, а кому нет. +# ============================================================ +set -uo pipefail + +echo "=== 1. ЗАПУЩЕННЫЕ CT И НАЛИЧИЕ DOCKER ===" +printf ' %-6s %-22s %-8s %s\n' "CT" "имя" "docker" "apparmor в настройках" +echo " ------------------------------------------------------------------" +WITH_DOCKER="" +for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}'); do + name=$(pct config "$ct" 2>/dev/null | grep '^hostname' | awk '{print $2}') + has=$(pct exec "$ct" -- bash -c 'command -v docker >/dev/null 2>&1 && echo да || echo нет' 2>/dev/null | tr -d '\r') + ap=$(grep -h 'lxc.apparmor.profile' /etc/pve/lxc/$ct.conf 2>/dev/null | awk -F': ' '{print $2}') + [ -z "$ap" ] && ap="(не задан)" + printf ' %-6s %-22s %-8s %s\n' "$ct" "${name:-?}" "${has:-?}" "$ap" + [ "$has" = "да" ] && WITH_DOCKER="$WITH_DOCKER $ct" +done + +echo +echo "=== 2. ПРОВЕРКА ЗАПУСКА КОНТЕЙНЕРА ВНУТРИ ===" +echo " (docker run --rm hello-world; таймаут 60 с)" +echo +printf ' %-6s %-22s %s\n' "CT" "имя" "результат" +echo " ------------------------------------------------------------------" +BAD="" +OK="" +for ct in $WITH_DOCKER; do + name=$(pct config "$ct" 2>/dev/null | grep '^hostname' | awk '{print $2}') + out=$(timeout 60 pct exec "$ct" -- docker run --rm hello-world 2>&1 | tr -d '\r') + if echo "$out" | grep -q "Hello from Docker"; then + res="работает" + OK="$OK $ct" + elif echo "$out" | grep -qi "apparmor"; then + res="НЕ РАБОТАЕТ (AppArmor)" + BAD="$BAD $ct" + else + res="другая ошибка: $(echo "$out" | grep -i error | head -1 | cut -c1-70)" + BAD="$BAD $ct" + fi + printf ' %-6s %-22s %s\n' "$ct" "${name:-?}" "$res" +done + +echo +echo "=== 3. ИТОГ ===" +echo " работают без правки:${OK:- нет}" +echo " требуют внимания: ${BAD:- нет}" + +echo +echo "=== 4. ЧТО ЭТО ЗНАЧИТ ===" +echo " «Не работает» = Docker внутри контейнера не может загрузить свой" +echo " профиль. Признак: контейнер создаётся, но не стартует, журнала нет." +echo +echo " ВАЖНО ПРО ЦЕНУ: настройка lxc.apparmor.profile=unconfined ОТКЛЮЧАЕТ" +echo " защиту AppArmor для самого LXC. Это ослабление изоляции." +echo " Поэтому применяю только там, где без неё не работает." diff --git a/ops/maintenance/cleanup-old-containers.sh b/ops/maintenance/cleanup-old-containers.sh new file mode 100644 index 0000000..5b5abdf --- /dev/null +++ b/ops/maintenance/cleanup-old-containers.sh @@ -0,0 +1,96 @@ +#!/bin/bash +# ============================================================ +# cleanup-old-containers.sh — убираю остатки от обновлений +# ============================================================ +# ЗАДАЧА 1.12. После обновлений 14.10 остались контейнеры с именами +# вида *-old-20261014-*. Часть из них: +# * в состоянии Exited — просто мусор; +# * в состоянии Restarting — ПЕТЛЯ перезапуска, жрёт ресурсы и пишет +# журналы (нашёл navidrome-old, который крутится вхолостую). +# +# ВАЖНОЕ ПРАВИЛО: удаляю ТОЛЬКО Exited и Restarting. Контейнеры в +# состоянии Up не трогаю, даже если имя содержит «old»: в CT 115 +# openclaw-old — ЭТО РАБОТАЮЩИЙ экземпляр (основной падает, а старый +# работает). Удали его — и сервис пропадёт. +# +# Данные не затрагиваются: удаление контейнера не удаляет тома и папки. +# ============================================================ +set -uo pipefail + +echo "=== 1. ЧТО ЕСТЬ (все *-old-* контейнеры) ===" +printf ' %-6s %-38s %s\n' "CT" "контейнер" "состояние" +echo " ----------------------------------------------------------------------" +TOTAL=0 +for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}'); do + has=$(pct exec "$ct" -- bash -c 'command -v docker >/dev/null 2>&1 && echo да' 2>/dev/null | tr -d '\r') + [ "$has" = "да" ] || continue + pct exec "$ct" -- bash -c 'docker ps -a --format "{{.Names}}|{{.Status}}" 2>/dev/null | grep -- "-old-" | head -8' 2>/dev/null \ + | tr -d '\r' | while IFS='|' read -r name status; do + [ -z "$name" ] && continue + printf ' %-6s %-38s %s\n' "$ct" "$name" "$status" + done + n=$(pct exec "$ct" -- bash -c 'docker ps -a --format "{{.Names}}" 2>/dev/null | grep -c -- "-old-"' 2>/dev/null | tr -d '\r') + TOTAL=$((TOTAL + ${n:-0})) +done +echo " ----------------------------------------------------------------------" +echo " всего остатков: $TOTAL" + +echo +echo "=== 2. УБИРАЮ ТОЛЬКО EXITED И RESTARTING ===" +REMOVED=0 +KEPT=0 +for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}'); do + has=$(pct exec "$ct" -- bash -c 'command -v docker >/dev/null 2>&1 && echo да' 2>/dev/null | tr -d '\r') + [ "$has" = "да" ] || continue + + # беру имена и состояния + list=$(pct exec "$ct" -- bash -c 'docker ps -a --format "{{.Names}}|{{.State}}" 2>/dev/null | grep -- "-old-"' 2>/dev/null | tr -d '\r') + [ -z "$list" ] && continue + + echo "$list" | while IFS='|' read -r name state; do + [ -z "$name" ] && continue + case "$state" in + exited|restarting|created|dead) + pct exec "$ct" -- bash -c "docker rm -f '$name' >/dev/null 2>&1 && echo ' CT $ct: удалён $name ($state)'" 2>/dev/null | sed 's/^/ /' + ;; + running) + echo " CT $ct: ОСТАВЛЕН $name (работает — не трогаю)" | sed 's/^/ /' + ;; + *) + echo " CT $ct: $name в состоянии '$state' — не трогаю" | sed 's/^/ /' + ;; + esac + done +done + +echo +echo "=== 3. ЧТО ОСТАЛОСЬ ===" +for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}'); do + has=$(pct exec "$ct" -- bash -c 'command -v docker >/dev/null 2>&1 && echo да' 2>/dev/null | tr -d '\r') + [ "$has" = "да" ] || continue + pct exec "$ct" -- bash -c 'docker ps -a --format "{{.Names}}|{{.Status}}" 2>/dev/null | grep -- "-old-" | head -4' 2>/dev/null \ + | tr -d '\r' | while IFS='|' read -r name status; do + [ -z "$name" ] && continue + printf ' %-6s %-38s %s\n' "$ct" "$name" "$status" + done +done + +echo +echo "=== 4. ПЕТЛЯ ПЕРЕЗАПУСКА ОСТАЛАСЬ ГДЕ-ТО? ===" +found=0 +for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}'); do + has=$(pct exec "$ct" -- bash -c 'command -v docker >/dev/null 2>&1 && echo да' 2>/dev/null | tr -d '\r') + [ "$has" = "да" ] || continue + bad=$(pct exec "$ct" -- bash -c 'docker ps -a --format "{{.Names}}|{{.Status}}" 2>/dev/null | grep -iE "restarting"' 2>/dev/null | tr -d '\r') + if [ -n "$bad" ]; then + echo " CT $ct:"; echo "$bad" | sed 's/^/ /'; found=$((found+1)) + fi +done +[ "$found" -eq 0 ] && echo " петель перезапуска нет" + +echo +echo "=== 5. СЛУЖБЫ ЖИВЫ (выборочно) ===" +for ct in 108 115 116 125 140; do + n=$(pct exec "$ct" -- bash -c 'docker ps -q 2>/dev/null | wc -l' 2>/dev/null | tr -d '\r') + echo " CT $ct: запущено контейнеров ${n:-?}" +done diff --git a/ops/maintenance/fix-duplicate-compose.sh b/ops/maintenance/fix-duplicate-compose.sh new file mode 100644 index 0000000..ec032a2 --- /dev/null +++ b/ops/maintenance/fix-duplicate-compose.sh @@ -0,0 +1,82 @@ +#!/bin/bash +# ============================================================ +# fix-n8n-duplicate.sh — убираю файл-двойник compose у n8n +# ============================================================ +# ЧТО ВЫЯСНИЛОСЬ (задача 1.10): +# +# Работающий n8n принадлежит проекту automation-lxc: +# /opt/automation-lxc/docker-compose.yml +# монтирование ./n8n/data -> /home/node/.n8n (ключ шифрования там) +# DNS не прописан — берётся от Docker (там теперь AdGuard) +# ЭТОТ ФАЙЛ В ПОРЯДКЕ. +# +# Рядом лежит ДВОЙНИК: /opt/n8n/docker-compose.yml +# * тот же container_name n8n -> конфликт имени; +# * монтирование /opt/n8n/data -> ПУСТАЯ папка (проверено: пусто, 12 КБ); +# * сеть buryan-net вместо automation_net. +# +# ОПАСНОСТЬ: если кто-то (или я по ошибке) запустит двойник, получится +# второй n8n с ПУСТЫМИ данными и без ключа шифрования. Внешне он +# запустится, а учётные данные окажутся «чужими». Это выглядит как потеря +# данных, хотя данные целы. +# +# ЧТО ДЕЛАЮ: переименовываю двойник, чтобы случайно не запустить. +# Файл не удаляю: пусть останется для истории, но с явным именем. +# ============================================================ +set -uo pipefail +CT=108 +DUP=/opt/n8n/docker-compose.yml +STAMP=$(date +%Y%m%d) + +echo "=== 1. ПРОВЕРКА, ЧТО ДВОЙНИК НЕ ИСПОЛЬЗУЕТСЯ ===" +pct exec $CT -- bash -c 'docker compose ls --all 2>/dev/null' | sed 's/^/ /' +echo " --- ссылается ли какой-то проект на /opt/n8n ---" +if pct exec $CT -- bash -c 'docker compose ls --all 2>/dev/null | grep -c "/opt/n8n/docker-compose.yml"'; then + used=$(pct exec $CT -- bash -c 'docker compose ls --all 2>/dev/null | grep -c "/opt/n8n/docker-compose.yml"' | tr -d '\r') +else + used=0 +fi +echo " проектов, использующих двойник: ${used:-0}" + +if [ "${used:-0}" != "0" ]; then + echo " ОСТАНАВЛИВАЮСЬ: двойник используется" + exit 1 +fi + +echo +echo "=== 2. ПОДТВЕРЖДАЮ, ЧТО ПАПКА ДАННЫХ ДВОЙНИКА ПУСТА ===" +pct exec $CT -- bash -c 'n=$(ls -A /opt/n8n/data 2>/dev/null | wc -l); echo " файлов в /opt/n8n/data: $n"; [ "$n" -eq 0 ] && echo " папка пуста — запуск двойника дал бы n8n без данных"' | sed 's/^/ /' + +echo +echo "=== 3. ПЕРЕИМЕНОВЫВАЮ ДВОЙНИК ===" +pct exec $CT -- bash -c " +if [ -f $DUP ]; then + mv $DUP ${DUP}.orphan-$STAMP + echo ' переименован в docker-compose.yml.orphan-$STAMP' + ls -la /opt/n8n/ | grep compose +else + echo ' двойника уже нет' +fi" | sed 's/^/ /' + +echo +echo "=== 4. ЧТО ОСТАЛОСЬ ЗАПУЩЕННЫМ ===" +pct exec $CT -- bash -c 'docker compose ls --all 2>/dev/null' | sed 's/^/ /' + +echo +echo "=== 5. СЛУЖБЫ ЦЕЛЫ ===" +pct exec $CT -- docker ps --format '{{.Names}} | {{.Status}}' 2>/dev/null | sed 's/^/ /' + +echo +echo "=== 6. n8n ОТВЕЧАЕТ ===" +code=$(curl -s -o /dev/null -w '%{http_code}' --max-time 10 "http://192.168.1.108:5680/" 2>/dev/null) +echo " http://192.168.1.108:5680/: HTTP ${code:-—}" + +echo +echo "=== 7. КЛЮЧ ШИФРОВАНИЯ НА МЕСТЕ ===" +pct exec $CT -- bash -c 'ls -la /opt/automation-lxc/n8n/data/config 2>/dev/null' | sed 's/^/ /' + +echo +echo "============================================================" +echo " ГОТОВО: двойник обезврежен, настоящий compose не тронут" +echo " Откат: pct exec $CT -- mv ${DUP}.orphan-$STAMP $DUP" +echo "============================================================" diff --git a/ops/maintenance/openclaw-rescue.sh b/ops/maintenance/openclaw-rescue.sh new file mode 100644 index 0000000..47fb9b7 --- /dev/null +++ b/ops/maintenance/openclaw-rescue.sh @@ -0,0 +1,86 @@ +#!/bin/bash +# ============================================================ +# openclaw-rescue.sh — сохраняю состояние и останавливаю петлю +# ============================================================ +# ЧТО ЕСТЬ: +# * контейнер openclaw падает в петле (11 перезапусков), код 1; +# * его журнал: база состояния повреждена, «restore from verified +# backup», и места нет (ENOSPC) — диск 100%; +# * его записанный слой занимает 12 ГБ — это и забило диск; +# * рядом работает openclaw-old (40 часов, healthy) — живой экземпляр. +# +# ЧТО ДЕЛАЮ: +# 1. СНИМАЮ КОПИЮ состояния больного контейнера на хост (88 ГБ свободно); +# 2. проверяю, что копия не пустая и содержит базу; +# 3. останавливаю петлю и удаляю больной контейнер — освобождаю 12 ГБ; +# 4. показываю, сколько освободилось. +# +# ЧЕГО НЕ ДЕЛАЮ: не трогаю openclaw-old (он работает) и не пытаюсь +# починить базу вслепую — сначала нужен запас места. +# +# Откат: контейнер создаётся из /opt/openclaw/docker-compose.yml, +# состояние — из копии на хосте. +# ============================================================ +set -uo pipefail +CT=115 +HOST_BACKUP=/root/openclaw-broken-state-$(date +%Y%m%d_%H%M%S).tar + +echo "=== 1. МЕСТО ДО ===" +pct exec $CT -- bash -c 'df -h / | tail -1' | sed 's/^/ /' + +echo +echo "=== 2. ОСТАНАВЛИВАЮ ПЕТЛЮ (без удаления) ===" +pct exec $CT -- bash -c ' +docker update --restart=no openclaw >/dev/null 2>&1 +docker stop openclaw >/dev/null 2>&1 +sleep 2 +echo " состояние: $(docker inspect openclaw --format "{{.State.Status}}")" +echo " перезапусков было: $(docker inspect openclaw --format "{{.RestartCount}}")"' 2>/dev/null | sed 's/^/ /' + +echo +echo "=== 3. СНИМАЮ КОПИЮ СОСТОЯНИЯ НА ХОСТ ===" +echo " копия: $HOST_BACKUP" +if pct exec $CT -- bash -c 'docker cp openclaw:/home/node/.openclaw -' > "$HOST_BACKUP" 2>/dev/null; then + SIZE=$(stat -c%s "$HOST_BACKUP" 2>/dev/null || echo 0) + echo " размер копии: $SIZE байт" + if [ "$SIZE" -gt 10000 ]; then + echo " --- что внутри (первые строки) ---" + tar -tf "$HOST_BACKUP" 2>/dev/null | head -6 | sed 's/^/ /' + echo " --- есть ли база состояния ---" + if tar -tf "$HOST_BACKUP" 2>/dev/null | grep -q "state/openclaw.sqlite"; then + echo " база состояния В КОПИИ ЕСТЬ" + else + echo " базы состояния в копии нет" + fi + else + echo " ОШИБКА: копия подозрительно мала — НЕ УДАЛЯЮ контейнер" + exit 1 + fi +else + echo " ОШИБКА: не смог снять копию — НЕ УДАЛЯЮ контейнер" + exit 1 +fi + +echo +echo "=== 4. УДАЛЯЮ БОЛЬНОЙ КОНТЕЙНЕР (освобождаю 12 ГБ) ===" +pct exec $CT -- bash -c 'docker rm openclaw >/dev/null 2>&1 && echo " удалён" || echo " не удалось удалить"' | sed 's/^/ /' + +echo +echo "=== 5. МЕСТО ПОСЛЕ ===" +pct exec $CT -- bash -c 'df -h / | tail -1' | sed 's/^/ /' +pct exec $CT -- docker system df 2>/dev/null | head -3 | sed 's/^/ /' + +echo +echo "=== 6. ЧТО ОСТАЛОСЬ РАБОТАТЬ ===" +pct exec $CT -- docker ps --format '{{.Names}} | {{.Status}}' 2>/dev/null | sed 's/^/ /' + +echo +echo "=== 7. ЖИВ ЛИ СТАРЫЙ ЭКЗЕМПЛЯР ===" +pct exec $CT -- docker ps --filter name=openclaw-old --format '{{.Names}} | {{.Status}}' 2>/dev/null | sed 's/^/ /' + +echo +echo "============================================================" +echo " Копия состояния: $HOST_BACKUP" +echo " Вернуть контейнер: cd /opt/openclaw && docker compose up -d" +echo " Восстановить данные: docker cp <контейнер> с распакованным tar" +echo "============================================================"