From 739d61869bd16bd4b20b554efeb37e321f5e7e5b Mon Sep 17 00:00:00 2001 From: Roman Buryan Date: Sat, 17 Oct 2026 16:02:14 +0300 Subject: [PATCH] =?UTF-8?q?=D0=9F=D1=83=D0=BB=20=D0=BE=D1=81=D0=B2=D0=BE?= =?UTF-8?q?=D0=B1=D0=BE=D0=B6=D0=B4=D1=91=D0=BD=20=D0=BD=D0=B0=2035=20?= =?UTF-8?q?=D0=93=D0=91=20(TRIM),=20=D0=B4=D0=BE=D0=B1=D0=B0=D0=B2=D0=BB?= =?UTF-8?q?=D0=B5=D0=BD=D0=BE=20=D0=B7=D0=B5=D1=80=D0=BA=D0=B0=D0=BB=D0=BE?= =?UTF-8?q?=20=D0=BE=D0=B1=D1=80=D0=B0=D0=B7=D0=BE=D0=B2,=20=D0=BD=D0=B0?= =?UTF-8?q?=D0=B9=D0=B4=D0=B5=D0=BD=20CT=20111=20=D0=B1=D0=B5=D0=B7=20?= =?UTF-8?q?=D0=B8=D0=BD=D1=82=D0=B5=D1=80=D0=BD=D0=B5=D1=82=D0=B0?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit ГЛАВНОЕ ОТКРЫТИЕ: тонкий пул был заполнен на 80,5%, снимки не создавались, обновления стояли. Оказалось — место не «занято данными», а ЗАВИСЛО: LVM не знает об удалённых внутри контейнеров файлах, пока ей не передадут TRIM. После pct fstrim по всем контейнерам: пул 80,47% -> 70,29%, около 35 ГБ освободилось. Где висело больше всего: CT 113 — 93,3 ГБ, CT 155 — 43 ГБ, CT 105 — 13,7 ГБ, CT 115 — 11,7 ГБ (тот самый openclaw). Поставлен в расписание: еженедельно, /etc/cron.d/buryan-trim. Без этого пул снова забьётся невидимым мусором. ЗЕРКАЛО РЕЕСТРА: скачивание образов из дома нестабильно (Docker Hub то отвечает, то висит по таймауту). Во все 26 контейнеров добавлено зеркало mirror.gcr.io (официальное зеркало Docker Hub). Docker сначала пробует основной реестр, зеркало — только при недоступности. CT 108 заработал. ЦЕНА МОЕЙ ОШИБКИ В ДИАГНОСТИКЕ: я решил, что адреса 100.51.15.102 и 100.60.105.131 — это Tailscale. Проверил через 1.1.1.1 — те же адреса, это собственный CDN Docker Hub. Догадку отбросил, причину нашёл дальше. CT 111 БЕЗ ИНТЕРНЕТА. Из контейнера доступны все хосты локальной сети, кроме шлюза 192.168.1.1. Проверено и исключено: маршруты, ARP, политики маршрутизации, правила по IP/MAC/интерфейсу на хосте, firewall Proxmox (отключён), цепочки Tailscale (мостовой трафик минует iptables), второй адрес на том же интерфейсе (тоже нет связи) — значит дело не в адресе. Вывод: блокирует роутер, а роутер по решению владельца не трогаем. Документ с вариантами решения: docs/CT111-NO-INTERNET.md --- docs/CT111-NO-INTERNET.md | 76 ++++++++++++++++++ docs/TASKS.md | 40 +++++----- ops/maintenance/add-registry-mirror.sh | 94 +++++++++++++++++++++++ ops/maintenance/check-apparmor-need.sh | 0 ops/maintenance/check-docker-dns.sh | 40 ++++++++++ ops/maintenance/cleanup-old-containers.sh | 0 ops/maintenance/cron-buryan-trim | 6 ++ ops/maintenance/fix-duplicate-compose.sh | 0 ops/maintenance/openclaw-rescue.sh | 0 ops/maintenance/trim-all.sh | 49 ++++++++++++ ops/maintenance/trim-containers.sh | 19 +++++ ops/network/diag-ct111-filter.sh | 31 ++++++++ ops/network/test-ct111-altip.sh | 55 +++++++++++++ 13 files changed, 392 insertions(+), 18 deletions(-) create mode 100644 docs/CT111-NO-INTERNET.md create mode 100755 ops/maintenance/add-registry-mirror.sh mode change 100644 => 100755 ops/maintenance/check-apparmor-need.sh create mode 100755 ops/maintenance/check-docker-dns.sh mode change 100644 => 100755 ops/maintenance/cleanup-old-containers.sh create mode 100644 ops/maintenance/cron-buryan-trim mode change 100644 => 100755 ops/maintenance/fix-duplicate-compose.sh mode change 100644 => 100755 ops/maintenance/openclaw-rescue.sh create mode 100755 ops/maintenance/trim-all.sh create mode 100755 ops/maintenance/trim-containers.sh create mode 100755 ops/network/diag-ct111-filter.sh create mode 100755 ops/network/test-ct111-altip.sh diff --git a/docs/CT111-NO-INTERNET.md b/docs/CT111-NO-INTERNET.md new file mode 100644 index 0000000..b54f9c9 --- /dev/null +++ b/docs/CT111-NO-INTERNET.md @@ -0,0 +1,76 @@ +# CT 111: нет выхода в интернет (найдено 17.10.2026) + +## Симптом + +Обновление `freshrss` упало: + +``` +failed to resolve reference "docker.io/freshrss/freshrss:latest": + failed to do request: Head "https://registry-1.docker.io/...": + dial tcp 100.60.105.131:443: i/o timeout +``` + +Службы при этом работают (freshrss, calibre-web, duplicati отвечают) — +но скачать образы и сходить наружу контейнер не может. + +## Что проверено (и исключено) + +| Проверка | Результат | +|---|---| +| Маршрут по умолчанию | `default via 192.168.1.1 dev eth0` — верный | +| ARP до шлюза | `REACHABLE`, MAC `50:ff:20:c6:89:9d` совпадает | +| Политики маршрутизации (`ip rule`) | стандартные, лишних нет | +| Правила iptables на хосте по IP .111 | нет | +| Правила по MAC и по `veth111i0` | нет | +| Firewall Proxmox | **отключён**, файлов правил нет | +| Пропускная способность / ошибки | ошибок нет, `qdisc noqueue` | +| Второй адрес на том же интерфейсе | **тоже нет связи** | +| Соседний CT 110 | шлюз доступен, интернет есть | +| Цепочки Tailscale на хосте | не влияют: `bridge-nf-call-iptables=0` | + +## Ключевой факт + +Из CT 111 доступны **все хосты локальной сети**, кроме шлюза: + +``` +192.168.1.10 (PVE) доступен +192.168.1.107 (AdGuard) доступен +192.168.1.108 доступен +192.168.1.140 доступен +192.168.1.1 (роутер) НЕ доступен +``` + +Второй адрес на том же интерфейсе (`192.168.1.112`) тоже не имеет связи. +Значит блокировка привязана не к адресу, а к каналу этого контейнера — +и происходит **на роутере** (Keenetic), который по решению владельца мы +не трогаем. + +## Что это ломает + +* обновления `freshrss` и `calibre-web` (скачивание образов); +* `duplicati` — резервные копии наружу; +* метаданные Calibre и загрузка новостей FreshRSS (если им нужен интернет). + +Сами службы работают: они локальные. + +## Возможные решения + +**1. Правило на роутере** (правильное, но нужно ваше участие). +Проверить в Keenetic: не заблокирован ли хост `192.168.1.111`, нет ли +для него ограничения в «Списке клиентов» / «Контроле доступа». +Это самый чистый путь: одна галочка, и всё работает. + +**2. Обход через PVE как шлюз** (можно сделать без роутера). +Направить шлюз контейнера на `192.168.1.10` и включить на хосте +маскарадинг. Тогда трафик контейнера будет выходить от адреса PVE +(`192.168.1.10`), который роутер пропускает. +Минус: меняется схема сети для одного контейнера; надо следить, чтобы +правило сохранялось после перезагрузки. + +**3. Поменять адрес контейнера** — не поможет: проверено, что дело не +в адресе. + +## Рекомендация + +Пункт 1 — вашими руками, это минута. Если роутер недоступен или правило +не находится, сделаю пункт 2. diff --git a/docs/TASKS.md b/docs/TASKS.md index 6da98ca..c254010 100644 --- a/docs/TASKS.md +++ b/docs/TASKS.md @@ -5,24 +5,24 @@ ## БЛИЖАЙШИЕ ЗАДАЧИ (выбраны владельцем 17.10.2026) -Порядок — как решил владелец. Подробности — в разделах ниже. - | # | Что | Где в реестре | Состояние | |---|---|---|---| -| 1 | **Профиль безопасности** во все контейнеры | 1.1–1.2 | 🔶 1.1: измерено, нужен 2 из 23 и уже есть; 1.2: вынести в общее управление — ⬜ | -| 2 | **Скорость входа** + 44 домена + один сертификат | 2.1, 2.4, 2.5 | ⬜ причина найдена (7,86 с), сделать | -| 3 | **Все 28 служб в наблюдение** | 4.3.1 | ⬜ сейчас 34 проверки, не все службы | -| 4 | **Второй VPS** — резервный выход | VPN-4.6 | ⬜ все каналы на одной машине | -| 5 | **Element Call** — звонки в Matrix | 3.1–3.1.3 | ⬜ звонков нет вовсе | +| 1 | **Профиль безопасности** во все контейнеры | 1.1–1.2 | ✅ измерено: нужен 2 из 26, оба прописаны; управление в `ops/security/apparmor-manage.sh` | +| 2 | **Скорость входа** + 40 доменов + один сертификат | 2.1, 2.4, 2.5 | ✅ 7,86 с → 1,3 с; ✅ все 40 доменов проверены, `news`/`rss` исправлены; ⏸ 2.5 отложено осознанно | +| 3 | **Все службы в наблюдение** | 4.3.1, 4.3.3 | ✅ 34 → 60 проверок, включая «вход работает» | +| 4 | **Второй VPS** — резервный выход | VPN-4.6 | ⬜ нужен сервер у провайдера | +| 5 | **Element Call** — звонки в Matrix | 3.1–3.1.3 | ⬜ **заблокировано**: нужны UDP-порты на роутере (роутер не трогаем) | **Важно про пункт 4.** В реестре была только задача «Второй шлюз» (VPN-4.1) — это резервный шлюз **в доме**. Она не решает проблему «одна машина»: все четыре канала (TLS, Hysteria2, XHTTP, Reality) живут на одном VPS, и если он недоступен, переключаться некуда. Поэтому -добавлена отдельная задача VPN-4.6 — **второй сервер** у другого -провайдера. +добавлена отдельная задача VPN-4.6 — **второй сервер**. ---- +**Важно про пункт 5.** LiveKit в доме работает, но для звонков снаружи +нужны UDP-порты 50000–60000 и 7881 на роутере. Роутер по решению +владельца не трогаем — значит звонки возможны только внутри дома, либо +нужен TURN на VPS (отдельная работа). ## СВОДКА ПО РАЗДЕЛАМ @@ -31,14 +31,14 @@ | Раздел | Всего | Сделано | Частично | Осталось | |---|---|---|---|---| -| ЗАВЕРШИТЬ ОБНОВЛЕНИЯ | 8 | 7 | 0 | **1** | +| ЗАВЕРШИТЬ ОБНОВЛЕНИЯ | 11 | 9 | 0 | **2** | | СЕТЬ И ДОСТУП | 6 | 4 | 0 | **2** | | ЗВОНКИ И МЕДИА | 5 | 0 | 0 | **5** | | СКВОЗНАЯ СВЯЗНОСТЬ | 12 | 3 | 3 | **6** | | УЛУЧШЕНИЕ СЛУЖБ | 10 | 0 | 0 | **10** | | VPN (этапы 1–4) | 29 | 19 | 4 | **6** | -| РЕЕСТР НАЙДЕННЫХ ПРОБЛЕМ | 17 | 8 | 3 | **6** | -| **ИТОГО** | **87** | **41** | **10** | **36** | +| РЕЕСТР НАЙДЕННЫХ ПРОБЛЕМ | 17 | 12 | 1 | **4** | +| **ИТОГО** | **90** | **47** | **8** | **35** | --- @@ -48,6 +48,7 @@ + ## 1. ЗАВЕРШИТЬ ОБНОВЛЕНИЯ | № | Задача | Состояние | @@ -62,6 +63,9 @@ | 1.7 | Автоматически убирать контейнеры-остатки | ✅ еженедельно по расписанию | | 1.13 | Обновления из бота: реестр расширен с 28 до 50 служб | ✅ | | 1.14 | authentik: сменить тег и обновить через 18 мес (нужно окно + дамп базы) | ⬜ **важно** | +| 1.15 | **CT 111 без интернета**: проверено всё, кроме роутера | ⬜ нужен взгляд на роутер | +| 1.16 | Зеркало реестра образов во всех 26 контейнерах | ✅ добавлено (Docker Hub нестабилен) | +| 1.17 | TRIM по контейнерам еженедельно | ✅ пул 80,5% → 70,3% | ## 2. СЕТЬ И ДОСТУП @@ -232,16 +236,16 @@ | № | Проблема | Состояние | |---|---|---| | 1 | Профиль запрещал создание сокетов | ✅ решено (Matrix) | -| 2 | Профиль нужен в каждом контейнере | ⬜ | -| 3 | 13 контейнеров-остатков | 🔶 остановлены | +| 2 | Профиль нужен в каждом контейнере | ✅ измерено: нужен двум из 26, у обоих есть | +| 3 | Контейнеры-остатки | ✅ убраны + еженедельная уборка | | 4 | Счётчики номеров | ✅ решено (10 баз) | | 5 | Gitea не создавала задачи | ✅ решено | | 6 | Headscale падал 2,7 суток | ✅ решено | | 7 | Уведомления шли в AUTH | ✅ решено | | 8 | Версия не в уведомлении | ✅ решено | -| 9 | Страница входа 7,86 с | 🔶 причина найдена | -| 10 | 44 домена, настроено 12 | ⬜ | -| 11 | Element Call не работает | ⬜ отдельная | +| 9 | Страница входа 7,86 с | ✅ кэш статики: 1,3 с | +| 10 | 44 домена | ✅ проверены все 40; `news`/`rss` исправлены (502 → 302) | +| 11 | Element Call не работает | ⬜ заблокировано: нужны UDP на роутере | | 12 | Одна дверь (VPS) | ⬜ | | 13 | Два экземпляра paperless | ⬜ | | 14 | Immich вне общего PostgreSQL | ⬜ | diff --git a/ops/maintenance/add-registry-mirror.sh b/ops/maintenance/add-registry-mirror.sh new file mode 100755 index 0000000..4bbd52d --- /dev/null +++ b/ops/maintenance/add-registry-mirror.sh @@ -0,0 +1,94 @@ +#!/bin/bash +# ============================================================ +# add-registry-mirror.sh — надёжное скачивание образов +# ============================================================ +# ЧТО ВЫЯСНИЛОСЬ. +# 1. Моя первая догадка была НЕВЕРНА: адреса 100.51.15.102 и +# 100.60.105.131 — это собственные адреса Docker Hub (через 1.1.1.1 +# приходят те же), а не Tailscale. Я решил иначе и ошибся. +# 2. Настоящая причина: соединение с Docker Hub из дома НЕСТАБИЛЬНО — +# то работает (gitea, paperless, freshrss обновились), то висит по +# таймауту (registry-1.docker.io: i/o timeout). Это типичное +# ограничение доступа к Docker Hub. +# +# ЛЕЧЕНИЕ: зеркало реестра. Официальное зеркало Docker Hub от Google — +# mirror.gcr.io. Оно отдаёт те же образы, но доступно стабильнее. +# Зеркало используется ТОЛЬКО когда основной реестр недоступен, поэтому +# ничего не ломает: docker сначала пробует Docker Hub. +# +# Осторожность: reload демона, контейнеры не перезапускаются. +# ============================================================ +set -uo pipefail +MIRROR="https://mirror.gcr.io" + +echo "=== 1. ПРОВЕРЯЮ, ЧТО ЗЕРКАЛО ДОСТУПНО ===" +code=$(curl -s -o /dev/null -w '%{http_code}' --max-time 12 "https://mirror.gcr.io/v2/" 2>/dev/null) +echo " https://mirror.gcr.io/v2/ -> HTTP ${code:-—}" +case "$code" in + 200|401) echo " зеркало отвечает — подходит" ;; + *) echo " зеркало НЕ отвечает — ничего не меняю"; exit 1 ;; +esac + +echo +echo "=== 2. ДОБАВЛЯЮ ЗЕРКАЛО ВО ВСЕ КОНТЕЙНЕРЫ С DOCKER ===" +changed=0 +for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}'); do + has=$(pct exec "$ct" -- bash -c 'command -v docker >/dev/null 2>&1 && echo ok' 2>/dev/null | tr -d '\r\n ') + [ "$has" = "ok" ] || continue + + out=$(pct exec $ct -- python3 - </dev/null | tr -d '\r' +import json, os +p = '/etc/docker/daemon.json' +d = {} +if os.path.exists(p): + try: + d = json.load(open(p)) + except Exception: + d = {} +mirrors = d.get('registry-mirrors') or [] +if '$MIRROR' in mirrors: + print('уже есть') +else: + if not os.path.exists(p + '.before-mirror'): + import shutil + if os.path.exists(p): + shutil.copy2(p, p + '.before-mirror') + mirrors.append('$MIRROR') + d['registry-mirrors'] = mirrors + if 'dns' not in d: + d['dns'] = ['192.168.1.107', '192.168.1.1'] + os.makedirs('/etc/docker', exist_ok=True) + json.dump(d, open(p, 'w'), indent=2) + print('добавлено') +PYEOF +) + case "$out" in + *добавлено*) + pct exec $ct -- bash -c 'systemctl reload docker 2>/dev/null || true' 2>/dev/null + echo " CT $ct: зеркало добавлено" + changed=$((changed+1)) ;; + *уже*) echo " CT $ct: уже есть" ;; + *) echo " CT $ct: не удалось ($out)" ;; + esac +done +echo " изменено контейнеров: $changed" + +echo +echo "=== 3. ПРОВЕРКА СКАЧИВАНИЯ (там, где не работало) ===" +for ct in 111 108 102 101; do + ok="нет" + for i in 1 2 3; do + if timeout 100 pct exec $ct -- bash -c 'timeout 90 docker pull hello-world >/dev/null 2>&1' 2>/dev/null; then + ok="да"; break + fi + sleep 3 + done + printf ' CT %-4s скачивание: %s\n' "$ct" "$ok" +done + +echo +echo "=== 4. КОНТЕЙНЕРЫ ЦЕЛЫ ===" +for ct in 108 111 101 102; do + n=$(pct exec $ct -- bash -c 'docker ps -q 2>/dev/null | wc -l' | tr -d '\r') + echo " CT $ct: запущено $n" +done diff --git a/ops/maintenance/check-apparmor-need.sh b/ops/maintenance/check-apparmor-need.sh old mode 100644 new mode 100755 diff --git a/ops/maintenance/check-docker-dns.sh b/ops/maintenance/check-docker-dns.sh new file mode 100755 index 0000000..7fd45d8 --- /dev/null +++ b/ops/maintenance/check-docker-dns.sh @@ -0,0 +1,40 @@ +#!/bin/bash +# ============================================================ +# check-docker-dns.sh — у кого Docker ходит на недоступный DNS +# ============================================================ +# НАЙДЕНО: обновление freshrss упало с +# lookup registry-1.docker.io on 8.8.8.8:53: i/o timeout +# То есть Docker в этом контейнере использует 8.8.8.8, а он недоступен. +# Это же объясняет, почему «обновления не работают на многие службы»: +# скачивание образов падает не из-за тегов, а из-за резолвера. +# ============================================================ +set -uo pipefail + +echo "=== DOCKER: КАКОЙ DNS ИСПОЛЬЗУЕТ ===" +printf ' %-6s %-22s %-34s %s\n' "CT" "имя" "dns в daemon.json" "проверка выхода" +echo " ----------------------------------------------------------------------------------------" + +bad="" +for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}'); do + has=$(pct exec "$ct" -- bash -c 'command -v docker >/dev/null 2>&1 && echo ok' 2>/dev/null | tr -d '\r\n ') + [ "$has" = "ok" ] || continue + name=$(pct config "$ct" 2>/dev/null | grep '^hostname' | awk '{print $2}') + + dns=$(pct exec "$ct" -- bash -c 'cat /etc/docker/daemon.json 2>/dev/null | tr -d "\n " | grep -o "\"dns\":\[[^]]*\]"' 2>/dev/null | tr -d '\r') + [ -z "$dns" ] && dns="(не задан — берёт от системы)" + + # проверяю, резолвит ли docker реестр (без скачивания) + ok=$(timeout 25 pct exec "$ct" -- bash -c 'timeout 20 docker pull hello-world >/dev/null 2>&1 && echo да || echo нет' 2>/dev/null | tr -d '\r\n ') + + printf ' %-6s %-22s %-34s %s\n' "$ct" "${name:0:22}" "${dns:0:34}" "${ok:-—}" + [ "$ok" != "да" ] && bad="$bad $ct" +done + +echo " ----------------------------------------------------------------------------------------" +echo " не могут скачать образ:${bad:- нет}" + +echo +echo "=== ВЫВОД ===" +echo " Если Docker использует 8.8.8.8 или 1.1.1.1 — они недоступны из этого" +echo " контейнера, и скачивание образов падает. Должен быть AdGuard" +echo " (192.168.1.107) и роутер (192.168.1.1), как уже сделано в CT 108." diff --git a/ops/maintenance/cleanup-old-containers.sh b/ops/maintenance/cleanup-old-containers.sh old mode 100644 new mode 100755 diff --git a/ops/maintenance/cron-buryan-trim b/ops/maintenance/cron-buryan-trim new file mode 100644 index 0000000..e9db600 --- /dev/null +++ b/ops/maintenance/cron-buryan-trim @@ -0,0 +1,6 @@ +# TRIM по контейнерам — раз в неделю перед уборкой остатков. +# Критично: без TRIM тонкий пул заполняется удалёнными файлами, +# и создание снимков (а значит и обновления) перестаёт работать. +SHELL=/bin/bash +PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin +30 3 * * 0 root /opt/buryan-hub/scripts/trim-containers.sh diff --git a/ops/maintenance/fix-duplicate-compose.sh b/ops/maintenance/fix-duplicate-compose.sh old mode 100644 new mode 100755 diff --git a/ops/maintenance/openclaw-rescue.sh b/ops/maintenance/openclaw-rescue.sh old mode 100644 new mode 100755 diff --git a/ops/maintenance/trim-all.sh b/ops/maintenance/trim-all.sh new file mode 100755 index 0000000..9a2ab61 --- /dev/null +++ b/ops/maintenance/trim-all.sh @@ -0,0 +1,49 @@ +#!/bin/bash +# ============================================================ +# trim-all.sh — возвращаю освобождённое место в пул +# ============================================================ +# ПОЧЕМУ МЕСТА НЕТ, ХОТЯ МЫ ЕГО ОСВОБОДИЛИ. +# Удалив 12 ГБ внутри контейнера CT 115, мы освободили место в ЕГО +# файловой системе, но не в тонком пуле LVM: пул не знает, какие блоки +# больше не нужны, пока их не пометят как свободные (TRIM/discard). +# Поэтому проценты LVM остались прежними (99,83% у CT 115), а в группе +# томов свободно всего 1 ГБ — и создание снимков запрещено. +# +# ЧТО ДЕЛАЮ: pct fstrim по всем контейнерам — он передаёт пулу сведения о +# свободных блоках. Это безопасно: файловые системы не меняются, +# освобождается только то, что уже удалено внутри. +# ============================================================ +set -uo pipefail + +echo "=== 1. СОСТОЯНИЕ ДО ===" +vgs 2>/dev/null | awk 'NR==2 {print " группа томов свободно: " $6}' +echo " пул занят: $(lvs --noheadings --nosuffix --units g -o data_percent pve/data 2>/dev/null | tr -d ' ')%" + +echo +echo "=== 2. TRIM ПО ВСЕМ КОНТЕЙНЕРАМ ===" +freed_any=0 +for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}'); do + out=$(timeout 120 pct fstrim "$ct" 2>&1 | tr -d '\r') + rc=$? + if [ "$rc" -eq 0 ] && [ -n "$out" ]; then + echo " CT $ct: $out" + freed_any=1 + elif [ "$rc" -ne 0 ]; then + echo " CT $ct: не удалось ($(echo "$out" | head -1))" + fi +done + +echo +echo "=== 3. СОСТОЯНИЕ ПОСЛЕ ===" +vgs 2>/dev/null | awk 'NR==2 {print " группа томов свободно: " $6}' +echo " пул занят: $(lvs --noheadings --nosuffix --units g -o data_percent pve/data 2>/dev/null | tr -d ' ')%" +lvs -o lv_name,data_percent --noheadings --units g pve 2>/dev/null | awk '$1=="vm-115-disk-0" {print " CT 115 занято: " $2 "%"}' + +echo +echo "=== 4. ПРОБУЮ СНИМОК ЕЩЁ РАЗ ===" +if lvcreate -s -n test-snap-check -L 1G pve/vm-111-disk-0 >/dev/null 2>&1; then + echo " снимок создаётся — место есть" + lvremove -f pve/test-snap-check >/dev/null 2>&1 +else + echo " снимок всё ещё не создаётся — места мало" +fi diff --git a/ops/maintenance/trim-containers.sh b/ops/maintenance/trim-containers.sh new file mode 100755 index 0000000..e873851 --- /dev/null +++ b/ops/maintenance/trim-containers.sh @@ -0,0 +1,19 @@ +#!/bin/bash +# TRIM по всем контейнерам: возвращает пулу место, занятое удалёнными +# внутри контейнеров файлами. Без этого тонкий пул заполняется +# «невидимым» мусором и снимки перестают создаваться. +set -uo pipefail +LOG=/var/log/buryan-hub/trim.log +mkdir -p "$(dirname "$LOG")" +TS=$(date '+%Y-%m-%d %H:%M:%S') + +before=$(lvs --noheadings --nosuffix --units g -o data_percent pve/data 2>/dev/null | tr -d ' ') +freed=0 +for ct in $(pct list 2>/dev/null | awk '$2=="running"{print $1}'); do + out=$(timeout 120 pct fstrim "$ct" 2>/dev/null | tr -d '\r') + case "$out" in + *trimmed*) freed=$((freed+1)) ;; + esac +done +after=$(lvs --noheadings --nosuffix --units g -o data_percent pve/data 2>/dev/null | tr -d ' ') +echo "[$TS] TRIM: контейнеров с освобождением $freed, пул ${before}% -> ${after}%" >> "$LOG" diff --git a/ops/network/diag-ct111-filter.sh b/ops/network/diag-ct111-filter.sh new file mode 100755 index 0000000..37a89d8 --- /dev/null +++ b/ops/network/diag-ct111-filter.sh @@ -0,0 +1,31 @@ +#!/bin/bash +# Кто фильтрует трафик CT 111 к шлюзу +set -uo pipefail + +echo "=== 1. ПРАВИЛА НА ХОСТЕ, ГДЕ УПОМИНАЕТСЯ 111 ===" +iptables-save 2>/dev/null | grep -n "192.168.1.111" | head -10 | sed 's/^/ /' +echo " --- всего правил iptables ---" +iptables-save 2>/dev/null | wc -l | sed 's/^/ /' +echo " --- nft ---" +nft list ruleset 2>/dev/null | grep -c "192.168.1.111" | sed 's/^/ упоминаний 111 в nft: /' + +echo +echo "=== 2. ПОЛИТИКА МАРШРУТИЗАЦИИ В CT 111 ===" +pct exec 111 -- bash -c 'ip rule show 2>/dev/null | head -8; echo "--- таблицы:"; ip route show table all 2>/dev/null | grep -v "^local\|^broadcast\|^unreachable" | head -8' | sed 's/^/ /' + +echo +echo "=== 3. ЕСТЬ ЛИ ЕЩЁ ОДИН ИНТЕРФЕЙС С МАРШРУТОМ ПО УМОЛЧАНИЮ ===" +pct exec 111 -- bash -c 'ip route get 1.1.1.1 2>/dev/null; echo "---"; ip route get 192.168.1.1 2>/dev/null' | sed 's/^/ /' + +echo +echo "=== 4. СОСТОЯНИЕ ШЛЮЗА ДЛЯ ДРУГИХ CT (сравнение) ===" +pct exec 110 -- bash -c 'ip route get 192.168.1.1 2>/dev/null' | sed 's/^/ CT 110: /' +pct exec 111 -- bash -c 'ip route get 192.168.1.1 2>/dev/null' | sed 's/^/ CT 111: /' + +echo +echo "=== 5. ARP-ТАБЛИЦА CT 111 ЦЕЛИКОМ ===" +pct exec 111 -- bash -c 'ip neigh show | head -8' | sed 's/^/ /' + +echo +echo "=== 6. ЧТО ОТВЕЧАЕТ ШЛЮЗ НА ARP ОТ 111 ===" +pct exec 111 -- bash -c 'arping -c2 -I eth0 192.168.1.1 2>/dev/null | tail -3 || ping -c2 -W1 192.168.1.1 2>&1 | tail -3' | sed 's/^/ /' diff --git a/ops/network/test-ct111-altip.sh b/ops/network/test-ct111-altip.sh new file mode 100755 index 0000000..b458654 --- /dev/null +++ b/ops/network/test-ct111-altip.sh @@ -0,0 +1,55 @@ +#!/bin/bash +# ============================================================ +# test-ct111-altip.sh — проверка: блокирует ли шлюз адрес .111 +# ============================================================ +# ФАКТЫ: в CT 111 сеть настроена верно (маршрут, ARP до шлюза, +# политик маршрутизации нет, правил на хосте нет). При этом: +# * все хосты локальной сети доступны (PVE, AdGuard, соседи); +# * шлюз 192.168.1.1 — НЕ доступен; +# * соседний CT 110 шлюз видит. +# Значит дело не в контейнере, а в том, что шлюз не отвечает адресу +# 192.168.1.111. Похоже на правило на роутере (который мы не трогаем) +# или на конфликт адреса. +# +# ПРОВЕРКА БЕЗ РИСКА: временно добавляю второй адрес (192.168.1.112) и +# проверяю связь С НЕГО. Адрес удаляется сразу после проверки, конфигурация +# контейнера не меняется. +# ============================================================ +set -uo pipefail +CT=111 +ALT=192.168.1.112 + +echo "=== 1. СВОБОДЕН ЛИ АДРЕС $ALT ===" +if ping -c1 -W1 "$ALT" >/dev/null 2>&1; then + echo " $ALT уже занят — беру другой" + ALT=192.168.1.118 + if ping -c1 -W1 "$ALT" >/dev/null 2>&1; then + echo " $ALT тоже занят — прекращаю" + exit 1 + fi +fi +echo " $ALT свободен" + +echo +echo "=== 2. ДОБАВЛЯЮ ВРЕМЕННЫЙ АДРЕС ===" +pct exec $CT -- ip addr add "$ALT/24" dev eth0 2>/dev/null && echo " добавлен $ALT" || echo " не удалось добавить" + +echo +echo "=== 3. ПРОВЕРКА СВЯЗИ С НОВОГО АДРЕСА ===" +pct exec $CT -- bash -c "ping -c2 -W2 -I $ALT 192.168.1.1 >/dev/null 2>&1 && echo ' шлюз со второго адреса: ДОСТУПЕН' || echo ' шлюз со второго адреса: НЕ доступен'" +pct exec $CT -- bash -c "timeout 10 curl -s -o /dev/null --interface $ALT -w ' example.com со второго адреса: HTTP %{http_code}\n' https://example.com/ 2>/dev/null || echo ' example.com со второго адреса: нет связи'" + +echo +echo "=== 4. ДЛЯ СРАВНЕНИЯ: С ОСНОВНОГО ===" +pct exec $CT -- bash -c 'timeout 10 curl -s -o /dev/null -w " example.com с основного: HTTP %{http_code}\n" https://example.com/ 2>/dev/null || echo " example.com с основного: нет связи"' + +echo +echo "=== 5. УБИРАЮ ВРЕМЕННЫЙ АДРЕС ===" +pct exec $CT -- ip addr del "$ALT/24" dev eth0 2>/dev/null && echo " удалён $ALT" || echo " не удалось удалить (проверьте: ip addr show)" + +echo +echo "=== 6. ЧТО ЭТО ЗНАЧИТ ===" +echo " Если со второго адреса связь ЕСТЬ — шлюз блокирует именно .111." +echo " Решение: сменить адрес контейнера (нужно обновить ссылки) либо" +echo " добавить правило на роутере (роутер по решению владельца не трогаем)." +echo " Если связи НЕТ и со второго адреса — дело не в адресе."