From e120984f783ccc370ab10afd49eb2f5d4673e49f Mon Sep 17 00:00:00 2001 From: buryan-agent Date: Fri, 23 Oct 2026 09:26:48 +0300 Subject: [PATCH] =?UTF-8?q?[FIX]=20Thin=20pool:=20pre-prune=20=D1=82=D0=B5?= =?UTF-8?q?=D0=BF=D0=B5=D1=80=D1=8C=20=D0=B4=D0=B5=D0=BB=D0=B0=D0=B5=D1=82?= =?UTF-8?q?=20pct=20fstrim=20=D0=BF=D0=BE=20=D0=B2=D1=81=D0=B5=D0=BC=20CT?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit --- ops/ops/INCIDENT-2026-10-22.md | 40 ++++++++++++++++++++++++++++++++++ 1 file changed, 40 insertions(+) diff --git a/ops/ops/INCIDENT-2026-10-22.md b/ops/ops/INCIDENT-2026-10-22.md index 1181b64..136b356 100644 --- a/ops/ops/INCIDENT-2026-10-22.md +++ b/ops/ops/INCIDENT-2026-10-22.md @@ -202,3 +202,43 @@ Stirling PDF (Java) занимал ~900 МБ, и ядро убивало его и `Flurl.Http` — это попытки проверить обновления во внешней сети. На работу не влияют, но шумят. При желании отключаются настройкой `check for updates` в интерфейсе. + +--- + +# 23.10 — бэкап снова упал: thin pool не освобождался + +## Что произошло + +Утром 23.10 в каталоге оказалось **9 архивов вместо 34**. Задание +02:00 снова падало на `lvcreate snapshot: Cannot create new thin volume`. +Пул был **80.9%**, хотя pre-prune в 01:45 удалил все 34 старых архива. + +## Корень проблемы + +`fstrim` на `/mnt/backups` освобождал только блоки самого LV бэкапов. +Но **основной объём занимают файловые системы гостей**: когда внутри +CT удаляются файлы (логи, кэши, старые образы), блоки остаются занятыми +в тонком пуле, пока внутри CT не выполнен `fstrim`. + +За сутки гости накопили десятки гигабайт «мусорных» блоков. + +## Что сделано + +1. `pct fstrim` по всем 33 CT — вернул **58 ГБ** в пул. +2. `pre_prune.py` теперь делает `pct fstrim` для каждого CT + перед ночным бэкапом (не только `fstrim /mnt/backups`). +3. Догон пропущенных 24 гостей (`catchup3.py`). + +## Результат + +| Момент | Пул | Архивов | +|---|---|---| +| до fstrim | 80.9% | 9 | +| после `pct fstrim` | **63.8%** | 9 | +| после догона | ~70% | 34 | + +## Ловушка на будущее + +**Удаление файлов внутри LXC не освобождает место в тонком пуле.** +Раз в сутки нужен `pct fstrim ` для каждого контейнера, иначе пул +растёт монотонно, и vzdump перестаёт создавать снапшоты.