Files
buryan-infra/ops/audits/SMR-ARCHIVE-LIMITS.md
T

61 lines
3.1 KiB
Markdown

# Бэкапы и SMR-диск: без NVMe (13.11.2026)
Владелец: «для бэкапов мы не будем ставить NVME, у нас их дефицит».
Значит архив остаётся на HDD `/mnt/archive` (TOSHIBA MQ01ABD100, SMR),
и его нужно держать в узде, а не менять железо.
## Что выяснено
| Задача | Куда пишет |
|---|---|
| `hub-archive-copy` (04:10) | `/mnt/archive/media` — **HDD sda**, 246 ГБ |
| `hub-services-backup` (03:45) | `/mnt/backups/services` — NVMe (LVM) |
| `hub-vps-backup` (04:20) | `/mnt/backups/vps` — NVMe (LVM) |
| `combine-backup` (04:15) | NVMe |
То есть **единственный тяжёлый писатель на HDD — копия медиатеки**.
SMART диска чистый (Reallocated=0, Pending=0) — диск здоров, просто медленный
на произвольной записи.
## Что сделано
1. **Ограничение скорости rsync** в `archive_copy.py`:
`--bwlimit=30000` (30 МБ/с). Бэкап файла скрипта рядом.
2. **Лимит на уровне systemd** для четырёх бэкап-юнитов:
```
IOSchedulingClass=idle
IOSchedulingPriority=7
Nice=19
CPUWeight=20
IOWeight=20
IOWriteBandwidthMax=/dev/sda 40M
IOReadBandwidthMax=/dev/sda 60M
```
Проверено: `IOWriteBandwidthMax=/dev/sda 40000000`, `IOSchedulingClass=3`.
3. **Порог грязных страниц** (`/etc/sysctl.d/99-buryan-io.conf`):
`dirty_background_ratio=5`, `dirty_ratio=10`.
4. **softdog** + `RuntimeWatchdogSec=60` — если хост всё же зависнет,
он перезагрузится сам.
## Что это даёт
При 30 МБ/с даже полная первичная синхронизация 246 ГБ идёт ~2.3 часа,
но с idle-приоритетом и ограничением 40 МБ/с на устройство. Ядро больше
не забивает кэш страниц, процессы не встают в D-state, Matrix и остальные
сервисы не замирают.
## Что можно сделать дальше (по желанию)
- Запускать архивную копию **раз в неделю**, а не каждую ночь: медиатека
меняется медленно, а HDD проживёт дольше.
- Добавить в rsync `--exclude` для временных файлов загрузок.
- Если появится лишний диск — заменить SMR на CMR той же ёмкости; но это
не срочно, SMART чистый.
## Ловушка
`--delete-after` в rsync удаляет из архива то, чего нет в источнике. Это
задумано (архив = зеркало), но при ошибке монтирования `/mnt/media`
пустой источник вычистит архив. Защита в скрипте: проверка
`os.path.ismount(SRC)` и минимум свободного места — она есть, не убирать.