Files
buryan-infra/ops/reliability/HEAVY-JOBS.md
T
2026-11-18 11:55:17 +03:00

1.4 KiB

Надёжность: тяжёлые jobs и память

Дата: 18.11.2026

Факт

Хост: 15 ГиБ, занято ~11 ГиБ, swap занят ~10 ГиБ. Окно 08:00–08:45 было перегружено: trust-report, weekly-report, evolution-report, research-alternatives, ai-digest, rag-reindex, update-plan.

Что сделано

  1. heavy_guard.sh — только один тяжёлый job одновременно (flock), при MemAvailable < 800 МБ job пропускается.
  2. nice -n 10 внутри guard — меньше влияния на интерактив.
  3. Разведены окна:
    • rag-reindex: 08:30 → 02:00;
    • night-analysis: 03:00 → 00:30;
    • ai-digest: 08:30 → 09:30;
    • остальные короткие — в 08:00–08:20, сериализуются guard'ом.
  4. Hermes перезапущен, YAML валиден.

Проверка

free -h
/root/buryan-infra/ops/scripts/heavy_guard.sh echo ok
grep -A3 '^rag-reindex:' /opt/hermes/jobs.yaml

Осталось

  • разобраться, кто занимает 10 ГиБ swap (кандидаты: OpenClaw, Ollama 229 — не на хосте, ZRAM);
  • проверить OOM в следующий тяжёлый прогон;
  • при необходимости — zram/swap tuning и лимит памяти для OpenClaw.