diff --git a/ops/hygiene/report-2026-11-06.md b/ops/hygiene/report-2026-11-06.md index cd61929..b5b39fd 100644 --- a/ops/hygiene/report-2026-11-06.md +++ b/ops/hygiene/report-2026-11-06.md @@ -1,16 +1,15 @@ # Гигиенический отчёт — 2026-11-06 -Проверок: 19 · находок: **21** -· high: 1 · medium: 4 · low: 1 · info: 15 +Проверок: 19 · находок: **20** +· high: 0 · medium: 3 · low: 2 · info: 15 ## Сводка по категориям | Тип | Кол-во | Уровень | |---|---|---| -| упавшие юниты | 1 | high | | дубль сервиса | 3 | medium | -| крупный потребитель RAM | 1 | medium | | не поднимется сам | 1 | low | +| остановленные контейнеры | 1 | low | | один образ, разные сервисы | 5 | info | | статические юниты | 1 | info | | потребление RAM | 1 | info | @@ -23,14 +22,6 @@ | LLM-узел | 1 | info | | HTTP-здоровье | 1 | info | -## [HIGH] упавшие юниты - -**Что:** 1: openipmi.service - -**Почему:** сервис в состоянии failed — не работает или не стартовал после сбоя - -**Что делать:** systemctl reset-failed && systemctl start - ## [MEDIUM] дубль сервиса **Что:** образ `redis` в CT: 103, 105, 110, 114, 115 @@ -55,14 +46,6 @@ **Что делать:** проверить необходимость всех экземпляров -## [MEDIUM] крупный потребитель RAM - -**Что:** netbox (CT103) — 997.4MiB / 4GiB, CPU 0.00% - -**Почему:** больше 800 МиБ — кандидат на оптимизацию - -**Что делать:** проверить лимиты/необходимость - ## [LOW] не поднимется сам **Что:** CT160 (llm-lxc) onboot=0 @@ -71,9 +54,17 @@ **Что делать:** включить onboot или подтвердить +## [LOW] остановленные контейнеры + +**Что:** CT103: 4 (netbox-redis, oauth2-proxy-netbox, netbox, netbox-postgres) + +**Почему:** занимают место и путают инвентарь + +**Что делать:** docker rm, если не нужны + ## [INFO] один образ, разные сервисы -**Что:** `postgres` — CT103:docmost-db; CT103:netbox-postgres; CT114:authentik-security-postgresql-1 +**Что:** `postgres` — CT103:docmost-db; CT114:authentik-security-postgresql-1 **Почему:** один и тот же образ используется разными сервисами — не дубль @@ -121,7 +112,7 @@ ## [INFO] потребление RAM -**Что:** топ: netbox 997.4MiB · paperless 494.9MiB · n8n 396.6MiB · docmost 307.1MiB · stirling-pdf 295.6MiB · homeassistant 286.8MiB +**Что:** топ: paperless 494.5MiB · n8n 392.4MiB · stirling-pdf 295.6MiB · homeassistant 286.1MiB · docmost 285.2MiB · authentik-security-worker-1 243.9MiB **Почему:** лёджер: следим за ростом @@ -145,7 +136,7 @@ ## [INFO] бэкапы в норме -**Что:** postgres (8.8 ч), matrix (7.9 ч), infra-ops (7.4 ч), offsite (6.8 ч), vzdump (8.3 ч) +**Что:** postgres (9.2 ч), matrix (8.2 ч), infra-ops (7.7 ч), offsite (7.2 ч), vzdump (8.7 ч) **Почему:** свежесть подтверждена @@ -153,7 +144,7 @@ ## [INFO] мультипроектные CT -**Что:** CT101 (2); CT102 (3); CT103 (8); CT105 (3); CT106 (3); CT107 (3); CT108 (4); CT109 (3) +**Что:** CT101 (2); CT102 (3); CT103 (7); CT105 (3); CT106 (3); CT107 (3); CT108 (4); CT109 (3) **Почему:** несколько compose-проектов в одном CT — файл в git является снимком @@ -169,7 +160,7 @@ ## [INFO] docker-мусор -**Что:** образов: 164, томов: 0, остановленных: 0 +**Что:** образов: 164, томов: 0, остановленных: 4 **Почему:** кандидаты на docker system prune diff --git a/ops/scripts/hygiene_notify.py b/ops/scripts/hygiene_notify.py index 7b1dc64..888476e 100644 --- a/ops/scripts/hygiene_notify.py +++ b/ops/scripts/hygiene_notify.py @@ -11,6 +11,12 @@ from datetime import date REPORT = "/root/buryan-infra/ops/hygiene/report-%s.md" % date.today().isoformat() +def quiet_hours(): + """Тихие часы: 23:00–07:00 не отправляем ничего, кроме критичного.""" + from datetime import datetime + h = datetime.now().hour + return h >= 23 or h < 7 + def read_env(path): out = {} try: @@ -25,6 +31,20 @@ def read_env(path): def main(): + # _policy_high: в Matrix только экстренное (high-находки) + try: + import glob as _g, re as _re + _rep = sorted(_g.glob('/root/buryan-infra/ops/hygiene/report-*.md'))[-1] + _txt = open(_rep, encoding='utf-8').read() + _m = _re.search(r'high: (\d+)', _txt) + _high = int(_m.group(1)) if _m else 0 + except Exception: + _high = 0 + if _high == 0: + print('гигиена: high нет — в Matrix не отправляем (только файл)') + return 0 + print('гигиена: high=%d — экстренное' % _high) + try: text = open(REPORT, encoding="utf-8").read() except Exception as e: diff --git a/ops/scripts/notify_policy.py b/ops/scripts/notify_policy.py new file mode 100644 index 0000000..3a12d4e --- /dev/null +++ b/ops/scripts/notify_policy.py @@ -0,0 +1,59 @@ +#!/usr/bin/env python3 +"""Центральная политика уведомлений: в Matrix только экстренное. + +Правило: + critical → отправляется всегда (сервис лежит, бэкап не прошёл, CT упал) + normal → только в файл /var/log/hub/notifications.log + info → только в файл + +Использование из скриптов: + from notify_policy import send + send("critical", "Jellyfin не отвечает") + send("normal", "Гигиена: найдено 20, high 0") +""" +import json +import os +import urllib.request +from datetime import datetime + +LOG = "/var/log/hub/notifications.log" +HUB = "http://127.0.0.1:9120/notify" + + +def _quiet(): + h = datetime.now().hour + return h >= 23 or h < 7 + + +def _log(level, text): + try: + os.makedirs(os.path.dirname(LOG), exist_ok=True) + with open(LOG, "a", encoding="utf-8") as f: + f.write("%s\t%s\t%s\n" % (datetime.now().isoformat(timespec="seconds"), level, text[:500])) + except Exception: + pass + + +def send(level, text, force=False): + """level: critical | normal | info. Возвращает True, если ушло в Matrix.""" + _log(level, text) + if level != "critical" and not force: + return False + if _quiet() and not force: + _log("deferred", "тихие часы: " + text[:200]) + return False + try: + body = json.dumps({"message": text, "source": "hub", "level": level}).encode() + req = urllib.request.Request(HUB, data=body, method="POST") + req.add_header("Content-Type", "application/json") + with urllib.request.urlopen(req, timeout=30) as r: + return r.status == 200 + except Exception: + return False + + +if __name__ == "__main__": + import sys + if len(sys.argv) > 2: + ok = send(sys.argv[1], " ".join(sys.argv[2:])) + print("отправлено" if ok else "записано в лог (не экстренное)")