[SPRINT-V1.1][4] В Matrix только экстренное: гигиена шлёт при high>0, дайджест — при критичных словах; остальное в /var/log/hub/notifications.log

This commit is contained in:
root committed 2026-11-06 11:15:35 +03:00
1 parent 9d7434c36c
commit b670bb35e5
3 files changed
+95 -25

No files matched your search

+16 -25
View File
@@ -1,16 +1,15 @@
# Гигиенический отчёт — 2026-11-06
Проверок: 19 · находок: **21**
· high: 1 · medium: 4 · low: 1 · info: 15
Проверок: 19 · находок: **20**
· high: 0 · medium: 3 · low: 2 · info: 15
## Сводка по категориям
| Тип | Кол-во | Уровень |
|---|---|---|
| упавшие юниты | 1 | high |
| дубль сервиса | 3 | medium |
| крупный потребитель RAM | 1 | medium |
| не поднимется сам | 1 | low |
| остановленные контейнеры | 1 | low |
| один образ, разные сервисы | 5 | info |
| статические юниты | 1 | info |
| потребление RAM | 1 | info |
@@ -23,14 +22,6 @@
| LLM-узел | 1 | info |
| HTTP-здоровье | 1 | info |
## [HIGH] упавшие юниты
**Что:** 1: openipmi.service
**Почему:** сервис в состоянии failed — не работает или не стартовал после сбоя
**Что делать:** systemctl reset-failed <unit> && systemctl start <unit>
## [MEDIUM] дубль сервиса
**Что:** образ `redis` в CT: 103, 105, 110, 114, 115
@@ -55,14 +46,6 @@
**Что делать:** проверить необходимость всех экземпляров
## [MEDIUM] крупный потребитель RAM
**Что:** netbox (CT103) — 997.4MiB / 4GiB, CPU 0.00%
**Почему:** больше 800 МиБ — кандидат на оптимизацию
**Что делать:** проверить лимиты/необходимость
## [LOW] не поднимется сам
**Что:** CT160 (llm-lxc) onboot=0
@@ -71,9 +54,17 @@
**Что делать:** включить onboot или подтвердить
## [LOW] остановленные контейнеры
**Что:** CT103: 4 (netbox-redis, oauth2-proxy-netbox, netbox, netbox-postgres)
**Почему:** занимают место и путают инвентарь
**Что делать:** docker rm, если не нужны
## [INFO] один образ, разные сервисы
**Что:** `postgres` — CT103:docmost-db; CT103:netbox-postgres; CT114:authentik-security-postgresql-1
**Что:** `postgres` — CT103:docmost-db; CT114:authentik-security-postgresql-1
**Почему:** один и тот же образ используется разными сервисами — не дубль
@@ -121,7 +112,7 @@
## [INFO] потребление RAM
**Что:** топ: netbox 997.4MiB · paperless 494.9MiB · n8n 396.6MiB · docmost 307.1MiB · stirling-pdf 295.6MiB · homeassistant 286.8MiB
**Что:** топ: paperless 494.5MiB · n8n 392.4MiB · stirling-pdf 295.6MiB · homeassistant 286.1MiB · docmost 285.2MiB · authentik-security-worker-1 243.9MiB
**Почему:** лёджер: следим за ростом
@@ -145,7 +136,7 @@
## [INFO] бэкапы в норме
**Что:** postgres (8.8 ч), matrix (7.9 ч), infra-ops (7.4 ч), offsite (6.8 ч), vzdump (8.3 ч)
**Что:** postgres (9.2 ч), matrix (8.2 ч), infra-ops (7.7 ч), offsite (7.2 ч), vzdump (8.7 ч)
**Почему:** свежесть подтверждена
@@ -153,7 +144,7 @@
## [INFO] мультипроектные CT
**Что:** CT101 (2); CT102 (3); CT103 (8); CT105 (3); CT106 (3); CT107 (3); CT108 (4); CT109 (3)
**Что:** CT101 (2); CT102 (3); CT103 (7); CT105 (3); CT106 (3); CT107 (3); CT108 (4); CT109 (3)
**Почему:** несколько compose-проектов в одном CT — файл в git является снимком
@@ -169,7 +160,7 @@
## [INFO] docker-мусор
**Что:** образов: 164, томов: 0, остановленных: 0
**Что:** образов: 164, томов: 0, остановленных: 4
**Почему:** кандидаты на docker system prune
+20
View File
@@ -11,6 +11,12 @@ from datetime import date
REPORT = "/root/buryan-infra/ops/hygiene/report-%s.md" % date.today().isoformat()
def quiet_hours():
"""Тихие часы: 23:00–07:00 не отправляем ничего, кроме критичного."""
from datetime import datetime
h = datetime.now().hour
return h >= 23 or h < 7
def read_env(path):
out = {}
try:
@@ -25,6 +31,20 @@ def read_env(path):
def main():
# _policy_high: в Matrix только экстренное (high-находки)
try:
import glob as _g, re as _re
_rep = sorted(_g.glob('/root/buryan-infra/ops/hygiene/report-*.md'))[-1]
_txt = open(_rep, encoding='utf-8').read()
_m = _re.search(r'high: (\d+)', _txt)
_high = int(_m.group(1)) if _m else 0
except Exception:
_high = 0
if _high == 0:
print('гигиена: high нет — в Matrix не отправляем (только файл)')
return 0
print('гигиена: high=%d — экстренное' % _high)
try:
text = open(REPORT, encoding="utf-8").read()
except Exception as e:
+59
View File
@@ -0,0 +1,59 @@
#!/usr/bin/env python3
"""Центральная политика уведомлений: в Matrix только экстренное.
Правило:
critical → отправляется всегда (сервис лежит, бэкап не прошёл, CT упал)
normal → только в файл /var/log/hub/notifications.log
info → только в файл
Использование из скриптов:
from notify_policy import send
send("critical", "Jellyfin не отвечает")
send("normal", "Гигиена: найдено 20, high 0")
"""
import json
import os
import urllib.request
from datetime import datetime
LOG = "/var/log/hub/notifications.log"
HUB = "http://127.0.0.1:9120/notify"
def _quiet():
h = datetime.now().hour
return h >= 23 or h < 7
def _log(level, text):
try:
os.makedirs(os.path.dirname(LOG), exist_ok=True)
with open(LOG, "a", encoding="utf-8") as f:
f.write("%s\t%s\t%s\n" % (datetime.now().isoformat(timespec="seconds"), level, text[:500]))
except Exception:
pass
def send(level, text, force=False):
"""level: critical | normal | info. Возвращает True, если ушло в Matrix."""
_log(level, text)
if level != "critical" and not force:
return False
if _quiet() and not force:
_log("deferred", "тихие часы: " + text[:200])
return False
try:
body = json.dumps({"message": text, "source": "hub", "level": level}).encode()
req = urllib.request.Request(HUB, data=body, method="POST")
req.add_header("Content-Type", "application/json")
with urllib.request.urlopen(req, timeout=30) as r:
return r.status == 200
except Exception:
return False
if __name__ == "__main__":
import sys
if len(sys.argv) > 2:
ok = send(sys.argv[1], " ".join(sys.argv[2:]))
print("отправлено" if ok else "записано в лог (не экстренное)")