[SPRINT-V1.1][4] В Matrix только экстренное: гигиена шлёт при high>0, дайджест — при критичных словах; остальное в /var/log/hub/notifications.log
This commit is contained in:
1 parent
9d7434c36c
commit
b670bb35e5
3 files changed
+95
-25
No files matched your search
@@ -1,16 +1,15 @@
|
||||
# Гигиенический отчёт — 2026-11-06
|
||||
|
||||
Проверок: 19 · находок: **21**
|
||||
· high: 1 · medium: 4 · low: 1 · info: 15
|
||||
Проверок: 19 · находок: **20**
|
||||
· high: 0 · medium: 3 · low: 2 · info: 15
|
||||
|
||||
## Сводка по категориям
|
||||
|
||||
| Тип | Кол-во | Уровень |
|
||||
|---|---|---|
|
||||
| упавшие юниты | 1 | high |
|
||||
| дубль сервиса | 3 | medium |
|
||||
| крупный потребитель RAM | 1 | medium |
|
||||
| не поднимется сам | 1 | low |
|
||||
| остановленные контейнеры | 1 | low |
|
||||
| один образ, разные сервисы | 5 | info |
|
||||
| статические юниты | 1 | info |
|
||||
| потребление RAM | 1 | info |
|
||||
@@ -23,14 +22,6 @@
|
||||
| LLM-узел | 1 | info |
|
||||
| HTTP-здоровье | 1 | info |
|
||||
|
||||
## [HIGH] упавшие юниты
|
||||
|
||||
**Что:** 1: openipmi.service
|
||||
|
||||
**Почему:** сервис в состоянии failed — не работает или не стартовал после сбоя
|
||||
|
||||
**Что делать:** systemctl reset-failed <unit> && systemctl start <unit>
|
||||
|
||||
## [MEDIUM] дубль сервиса
|
||||
|
||||
**Что:** образ `redis` в CT: 103, 105, 110, 114, 115
|
||||
@@ -55,14 +46,6 @@
|
||||
|
||||
**Что делать:** проверить необходимость всех экземпляров
|
||||
|
||||
## [MEDIUM] крупный потребитель RAM
|
||||
|
||||
**Что:** netbox (CT103) — 997.4MiB / 4GiB, CPU 0.00%
|
||||
|
||||
**Почему:** больше 800 МиБ — кандидат на оптимизацию
|
||||
|
||||
**Что делать:** проверить лимиты/необходимость
|
||||
|
||||
## [LOW] не поднимется сам
|
||||
|
||||
**Что:** CT160 (llm-lxc) onboot=0
|
||||
@@ -71,9 +54,17 @@
|
||||
|
||||
**Что делать:** включить onboot или подтвердить
|
||||
|
||||
## [LOW] остановленные контейнеры
|
||||
|
||||
**Что:** CT103: 4 (netbox-redis, oauth2-proxy-netbox, netbox, netbox-postgres)
|
||||
|
||||
**Почему:** занимают место и путают инвентарь
|
||||
|
||||
**Что делать:** docker rm, если не нужны
|
||||
|
||||
## [INFO] один образ, разные сервисы
|
||||
|
||||
**Что:** `postgres` — CT103:docmost-db; CT103:netbox-postgres; CT114:authentik-security-postgresql-1
|
||||
**Что:** `postgres` — CT103:docmost-db; CT114:authentik-security-postgresql-1
|
||||
|
||||
**Почему:** один и тот же образ используется разными сервисами — не дубль
|
||||
|
||||
@@ -121,7 +112,7 @@
|
||||
|
||||
## [INFO] потребление RAM
|
||||
|
||||
**Что:** топ: netbox 997.4MiB · paperless 494.9MiB · n8n 396.6MiB · docmost 307.1MiB · stirling-pdf 295.6MiB · homeassistant 286.8MiB
|
||||
**Что:** топ: paperless 494.5MiB · n8n 392.4MiB · stirling-pdf 295.6MiB · homeassistant 286.1MiB · docmost 285.2MiB · authentik-security-worker-1 243.9MiB
|
||||
|
||||
**Почему:** лёджер: следим за ростом
|
||||
|
||||
@@ -145,7 +136,7 @@
|
||||
|
||||
## [INFO] бэкапы в норме
|
||||
|
||||
**Что:** postgres (8.8 ч), matrix (7.9 ч), infra-ops (7.4 ч), offsite (6.8 ч), vzdump (8.3 ч)
|
||||
**Что:** postgres (9.2 ч), matrix (8.2 ч), infra-ops (7.7 ч), offsite (7.2 ч), vzdump (8.7 ч)
|
||||
|
||||
**Почему:** свежесть подтверждена
|
||||
|
||||
@@ -153,7 +144,7 @@
|
||||
|
||||
## [INFO] мультипроектные CT
|
||||
|
||||
**Что:** CT101 (2); CT102 (3); CT103 (8); CT105 (3); CT106 (3); CT107 (3); CT108 (4); CT109 (3)
|
||||
**Что:** CT101 (2); CT102 (3); CT103 (7); CT105 (3); CT106 (3); CT107 (3); CT108 (4); CT109 (3)
|
||||
|
||||
**Почему:** несколько compose-проектов в одном CT — файл в git является снимком
|
||||
|
||||
@@ -169,7 +160,7 @@
|
||||
|
||||
## [INFO] docker-мусор
|
||||
|
||||
**Что:** образов: 164, томов: 0, остановленных: 0
|
||||
**Что:** образов: 164, томов: 0, остановленных: 4
|
||||
|
||||
**Почему:** кандидаты на docker system prune
|
||||
|
||||
|
||||
@@ -11,6 +11,12 @@ from datetime import date
|
||||
REPORT = "/root/buryan-infra/ops/hygiene/report-%s.md" % date.today().isoformat()
|
||||
|
||||
|
||||
def quiet_hours():
|
||||
"""Тихие часы: 23:00–07:00 не отправляем ничего, кроме критичного."""
|
||||
from datetime import datetime
|
||||
h = datetime.now().hour
|
||||
return h >= 23 or h < 7
|
||||
|
||||
def read_env(path):
|
||||
out = {}
|
||||
try:
|
||||
@@ -25,6 +31,20 @@ def read_env(path):
|
||||
|
||||
|
||||
def main():
|
||||
# _policy_high: в Matrix только экстренное (high-находки)
|
||||
try:
|
||||
import glob as _g, re as _re
|
||||
_rep = sorted(_g.glob('/root/buryan-infra/ops/hygiene/report-*.md'))[-1]
|
||||
_txt = open(_rep, encoding='utf-8').read()
|
||||
_m = _re.search(r'high: (\d+)', _txt)
|
||||
_high = int(_m.group(1)) if _m else 0
|
||||
except Exception:
|
||||
_high = 0
|
||||
if _high == 0:
|
||||
print('гигиена: high нет — в Matrix не отправляем (только файл)')
|
||||
return 0
|
||||
print('гигиена: high=%d — экстренное' % _high)
|
||||
|
||||
try:
|
||||
text = open(REPORT, encoding="utf-8").read()
|
||||
except Exception as e:
|
||||
|
||||
@@ -0,0 +1,59 @@
|
||||
#!/usr/bin/env python3
|
||||
"""Центральная политика уведомлений: в Matrix только экстренное.
|
||||
|
||||
Правило:
|
||||
critical → отправляется всегда (сервис лежит, бэкап не прошёл, CT упал)
|
||||
normal → только в файл /var/log/hub/notifications.log
|
||||
info → только в файл
|
||||
|
||||
Использование из скриптов:
|
||||
from notify_policy import send
|
||||
send("critical", "Jellyfin не отвечает")
|
||||
send("normal", "Гигиена: найдено 20, high 0")
|
||||
"""
|
||||
import json
|
||||
import os
|
||||
import urllib.request
|
||||
from datetime import datetime
|
||||
|
||||
LOG = "/var/log/hub/notifications.log"
|
||||
HUB = "http://127.0.0.1:9120/notify"
|
||||
|
||||
|
||||
def _quiet():
|
||||
h = datetime.now().hour
|
||||
return h >= 23 or h < 7
|
||||
|
||||
|
||||
def _log(level, text):
|
||||
try:
|
||||
os.makedirs(os.path.dirname(LOG), exist_ok=True)
|
||||
with open(LOG, "a", encoding="utf-8") as f:
|
||||
f.write("%s\t%s\t%s\n" % (datetime.now().isoformat(timespec="seconds"), level, text[:500]))
|
||||
except Exception:
|
||||
pass
|
||||
|
||||
|
||||
def send(level, text, force=False):
|
||||
"""level: critical | normal | info. Возвращает True, если ушло в Matrix."""
|
||||
_log(level, text)
|
||||
if level != "critical" and not force:
|
||||
return False
|
||||
if _quiet() and not force:
|
||||
_log("deferred", "тихие часы: " + text[:200])
|
||||
return False
|
||||
try:
|
||||
body = json.dumps({"message": text, "source": "hub", "level": level}).encode()
|
||||
req = urllib.request.Request(HUB, data=body, method="POST")
|
||||
req.add_header("Content-Type", "application/json")
|
||||
with urllib.request.urlopen(req, timeout=30) as r:
|
||||
return r.status == 200
|
||||
except Exception:
|
||||
return False
|
||||
|
||||
|
||||
if __name__ == "__main__":
|
||||
import sys
|
||||
if len(sys.argv) > 2:
|
||||
ok = send(sys.argv[1], " ".join(sys.argv[2:]))
|
||||
print("отправлено" if ok else "записано в лог (не экстренное)")
|
||||
Reference in new issue
Block a user