diff --git a/ops/hub-core/core.py b/ops/hub-core/core.py index 3d11eab..a0ebd32 100644 --- a/ops/hub-core/core.py +++ b/ops/hub-core/core.py @@ -488,6 +488,9 @@ th{{color:#7d8b99;font-weight:500}}
{links}связей

Проблемы

{prow}
проверкачто не так
+

Графики

+
Дашборд: Grafana — Buryan Hub + · метрики Prometheus

Доступы по сервисам

аудит по понедельникам, команда !users у бота Инфраструктура
{identity_text}
diff --git a/ops/prometheus/ALERTING.md b/ops/prometheus/ALERTING.md new file mode 100644 index 0000000..00485d2 --- /dev/null +++ b/ops/prometheus/ALERTING.md @@ -0,0 +1,39 @@ +# Цепочка тревог: Prometheus → Alertmanager → Matrix + +## Найденный разрыв + +В `prometheus.yml` **не было секции `alerting`**. Prometheus не знал про +Alertmanager, поэтому ни одно правило (включая 10 существующих) никогда +не отправляло тревогу в Matrix. Правила были, срабатывали внутри +Prometheus — и молчали. + +## Что добавлено + +```yaml +alerting: + alertmanagers: + - static_configs: + - targets: ["192.168.1.134:9093"] +``` + +## Как проверено end-to-end + +1. Временное правило `HubTestAlert` с `expr: vector(1)` (срабатывает сразу). +2. Prometheus перезапущен, подождали 60 с. +3. Prometheus видит Alertmanager: + `{"activeAlertmanagers":[{"url":"http://192.168.1.134:9093/api/v2/alerts"}]}` +4. Тревога в Prometheus: `HubTestAlert | state: firing`. +5. Тревога в Alertmanager: `HubTestAlert | active | warning`. +6. **Сообщение в Matrix** (бот Инфраструктура): + «🔥 Тревога | 🟡 HubTestAlert | Проверка цепочки тревог». + +После проверки временное правило удалено: активных тревог 0, наши три +правила (`HubSilent`, `HubStorageHigh`, `HubBackupStale`) на месте. + +## Что это значит + +Теперь любое правило Prometheus реально доходит до человека: Alertmanager +шлёт вебхук на `http://192.168.1.10:9110/alertmanager`, ядро публикует +событие, маршрутизация отправляет его боту Инфраструктура. + +До этой правки тревоги существовали только на бумаге.