From 9732a84ce7cba0ab11985f258ff02ad866c689ed Mon Sep 17 00:00:00 2001 From: buryan-agent Date: Mon, 19 Oct 2026 21:18:54 +0300 Subject: [PATCH] =?UTF-8?q?=D0=A7=D0=B8=D0=BD=D1=8E=20=D1=86=D0=B5=D0=BF?= =?UTF-8?q?=D0=BE=D1=87=D0=BA=D1=83=20=D1=82=D1=80=D0=B5=D0=B2=D0=BE=D0=B3?= =?UTF-8?q?:=20Prometheus=20=D0=BD=D0=B5=20=D0=BE=D1=82=D0=BF=D1=80=D0=B0?= =?UTF-8?q?=D0=B2=D0=BB=D1=8F=D0=BB=20=D0=B8=D1=85=20=D0=B2=20Alertmanager?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit В prometheus.yml не было секции alerting — Prometheus не знал про Alertmanager, поэтому ни одно правило (включая 10 существующих) никогда не доходило до Matrix. Правила срабатывали внутри и молчали. Добавлен блок alerting с целью 192.168.1.134:9093. Проверено end-to-end временным правилом vector(1): Prometheus видит Alertmanager, тревога переходит в firing, Alertmanager получает её, в Matrix приходит сообщение «🔥 Тревога | 🟡 HubTestAlert | Проверка цепочки тревог». Тестовое правило удалено, активных тревог 0, три правила ядра на месте. На панель добавлены ссылки на дашборд Grafana и эндпоинт метрик. --- ops/hub-core/core.py | 3 +++ ops/prometheus/ALERTING.md | 39 ++++++++++++++++++++++++++++++++++++++ 2 files changed, 42 insertions(+) create mode 100644 ops/prometheus/ALERTING.md diff --git a/ops/hub-core/core.py b/ops/hub-core/core.py index 3d11eab..a0ebd32 100644 --- a/ops/hub-core/core.py +++ b/ops/hub-core/core.py @@ -488,6 +488,9 @@ th{{color:#7d8b99;font-weight:500}}
{links}связей

Проблемы

{prow}
проверкачто не так
+

Графики

+
Дашборд: Grafana — Buryan Hub + · метрики Prometheus

Доступы по сервисам

аудит по понедельникам, команда !users у бота Инфраструктура
{identity_text}
diff --git a/ops/prometheus/ALERTING.md b/ops/prometheus/ALERTING.md new file mode 100644 index 0000000..00485d2 --- /dev/null +++ b/ops/prometheus/ALERTING.md @@ -0,0 +1,39 @@ +# Цепочка тревог: Prometheus → Alertmanager → Matrix + +## Найденный разрыв + +В `prometheus.yml` **не было секции `alerting`**. Prometheus не знал про +Alertmanager, поэтому ни одно правило (включая 10 существующих) никогда +не отправляло тревогу в Matrix. Правила были, срабатывали внутри +Prometheus — и молчали. + +## Что добавлено + +```yaml +alerting: + alertmanagers: + - static_configs: + - targets: ["192.168.1.134:9093"] +``` + +## Как проверено end-to-end + +1. Временное правило `HubTestAlert` с `expr: vector(1)` (срабатывает сразу). +2. Prometheus перезапущен, подождали 60 с. +3. Prometheus видит Alertmanager: + `{"activeAlertmanagers":[{"url":"http://192.168.1.134:9093/api/v2/alerts"}]}` +4. Тревога в Prometheus: `HubTestAlert | state: firing`. +5. Тревога в Alertmanager: `HubTestAlert | active | warning`. +6. **Сообщение в Matrix** (бот Инфраструктура): + «🔥 Тревога | 🟡 HubTestAlert | Проверка цепочки тревог». + +После проверки временное правило удалено: активных тревог 0, наши три +правила (`HubSilent`, `HubStorageHigh`, `HubBackupStale`) на месте. + +## Что это значит + +Теперь любое правило Prometheus реально доходит до человека: Alertmanager +шлёт вебхук на `http://192.168.1.10:9110/alertmanager`, ядро публикует +событие, маршрутизация отправляет его боту Инфраструктура. + +До этой правки тревоги существовали только на бумаге.