This website requires JavaScript.
Explore
Help
Sign In
infrastructure
/
buryan-infra
Watch
2
Star
0
Fork
0
Code
Issues
29
Pull Requests
3
Actions
Packages
Projects
Releases
1
Wiki
Activity
Files
6d6401a4175cfd3d431ae6c608fa6952594c10ed
buryan-infra
/
ops
/
audits
T
History
root
6d6401a417
[OPS] Анализ логов: главная проблема — Postgres упирался в max_connections=100 (тысячи 'too many clients' в 04:00-07:00, 492 события в Hermes за сутки), из-за этого падал cron-бэкап Matrix с 7 октября и второй контур. Исправлено: max_connections 100→200, idle_session_timeout 15min, idle_in_transaction 5min, память CT151 2→3 ГБ, Postgres перезапущен, сервисы 200/74-0. Matrix-бэкап прогнан вручную — 665 МБ, ок. Проверено: 0 failed units, Synapse 0 ошибок, сертификаты 35 дней, restore-тест Passed 5. Внимание: verify-backups покрывает 7 из 48 баз, zram 100%, /mnt/backups 76%, VPN-волны 27/138
2026-11-15 22:59:35 +03:00
..
2026-11-12-deep-audit.md
[AUDIT] Глубокий read-only аудит после LLM: скрипт deep_audit.py (12 разделов) + after-llm-audit.sh, запуск только когда очередь LLM пуста (Hermes каждые 30 мин, раз в сутки). Первый прогон: hub-db-dumps, hub-rag, hub-cert-sync в failed; память 12/15 ГБ + swap 17 ГБ (kswapd, task blocked); NVMe Critical Warning Temperature; 99 записей write access unavailable. Плюс гигиена: 49 заданий Hermes, старые .bak, порты NFS наружу. Миграция прогресса LLM: 25778 записей слиты, остаток 344 вместо 26055
2026-11-12 18:03:19 +03:00
AVICON-DISTRIBUTOR-2026-11-14.md
[LLM] Avicon найден: avikon.ru — парковка домена, avikon.com — польская компания без Hitrolink, а avicon.ru — «Официальный дистрибьютор AV-оборудования и ВКС». На странице бренда 8 товаров и 9 PDF (ET700, ET800, VB600, TP350, ASP35, XT500 + 2 руководства). Добавлены в queue-hitrolink-dist.jsonl с пометкой official:false, source_host avicon.ru (очередь дистрибьютора теперь 32: 23 snk-s + 9 avicon). Проверено: HTI-ASP35-C.pdf дал 9 фактов, пометка источника стоит
2026-11-14 17:50:39 +03:00
HANG-2026-11-13.md
[HOME] Разбор зависания 13.11: хост встал в I/O. Мониторы замолчали в 06:18 (интервалы выросли с 1 до 3-4 мин), ночной отчёт: 13 сбоев TLS в окне 02:12-02:48 (бэкапы), шлюз 1. SMART чистый: HDD Reallocated=0, NVMe без critical warning. Причина: hub-archive-copy.timer 04:10 копирует 246 ГБ на SMR-диск. Исправлено: IOSchedulingClass=idle + IOWeight=20 для 4 бэкап-юнитов, dirty_ratio 5/10, softdog + RuntimeWatchdogSec=60. Восстановлено 30/30 CT, Matrix+SSO, hub 200, боты 9
2026-11-13 11:23:00 +03:00
HITROLINK-DISTRIBUTOR-2026-11-13.md
[LLM] Hitrolink: даташиты с дистрибьютора snk-s.ru с пометкой источника. Собрано 23 PDF в queue-hitrolink-dist.jsonl, каждая запись: official=false, source_kind=distributor, source_host=snk-s.ru. Диспетчер пишет в результаты блок source {kind, official:false, requires_confirmation:true, host}. Исправлены 3 ловушки: .pdf с query string не распознавался; URL с пробелами/кириллицей не качался (quote); у вендора hitrolink-dist не было токенов -> skip; пометка терялась, т.к. результаты пишет диспетчер. Проверено: 4/23, пометка у всех, даташит дал факты
2026-11-13 21:24:31 +03:00
HITROLINK-OEM-HITRY-2026-11-14.md
[LLM] Найден официальный производитель Hitrolink — Hitry (浙江华创视讯, hitry.com): совпадают 8 моделей (XC800, XC600, XC300, ET700, XT500, XT300, UC500, VB600). Dahua проверен и НЕ подходит: в их каталоге конференц-систем ни одной модели из линейки. PDF официально не публикуются (hitry.com/product/download, /about/download, /service — без файлов). Создана очередь производителя queue-hitrolink-oem.jsonl (8 карточек, official:true, source_kind:oem, requires_confirmation:false) — уже даёт факты. Диспетчер теперь пишет source и для официальных страниц. Дистрибьюторская очередь: 32 PDF с пометкой
2026-11-14 22:05:54 +03:00
HITROLINK-QUEUE-2026-11-13.md
[LLM] Добавлен вендор Hitrolink: vendor_queue.py (hitrolink.tech + hitrolink.com.ru + hitrolink.com), очередь 162 адреса (105 .tech, 57 .com.ru), задание в jobs.yaml (weight 1, 3B). Две ловушки: DOC_HINT не матчил slug-и магазина (добавил hitrolink_), VENDOR_TOKENS не знал вендора -> всё уходило в skip (добавил токены, skip сброшен). Проверено: ok +11 и +9 фактов (power_w 15, poe_ports 1, poe_budget_w 15). Даташитов PDF на официальных сайтах нет: на .tech только картинки, .com.ru/downloads 403 (дилерский), у перекупщиков есть, но это не официальный источник
2026-11-13 16:48:54 +03:00
LLM-COMBINE-STATUS-2026-11-13.md
[LLM] Статус: очереди закрыты — yealink 25873/25885 (осталось 12 в конце), vinteo 71, logitech 356, iva 13, poly 44, poly-pdf 8. Найдена причина 24% empty: extract_text брал __NUXT_DATA__ (навигация с UUID) вместо статьи; исправлено — сначала видимая статья без nav/header/footer, проверено: 9055 символов статьи, модель выдала реальные факты (auto_linekeys.enable, account.X.number_of_linekey). Вторая ловушка: на PDF-обёртках модель выдумывает Pageviews/Downloads — нужен фильтр. Комбайн: все 10 служб активны, rules 1753, hubs 30, notes 47, tiers 112. Главное: llm_merged=9 — факты в правила не сливаются
2026-11-13 16:38:19 +03:00
LOGS-ANALYSIS-2026-11-15.md
[OPS] Анализ логов: главная проблема — Postgres упирался в max_connections=100 (тысячи 'too many clients' в 04:00-07:00, 492 события в Hermes за сутки), из-за этого падал cron-бэкап Matrix с 7 октября и второй контур. Исправлено: max_connections 100→200, idle_session_timeout 15min, idle_in_transaction 5min, память CT151 2→3 ГБ, Postgres перезапущен, сервисы 200/74-0. Matrix-бэкап прогнан вручную — 665 МБ, ок. Проверено: 0 failed units, Synapse 0 ошибок, сертификаты 35 дней, restore-тест Passed 5. Внимание: verify-backups покрывает 7 из 48 баз, zram 100%, /mnt/backups 76%, VPN-волны 27/138
2026-11-15 22:59:35 +03:00
MATRIX-BOTS-AUDIT-2026-11-15.md
[MATRIX] Алерты переведены на секретаря по решению владельца: @secretary приглашён в ALERT-комнату, ALERT_TOKEN = токен секретаря, политика — в чат только high/critical (normal/low в журнал и очередь). Побочный эффект: секретарь отвечал шаблоном в ALERT на сообщения @bot_alert — добавлен BOT_IGNORE_ROOMS в matrix.py и hub-bots.service.d. Проверено: normal queued, high sent от @secretary, новых шаблонных ответов после фикса 0
2026-11-15 22:54:49 +03:00
net-report-2026-11-12.md
[VPN] Сбои на домашнем Wi-Fi: проводной путь идеален (0% потерь, 0.28 мс), хост Wi-Fi не использует. Монитор поймал сбой: шлюз 0%, TCP до VPS ok, TLS таймаут — при ss -ti видно mss:64 и 6156/7712 байт ретрансмитов, то есть вмешательство в TCP на пути (TSPU), а не MTU. Поставил net-monitor (раз в минуту) и ежедневный отчёт 08:20. WireGuard: добавил FORWARD для wg0 + сохранил правила, полный туннель проверен (302 за 0.32 с). Два QR: WireGuard UDP 443 и Hiddify Reality 443
2026-11-12 19:55:36 +03:00
net-report-2026-11-13.md
[HOME] Разбор зависания 13.11: хост встал в I/O. Мониторы замолчали в 06:18 (интервалы выросли с 1 до 3-4 мин), ночной отчёт: 13 сбоев TLS в окне 02:12-02:48 (бэкапы), шлюз 1. SMART чистый: HDD Reallocated=0, NVMe без critical warning. Причина: hub-archive-copy.timer 04:10 копирует 246 ГБ на SMR-диск. Исправлено: IOSchedulingClass=idle + IOWeight=20 для 4 бэкап-юнитов, dirty_ratio 5/10, softdog + RuntimeWatchdogSec=60. Восстановлено 30/30 CT, Matrix+SSO, hub 200, боты 9
2026-11-13 11:23:00 +03:00
net-report-2026-11-14.md
[A-38] Снимок состояния 2026-11-14
2026-11-14 09:00:22 +03:00
night-2026-11-12.md
[VPN] Ночной мониторинг: три сборщика работают, в 08:00 отчёт ops/audits/night-<дата>.md и автостоп (сутки не копятся). WG в РФ душат — согласен. Добавлены и проверены сквозным тестом два новых канала: VLESS+WS+TLS на 8445 (выглядит как обычный HTTPS) и XHTTP на 8444 (уже был, теперь с QR). Про Matrix-туннель: matrix-tunnel-proxy — другой продукт, туннель через чат-протокол слишком медленный. Следующий шаг: AmneziaWG
2026-11-12 21:06:08 +03:00
night-2026-11-13.md
[HOME] Разбор зависания 13.11: хост встал в I/O. Мониторы замолчали в 06:18 (интервалы выросли с 1 до 3-4 мин), ночной отчёт: 13 сбоев TLS в окне 02:12-02:48 (бэкапы), шлюз 1. SMART чистый: HDD Reallocated=0, NVMe без critical warning. Причина: hub-archive-copy.timer 04:10 копирует 246 ГБ на SMR-диск. Исправлено: IOSchedulingClass=idle + IOWeight=20 для 4 бэкап-юнитов, dirty_ratio 5/10, softdog + RuntimeWatchdogSec=60. Восстановлено 30/30 CT, Matrix+SSO, hub 200, боты 9
2026-11-13 11:23:00 +03:00
night-2026-11-14.md
[A-38] Снимок состояния 2026-11-14
2026-11-14 09:00:22 +03:00
night-2026-11-15.md
[A-38] Снимок состояния 2026-11-15
2026-11-15 22:47:12 +03:00
README-DEEP-AUDIT.md
[AUDIT] Глубокий read-only аудит после LLM: скрипт deep_audit.py (12 разделов) + after-llm-audit.sh, запуск только когда очередь LLM пуста (Hermes каждые 30 мин, раз в сутки). Первый прогон: hub-db-dumps, hub-rag, hub-cert-sync в failed; память 12/15 ГБ + swap 17 ГБ (kswapd, task blocked); NVMe Critical Warning Temperature; 99 записей write access unavailable. Плюс гигиена: 49 заданий Hermes, старые .bak, порты NFS наружу. Миграция прогресса LLM: 25778 записей слиты, остаток 344 вместо 26055
2026-11-12 18:03:19 +03:00
REBOOT-MEASURE-2026-11-13.md
[HOME] Перезагрузка и замеры: найдено и исправлено 5 дефектов загрузки. 1) softdog в deny-list Proxmox — юнит сам делает modprobe, fd у PID1=1. 2) Циклы зависимостей (zram-swap, zram-extra) удаляли из очереди hub-core/hermes/мониторы: было 8 циклов, стало 0 (DefaultDependencies=no + WantedBy=swap.target). 3) hub-core с Restart=no падал до готовности Postgres — Restart=on-failure 30s, теперь стартует сам. 4) Tailscale перезаписывал resolv.conf на мёртвый 100.100.100.100 — accept-dns=false, DNS на роутер и AdGuard. 5) swapfile16 поднят. Замеры: загрузка 3:52, 30/30 CT, 74 службы 0 лежит, Matrix/Authentik/Git/hub 200, TLS до VDS 5/5
2026-11-13 14:37:05 +03:00
REMARKS-CLOSED-2026-11-13.md
[HOME] Закрыты замечания: 1) watchdog — softdog загружен, systemd держит /dev/watchdog0 (fd 13 у PID1). 2) hub-db-dumps — падал IsADirectoryError на каталоге pre-update-20261028, исправлено isfile(), прогон ok=35 ошибок 0, свежие дампы есть. 3) метрики сертификатов — psql висел без пароля, сбросил пароль buryan_monitor в /root/.pg-monitor-pass, скрипт берёт PGPASSWORD и -w; 14 доменов, 0 тревог. 4) автостарт CT — pve-guests замаскирован намеренно, работает hub-boot-recover (30/33). 5) дыра в журнале 27.10-13.11 — журнал сейчас PASS и пишет. 6) мониторы снова активны
2026-11-13 12:58:22 +03:00
SMR-ARCHIVE-LIMITS.md
[BACKUPS] SMR-архив без NVMe: --bwlimit=30000 в archive_copy.py, IOWriteBandwidthMax=/dev/sda 40M + IOSchedulingClass=idle для 4 бэкап-юнитов. Проверено: лимиты применились (40000000, class 3), сухой прогон rsync ок (261 ГБ источник, 2.6 МБ изменений). На HDD пишет только копия медиатеки, остальные бэкапы на NVMe
2026-11-13 11:52:29 +03:00
STABILITY-VPN-MATRIX.md
[AUDIT] Поправка к аудиту: память не критична (доступно 2733 МБ, PSI 2%, OOM 0), hub-cert-sync и hub-rag не failed, а inactive (последние ошибки 09.11), hub-cert-sync успешно прошёл 12.11 (49 доменов). Настоящий failed только hub-db-dumps. По доступу: Synapse 7 дней без рестартов, сертификаты matrix/element/authentik до 24.12 (41 день), VPN стабилен (0 падений), парольный вход есть как резерв
2026-11-12 18:08:18 +03:00
VENDOR-DOC-SOURCES-2026-11-14.md
[LLM] Разбор источников документации вендоров: официальные сайты PDF не отдают (WP media только картинки, .com.ru/downloads 403, /docs 404). Проверены API: WP REST, sitemap-files Avicon, Wayback (снапшотов нет), Common Crawl (502/504), поисковые API (нет ключей) => публичного API нет. Найдены дистрибьюторы snk-s.ru (23 PDF) и avicon.ru (9 PDF), avikon.ru — парковка, avikon.com — Польша, tele-vek/voip-shop — без PDF. Написан переиспользуемый сканер ops/scripts/dist-scan.py (обход до 60 страниц, карточки вендора, PDF, раскодирование процентных ссылок). Очередь дистрибьютора: 32 файла с пометкой
2026-11-14 21:44:33 +03:00
VERIFY-AFTER-FIXES-2026-11-13.md
[HOME] Проверка после правок: 30/30 CT, Matrix 200, Authentik 200, Git 200, hub 200 (11 КБ за 0.0005 с), боты 9, дампы ok=35, метрики сертификатов 496 строк. Доправлено: softdog-reexec.service (daemon-reexec после modules-load, иначе systemd не открывает /dev/watchdog) и wg-quick@wgvps — туннель дом-VDS лежал после ребута, поднят (хендшейк 6 с), VDS→CT155 200 через wg0. CF-туннель жив (404 за 1.4 с — норма)
2026-11-13 13:38:50 +03:00