Files
buryan-infra/ops/update-manager/update.log
T

191 lines
15 KiB
Plaintext

[2026-10-09 16:03:11] 🚀 Начинаем обновление сервиса: syncthing (CT 139, type: docker)
[2026-10-09 16:03:11] Critical: false
[2026-10-09 16:03:11]
[2026-10-09 16:03:11] 📦 Шаг 1: Создание снапшота...
[2026-10-09 16:03:12] ✅ Снапшот создан: pre-update-20261009-160311
[2026-10-09 16:03:12]
[2026-10-09 16:03:12] ⬆️ Шаг 2: Обновление Docker образов...
[2026-10-09 16:03:12] ⚠️ Docker-compose файлы не найдены в CT 139
[2026-10-09 16:03:12] ✅ Docker compose обновлён
[2026-10-09 16:03:12] Ожидание запуска (15 сек)...
[2026-10-09 16:03:27]
[2026-10-09 16:03:27] 🏥 Шаг 3: Проверка healthcheck...
[2026-10-09 16:03:27] Попытка 1/3...
[2026-10-09 16:03:27] ⚠️ Healthcheck не прошёл (HTTP 403), ждём 10 сек...
[2026-10-09 16:03:37] Попытка 2/3...
[2026-10-09 16:03:37] ⚠️ Healthcheck не прошёл (HTTP 403), ждём 10 сек...
[2026-10-09 16:03:47] Попытка 3/3...
[2026-10-09 16:03:47] ⚠️ Healthcheck не прошёл (HTTP 403), ждём 10 сек...
[2026-10-09 16:03:57]
[2026-10-09 16:03:57] 🚨 Healthcheck не прошёл! Начинаем откат...
[2026-10-09 16:03:57] Откат к снапшоту: pre-update-20261009-160311
[2026-10-09 16:03:59] ✅ Откат выполнен
[2026-10-09 16:03:59]
[2026-10-09 16:03:59] ⚠️ ОБНОВЛЕНИЕ ОТМЕНЕНО! Сервис syncthing восстановлен из снапшота.
[2026-10-09 16:05:26] 🚀 Начинаем обновление сервиса: gitea (CT 140, type: docker)
[2026-10-09 16:05:26] Critical: true
[2026-10-09 16:05:26]
[2026-10-09 16:05:26] 📦 Шаг 1: Создание снапшота...
[2026-10-09 16:05:27] ✅ Снапшот создан: pre-update-20261009-160526
[2026-10-09 16:05:27]
[2026-10-09 16:05:27] ⬆️ Шаг 2: Обновление Docker образов...
[2026-10-09 16:05:29] ⚠️ Docker-compose файлы не найдены, обновляем через docker pull...
[2026-10-09 16:05:29] Обновляем образ: gitea/gitea:latest
[2026-10-09 16:05:39] ✅ Docker обновлён
[2026-10-09 16:05:39] Ожидание запуска (15 сек)...
[2026-10-09 16:05:54]
[2026-10-09 16:05:54] 🏥 Шаг 3: Проверка healthcheck...
[2026-10-09 16:05:54] Попытка 1/3...
[2026-10-09 16:05:54] ✅ Healthcheck прошёл (HTTP 200 — сервис отвечает)
[2026-10-09 16:05:54]
[2026-10-09 16:05:54] ✅ Обновление успешно!
[2026-10-09 16:05:54] New version: 4c697a48a247
[2026-10-09 16:05:54] ✅ Версия зафиксирована в Git
[2026-10-09 16:05:54]
[2026-10-09 16:05:54] 🎉 ГОТОВО! Сервис gitea обновлён и зафиксирован.
[2026-10-14 15:04:01] ▶ Обновление: dashy (CT 102, тип docker, критичный: false)
[2026-10-14 15:04:01] место в пуле: 36%
[2026-10-14 15:04:02] 📦 Снимок: pre-update-20261014-150402
[2026-10-14 15:04:03] ⬆️ Пересоздаём контейнер oauth2-proxy-dashy
[2026-10-14 15:04:16] ⚠️ образ не обновился, продолжаем
[2026-10-14 15:04:17] ожидание 15 секунд
[2026-10-14 15:04:32] 🏥 Проверка здоровья: http://192.168.1.102:8080/ (успешные коды: 200 201 204 301 302)
[2026-10-14 15:04:32] ✅ Проверка пройдена
[2026-10-14 15:04:33] снимок удалён
[2026-10-14 15:04:33] ✅ зафиксировано в Git и отправлено
[2026-10-14 15:04:33] 🎉 dashy обновлён: quay.io/oauth2-proxy/oauth2-proxy:latest
[2026-10-14 15:07:01] ▶ Обновление: dashy (CT 102, тип docker, критичный: false)
[2026-10-14 15:07:01] место в пуле: 36%
[2026-10-14 15:07:02] 📦 Снимок: pre-update-20261014-150702
[2026-10-14 15:07:02] ⬆️ Пересоздаём контейнер dashy
[2026-10-14 15:07:23] ожидание 15 секунд
[2026-10-14 15:07:38] 🏥 Проверка здоровья: http://192.168.1.102:8080/ (успешные коды: 200 201 204 301 302)
[2026-10-14 15:07:38] ✅ Проверка пройдена
[2026-10-14 15:07:39] снимок удалён
[2026-10-14 15:07:40] ✅ зафиксировано в Git и отправлено
[2026-10-14 15:07:40] 🎉 dashy обновлён: lissy93/dashy:latest
[2026-10-14 15:16:01] ▶ Обновление: тест-откат (CT 160, тип docker, критичный: false)
[2026-10-14 15:16:01] место в пуле: 36%
[2026-10-14 15:16:02] ⚠️ контейнер сервиса не определён, версия будет записана из первого образа
[2026-10-14 15:16:02] 📦 Снимок: pre-update-20261014-151602
[2026-10-14 15:16:03] ⬆️ Обновляем образы по списку
[2026-10-14 15:16:03] ⚠️ перезапуск контейнеров не удался
[2026-10-14 15:16:03] ожидание 15 секунд
[2026-10-14 15:16:18] 🏥 Проверка здоровья: http://192.168.1.160:9/ (успешные коды: 200 201 204 301 302)
[2026-10-14 15:16:22] попытка 1/2: код 000000
[2026-10-14 15:16:35] попытка 2/2: код 000000
[2026-10-14 15:16:35] 🚨 Проверка не пройдена — откат
[2026-10-14 15:16:39] откат выполнен
[2026-10-14 15:16:51] снимок удалён
[2026-10-14 15:16:51] ⚠️ Обновление тест-откат отменено, сервис восстановлен из снимка
[2026-10-14 15:23:01] ▶ Обновление: dashy (CT 102, тип docker, критичный: false)
[2026-10-14 15:23:01] место в пуле: 36%
[2026-10-14 15:23:02] 📦 Снимок: pre-update-20261014-152302
[2026-10-14 15:23:03] ⬆️ Пересоздаём контейнер dashy
[2026-10-14 15:23:05] ожидание 15 секунд
[2026-10-14 15:23:20] 🏥 Проверка здоровья: http://192.168.1.102:8080/ (успешные коды: 200 201 204 301 302)
[2026-10-14 15:23:20] ✅ Проверка пройдена
[2026-10-14 15:23:21] снимок удалён
[2026-10-14 15:23:22] ✅ зафиксировано в Git и отправлено
[2026-10-14 15:23:22] 🎉 dashy обновлён: lissy93/dashy:latest
[2026-10-14 15:26:01] ▶ Обновление: тест-откат (CT 160, тип docker, критичный: false)
[2026-10-14 15:26:01] место в пуле: 36%
[2026-10-14 15:26:02] ⚠️ контейнер сервиса не определён, версия будет записана из первого образа
[2026-10-14 15:26:02] 📦 Снимок: pre-update-20261014-152602
[2026-10-14 15:26:03] ⬆️ Обновляем образы по списку
[2026-10-14 15:26:03] ⚠️ перезапуск контейнеров не удался
[2026-10-14 15:26:03] ожидание 15 секунд
[2026-10-14 15:26:18] 🏥 Проверка здоровья: http://192.168.1.160:9/ (успешные коды: 200 201 204 301 302)
[2026-10-14 15:26:22] попытка 1/2: код 000000
[2026-10-14 15:26:35] попытка 2/2: код 000000
[2026-10-14 15:26:35] 🚨 Проверка не пройдена — откат
[2026-10-14 15:26:39] откат выполнен
[2026-10-14 15:26:51] снимок удалён
[2026-10-14 15:26:51] ⚠️ Обновление тест-откат отменено, сервис восстановлен из снимка
[2026-10-14 15:34:02] ▶ Обновление: dashy (CT 102, тип docker, критичный: false)
[2026-10-14 15:34:02] место в пуле: 36%
[2026-10-14 15:34:02] 📦 Снимок: pre-update-20261014-153402
[2026-10-14 15:34:03] ⬆️ Обновляем через compose: /opt/dashy
[2026-10-14 15:34:06] ожидание 15 секунд
[2026-10-14 15:34:23] ✅ Контейнер работает из актуального образа
[2026-10-14 15:34:23] 🏥 Проверка здоровья: http://192.168.1.102:8080/ (успешные коды: 200 201 204 301 302)
[2026-10-14 15:34:23] ✅ Проверка пройдена
[2026-10-14 15:34:24] снимок удалён
[2026-10-14 15:34:24] ✅ зафиксировано в Git и отправлено
[2026-10-14 15:34:24] 🎉 dashy обновлён: lissy93/dashy:latest
[2026-10-14 16:35:45] ▶ Обновление: gitea (CT 140, тип docker, критичный: true)
[2026-10-14 16:35:45] место в пуле: 36%
[2026-10-14 16:35:45] 📦 Снимок: pre-update-20261014-163545
[2026-10-14 16:35:46] ⬆️ Обновляем через compose: /opt/gitea
[2026-10-14 16:35:58] ожидание 15 секунд
[2026-10-14 16:36:14] ✅ Контейнер работает из актуального образа
[2026-10-14 16:36:14] 🏥 Проверка здоровья: http://192.168.1.140:3000/api/v1/version (успешные коды: 200 201 204 301 302)
[2026-10-14 16:36:14] ✅ Проверка пройдена
[2026-10-14 16:36:15] снимок удалён
[2026-10-14 16:36:15] ✅ зафиксировано в Git и отправлено
[2026-10-14 16:36:15] 🎉 gitea обновлён: gitea/gitea:latest
[2026-10-14 17:31:42] ▶ Обновление: uptime-kuma (CT 107, тип docker, критичный: false)
[2026-10-14 17:31:42] место в пуле: 36%
[2026-10-14 17:31:42] 📦 Снимок: pre-update-20261014-173142
[2026-10-14 17:31:44] ⬆️ Обновляем через compose: /opt/uptime-kuma
[2026-10-14 17:31:48] ожидание 15 секунд
[2026-10-14 17:32:05] ❌ Контейнер работает из прежнего образа — обновление не применилось
[2026-10-14 17:32:05] работает: sha256:3d632903e6af3
[2026-10-14 17:32:05] скачан: sha256:70233f4acb516
[2026-10-14 17:32:05] 🏥 Проверка здоровья: http://192.168.1.107:3001/api/entry-page (успешные коды: 200 201 204 301 302)
[2026-10-14 17:32:05] 🚨 Новый образ не применён — откат
[2026-10-14 17:32:10] откат выполнен
[2026-10-14 17:33:05] снимок удалён
[2026-10-14 17:33:05] ⚠️ Обновление uptime-kuma отменено, сервис восстановлен из снимка
[2026-10-14 17:36:44] ▶ Обновление: uptime-kuma (CT 107, тип docker, критичный: false)
[2026-10-14 17:36:44] место в пуле: 36%
[2026-10-14 17:36:45] 📦 Снимок: pre-update-20261014-173645
[2026-10-14 17:36:46] ⬆️ Обновляем через compose: /opt/network-lxc (служба uptime)
[2026-10-14 17:36:56] ожидание 15 секунд
[2026-10-14 17:37:12] ✅ Контейнер работает из актуального образа
[2026-10-14 17:37:12] 🏥 Проверка здоровья: http://192.168.1.107:3001/api/entry-page (успешные коды: 200 201 204 301 302)
[2026-10-14 17:37:12] ✅ Проверка пройдена
[2026-10-14 17:37:13] снимок удалён
[2026-10-14 17:37:14] ✅ зафиксировано в Git и отправлено
[2026-10-14 17:37:14] 🎉 uptime-kuma обновлён: louislam/uptime-kuma:latest
[2026-10-14 17:39:41] ▶ Обновление: prometheus (CT 134, тип docker, критичный: false)
[2026-10-14 17:39:41] место в пуле: 36%
[2026-10-14 17:39:42] 📦 Снимок: pre-update-20261014-173942
[2026-10-14 17:39:43] ⬆️ Обновляем через compose: /opt/prometheus (служба не определена — весь проект)
[2026-10-14 17:39:52] контейнер не управляется compose — перевожу под управление
[2026-10-14 17:39:53] старый контейнер сохранён под другим именем
[2026-10-14 17:39:54] ожидание 15 секунд
[2026-10-14 17:40:10] ✅ Контейнер работает из актуального образа
[2026-10-14 17:40:10] 🏥 Проверка здоровья: http://192.168.1.134:9090/-/healthy (успешные коды: 200 201 204 301 302)
[2026-10-14 17:40:10] ✅ Проверка пройдена
[2026-10-14 17:40:11] снимок удалён
[2026-10-14 17:40:12] ✅ зафиксировано в Git и отправлено
[2026-10-14 17:40:12] 🎉 prometheus обновлён: prom/prometheus:latest
[2026-10-14 17:41:01] ▶ Обновление: grafana (CT 113, тип docker, критичный: false)
[2026-10-14 17:41:01] место в пуле: 36%
[2026-10-14 17:41:02] 📦 Снимок: pre-update-20261014-174102
[2026-10-14 17:41:03] ⬆️ Обновляем через compose: /opt/grafana (служба не определена — весь проект)
[2026-10-14 17:41:04] контейнер не управляется compose — перевожу под управление
[2026-10-14 17:41:06] старый контейнер сохранён под другим именем
[2026-10-14 17:41:06] ожидание 15 секунд
[2026-10-14 17:41:22] ✅ Контейнер работает из актуального образа
[2026-10-14 17:41:22] 🏥 Проверка здоровья: http://192.168.1.113:3000/api/health (успешные коды: 200 201 204 301 302)
[2026-10-14 17:41:22] попытка 1/3: код 000000
[2026-10-14 17:41:32] попытка 2/3: код 000000
[2026-10-14 17:41:42] попытка 3/3: код 000000
[2026-10-14 17:41:42] 🚨 Проверка не пройдена — откат
[2026-10-14 17:41:48] откат выполнен
[2026-10-14 17:42:43] снимок удалён
[2026-10-14 17:42:43] ⚠️ Обновление grafana отменено, сервис восстановлен из снимка
[2026-10-14 17:42:43] ▶ Обновление: syncthing (CT 139, тип docker, критичный: false)
[2026-10-14 17:42:43] место в пуле: 36%
[2026-10-14 17:42:44] 📦 Снимок: pre-update-20261014-174244
[2026-10-14 17:42:45] ⬆️ Обновляем через compose: /opt/syncthing (служба не определена — весь проект)
[2026-10-14 17:42:58] контейнер не управляется compose — перевожу под управление
[2026-10-14 17:42:59] старый контейнер сохранён под другим именем
[2026-10-14 17:43:00] ожидание 15 секунд
[2026-10-14 17:43:16] ✅ Контейнер работает из актуального образа
[2026-10-14 17:43:16] 🏥 Проверка здоровья: http://192.168.1.139:8384/rest/system/version (успешные коды: 200 201 204 301 302 401 403)
[2026-10-14 17:43:16] ✅ Проверка пройдена
[2026-10-14 17:43:17] снимок удалён