80 lines
2.3 KiB
Python
Executable File
80 lines
2.3 KiB
Python
Executable File
#!/usr/bin/env python3
|
|
"""Самовосстановление Gitea: n8n-воркфлоу только создаёт issue, реальный рестарт — здесь.
|
|
|
|
Раз в 5 минут проверяет health Гит��и. Если не отвечает две проверки
|
|
подряд — перезапускает контейнер в CT140 и проверяет снова. Успех или
|
|
провал — событие в ALERT (без спама: дедуп по ключу).
|
|
"""
|
|
import json
|
|
import os
|
|
import subprocess
|
|
import sys
|
|
import urllib.request as u
|
|
|
|
URL = "http://192.168.1.140:3000/api/healthz"
|
|
CT = "140"
|
|
CONTAINER = "gitea"
|
|
STATE = "/var/lib/gitea-selfheal/streak"
|
|
NOTIFY = "/opt/buryan-hub/scripts/notify.py"
|
|
|
|
|
|
def health(timeout=8):
|
|
try:
|
|
with u.urlopen(URL, timeout=timeout) as r:
|
|
return r.status == 200
|
|
except Exception:
|
|
return False
|
|
|
|
|
|
def notify(title, text, priority="high"):
|
|
try:
|
|
subprocess.run(["/usr/bin/python3", NOTIFY, "--priority", priority,
|
|
"--title", title, text], capture_output=True,
|
|
text=True, timeout=120)
|
|
except Exception:
|
|
pass
|
|
|
|
|
|
def main():
|
|
if health():
|
|
_set(0)
|
|
print("gitea: ok")
|
|
return 0
|
|
print("gitea: не отвечает")
|
|
streak = _get() + 1
|
|
_set(streak)
|
|
if streak < 2:
|
|
return 1
|
|
r = subprocess.run(["pct", "exec", CT, "--", "docker", "restart", CONTAINER],
|
|
capture_output=True, text=True, timeout=180)
|
|
out = ((r.stdout or "") + (r.stderr or "")).strip()[-200:]
|
|
for _ in range(12):
|
|
import time as _t
|
|
_t.sleep(5)
|
|
if health():
|
|
_set(0)
|
|
notify("Gitea восстановлена", "Контейнер перезапущен, health снова ok.")
|
|
return 0
|
|
notify("Gitea не поднимается",
|
|
"Перезапуск контейнера не помог: %s" % out)
|
|
return 2
|
|
|
|
|
|
def _get():
|
|
try:
|
|
return int(open(STATE).read().strip() or 0)
|
|
except Exception:
|
|
return 0
|
|
|
|
|
|
def _set(n):
|
|
try:
|
|
os.makedirs(os.path.dirname(STATE), exist_ok=True)
|
|
open(STATE, "w").write(str(n))
|
|
except Exception:
|
|
pass
|
|
|
|
|
|
if __name__ == "__main__":
|
|
sys.exit(main())
|