[HOME] Автоматизация рендеров: img2img_daily.py + home-img2img.timer (22:30 МСК), аудит рендеров за 07.11

This commit is contained in:
root committed 2026-11-07 22:15:48 +03:00
1 parent 3ffcc08904
commit f7b0231a8e
14 files changed
+378

No files matched your search

+136
View File
@@ -0,0 +1,136 @@
# Аудит: рендеры комнат и панель (07.11.2026)
Собрано командами на хосте и в hub-core.
## 1. Задача
Получить рендеры комнат дома, похожие на реальные помещения, и вывести их на панель.
## 2. Что проверили и чем закончилось
| Подход | Результат | Вердикт |
|---|---|---|
| Gemini / Nano Banana (наш ключ) | все image-модели → **429** (квота) | ❌ нужен биллинг |
| Kandinsky / FusionBrain | `fusionbrain.ai` → **таймаут** с хоста и с VPS; API = только text2img | ❌ недоступен и не умеет img2img |
| Blender headless (наш сервер) | 7 рендеров, 60–100 с/комната | ⚠️ есть, но blockout — «не похоже» |
| Pollinations (бесплатно, без ключа) | 8 рендеров по 3–5 с | ✅ красиво, но «по описанию» |
| **FLUX Kontext img2img (HF Space)** | **9 рендеров по реальным фото** | ✅ **похоже, бесплатно** |
## 3. Текущее состояние рендеров
| Показатель | Значение |
|---|---|
| Рендеры img2img (по фото) | **9** |
| Рендеры Pollinations (по описанию) | 8 |
| Рендеры Blender | 7 |
| Картинок в галерее `/rooms` | 8 |
| Всего фото в очереди | 20 |
| **Осталось обработать** | **11** |
## 4. Автоматизация (вариант A — бесплатно)
| Элемент | Значение |
|---|---|
| Скрипт | `ops/home/img2img_daily.py` |
| Юнит | `home-img2img.service` (oneshot) |
| Таймер | `home-img2img.timer`, ежедневно **22:30 МСК**, `Persistent=true` |
| Состояние | `ops/home/renders/img2img-state.json` |
| Отчёт | `ops/home/renders/img2img-status.json` |
| Лимит квоты | бесплатный HF ≈ 90 с GPU/сутки → 1–3 картинки |
| Осталось | 11 фото → ориентировочно **4–8 дней** |
Таймер проверен: `systemctl list-timers` показывает следующий запуск,
ручной прогон сервиса завершился успешно и корректно обработал исчерпанную квоту.
## 5. Подготовленные данные по комнатам
`ops/home/renders/input/<room>/` — 8 комнат, в каждой:
- `plan.png` — кроп плана из PDF (найден через OCR по подписям площадей: 11,45 / 11,14 / 14,34 / 27,65 / 6,83)
- `photos/` — фото этой комнаты (**20 файлов**)
- `spec.json` — площадь, мебель, группы света, число фото
| Комната | Фото | План |
|---|---|---|
| Спальня | 5 | ✅ |
| Кабинет | 6 | ✅ |
| Санузел | 3 | ✅ |
| Коридор | 4 | ✅ |
| Данина | 1 | ✅ |
| Прачечная | 1 | ✅ |
| Кухня-гостиная | **0** | ✅ |
| Прихожая | **0** | ✅ |
## 6. Панель и сервисы
| Элемент | Состояние |
|---|---|
| hub-core | active |
| combine-web2 | active |
| vps-socks (SOCKS к VPS) | active |
| Homepage (CT102:3000) | running, HTTP 200 |
| `/rooms` (галерея комнат) | HTTP 200 |
| `/dash` (живой дашборд) | HTTP 200 |
## 7. Ограничения и риски
1. **Бесплатная квота HF** — 90 с GPU/сутки. Таймер тратит её за 1–3 картинки.
2. **Нет фото** кухни-гостиной и прихожей — их рендеры останутся «по описанию», пока владелец не пришлёт снимки.
3. **Качество зависит от фото**: снимок «из угла» даёт чистую изометрию (спальня), широкоугольный — искажение (кабинет).
4. **Биллинг Google** не включён → Nano Banana недоступен.
5. **FusionBrain** не отвечает ни с хоста, ни с VPS — проверить при следующей попытке.
6. Рендеры не коммитятся автоматически — версионируются вручную при аудитах.
## 8. Коммиты за 07.11.2026
```
3ffcc08 [HOME] img2img через FLUX Kontext (HF): 10 рендеров по реальным фото (спальня 5, кабинет 4) — галерея обновлена
afd01f8 [HOME] AI-рендеры 8 комнат через Pollinations (бесплатно, без ключа): фотореалистичные интерьеры, галерея /rooms обновлена
4a35193 [HOME] Входные данные по комнатам: кропы плана (OCR 400dpi по площадям), фото по комнатам, spec.json — подготовка к генерации в Kandinsky
b89c094 [HOME] 3D-рендеры комнат через Blender headless (Cycles, 7 комнат), веб-версии JPEG, галерея /rooms переведена на 3D
f124321 [HOME] Изометрические рендеры 7 комнат (SVG+PNG), генератор render_rooms.py, галерея /rooms в hub-core
aee8aed [MOBILE] Адаптив для «Моё» и комбайна: viewport, одна колонка, скролл вкладок и таблиц, поля 16px. Ловушка f-string задокументирована
e1702ec [BACKUP] Hot-sqlite исправлен: пауза контейнеров на время tar (проверено — 0 битых баз вместо 1)
a63994e [STANDARD] Блок 3: SSO проверен — 30 гейтов (13x403 + 12x302 + 5 нативных). Блок 4: restore ночного набора (24 архива, 1.8 ГБ), найдено ограничение hot-sqlite
90148b1 [STANDARD] Блок 2 закрыт: UDP-проверка coturn, классификация S1 (18 неприменимо), SSO для Jackett. Стандарт 98%
63e9ca1 [STANDARD] S3 = 100%: проверка изнутри CT для localhost-сервисов, TCP для mosquitto/coturn. Итог: S1 70%, S2 100%, S3 100%, S4 100%, полный 70%
e03477e [STANDARD] S3 доведён до 91%: реальный IP контейнера (hostname -I), PORT_HINTS для сервисов без публикации портов. Итог: S1 70%, S2 100%, S3 91%, S4 100%, полный 67%
8ba165a [STANDARD] Бэкап достиг 100%: добавлены именованные docker-тома (navidrome, linkding), подсказки Authentik. S1 70%, S2 100%, S3 85%, полный 59%
5438619 [STANDARD] Автопроверка стандарта: ночной пересчёт (04:40) + Gitea CI workflow; отчёт и скрипт в репозитории
8db34fb [SSO] Lidarr и Alertmanager за SSO (4200/4201). Все пользовательские сервисы закрыты; остались только технические исключения
1b0ba89 [BACKLOG] Задача на Beget: DNS cams.buryans.ru для Frigate (остальное готово: провайдер, прокси 4197, конфиг nginx)
c3aa32a [SSO] Grafana и Jellystat за SSO (4198/4199); Duplicati уже покрыт backup-прокси; Frigate в списке. Стандарт: S1 67%, полный 53%
afce14c [SSO] Frigate: провайдер+прокси 4197 (403), конфиг cams.buryans.ru готов; удалённый доступ: Tailscale/HA без DNS
7865bd8 [SSO] Пакет: vikunja, memos, mealie, homebox за SSO-прокси (4193-4196); mealie закрыт и публично через VPS
d6a4087 [SSO] Syncthing закрыт SSO-гейтом (хост+VPS, 403). Зафиксировано, что Frigate/Jackett/MQTT/LiveKit сознательно без гейта
2d29c89 [SSO] Публичный SSO закрыт через VPS: vault/ombi/adguard -> SSO-прокси (403 SignIn). Стандарт: S1 53%, S2 94%, S3 85%, полный 41%
839f89a [STANDARD] Итог: TCP-проверки S3 62%->85%, SSO seerr+adguard (провайдеры, прокси 4190/4191), найдена ловушка Authentik API; ограничение VPS зафиксировано
4ecc532 [STANDARD] TCP-проверки (S3 62%→85%), SSO для seerr и adguard (провайдеры+прокси 4190/4191); ограничение: публичные домены за VPS
4c40c10 chore(audit): auto-snapshot and CHANGELOG update 2026-11-07
```
## 9. Объём
```
13M /root/buryan-infra/ops/home/renders
17M /root/buryan-infra/ops/home/blender
```
+169
View File
@@ -0,0 +1,169 @@
#!/usr/bin/env python3
# -*- coding: utf-8 -*-
"""Ежедневная обработка фото комнат через FLUX Kontext (img2img, бесплатная квота HF).
Логика: берём очередь «комната + фото», каждый запуск пробует до N задач.
При упоре в квоту — мягко выходим, остаток ждёт следующего дня.
Состояние: ops/home/renders/img2img-state.json
Отчёт: ops/home/renders/img2img-status.json
"""
import glob
import json
import os
import shutil
import time
import sys
BASE = "/root/buryan-infra/ops/home"
SRC = os.path.join(BASE, "plans/photos")
OUT = os.path.join(BASE, "renders/img2img")
WEB = os.path.join(BASE, "renders/web")
STATE = os.path.join(BASE, "renders/img2img-state.json")
STATUS = os.path.join(BASE, "renders/img2img-status.json")
TOKEN_FILE = "/root/.hf-token"
TOKEN_HOLDER = os.environ.get("HF_TOKEN_FILE", TOKEN_FILE)
PROMPT = ("Convert this real room photo into a clean isometric 2.5D cutaway illustration. "
"Keep the SAME room layout, furniture positions, materials and lighting as in the photo. "
"Style: modern flat vector illustration, warm interior light, dark charcoal background, "
"detailed furniture, soft shadows, no text, no people.")
ROOMS = {
"bedroom": "spalnya-*.jpg",
"office": "office-*.jpg",
"bathroom": "bath-*.jpg",
"corridor": "corridor-*.jpg",
"danina": "danina-*.jpg",
"laundry": "laundry-*.jpg",
}
MAX_PER_RUN = int(os.environ.get("I2I_MAX", "3"))
def load_json(path, default):
try:
return json.load(open(path, encoding="utf-8"))
except Exception:
return default
def build_queue():
q = []
for room, pat in ROOMS.items():
for src in sorted(glob.glob(os.path.join(SRC, pat))):
q.append({"room": room, "photo": os.path.basename(src),
"src": src,
"dst": os.path.join(OUT, "%s-%s.jpg" % (
room, os.path.basename(src).rsplit(".", 1)[0]))})
return q
def update_gallery(room):
from PIL import Image
cand = sorted(glob.glob(os.path.join(OUT, room + "-*.jpg")))
if not cand:
return False
src = max(cand, key=os.path.getsize)
im = Image.open(src).convert("RGB")
w = 1200
im.resize((w, int(im.height * w / im.width)), Image.LANCZOS).save(
os.path.join(WEB, room + ".jpg"), "JPEG", quality=85, optimize=True)
return True
def main():
os.makedirs(OUT, exist_ok=True)
os.makedirs(WEB, exist_ok=True)
started = time.strftime("%Y-%m-%d %H:%M:%S")
token = ""
if os.path.exists(TOKEN_HOLDER):
token = open(TOKEN_HOLDER, encoding="utf-8").read().strip()
state = load_json(STATE, {"done": [], "quota_hit": None, "runs": 0})
done_set = set(state.get("done") or [])
queue = build_queue()
pending = [t for t in queue if t["dst"] not in done_set and not (
os.path.exists(t["dst"]) and os.path.getsize(t["dst"]) > 8000)]
status = {"started": started, "queue_total": len(queue),
"pending_before": len(pending), "generated": [], "errors": [],
"quota_hit": False, "remaining": []}
if not pending:
status["note"] = "все фото обработаны"
json.dump(status, open(STATUS, "w", encoding="utf-8"), ensure_ascii=False, indent=1)
print("все фото уже обработаны")
return 0
try:
from gradio_client import Client, handle_file
except ImportError:
status["note"] = "gradio_client не установлен"
json.dump(status, open(STATUS, "w", encoding="utf-8"), ensure_ascii=False, indent=1)
print("gradio_client не установлен")
return 1
client = None
for kwargs in ({"hf_token": token} if token else {}, {"token": token} if token else {}, {}):
try:
client = Client("black-forest-labs/FLUX.1-Kontext-Dev", verbose=False, **kwargs)
break
except TypeError:
continue
except Exception as e:
status["errors"].append(str(e)[:120])
if client is None:
json.dump(status, open(STATUS, "w", encoding="utf-8"), ensure_ascii=False, indent=1)
print("клиент не создан")
return 1
touched_rooms = set()
for task in pending[:MAX_PER_RUN]:
try:
res = client.predict(input_image=handle_file(task["src"]), prompt=PROMPT,
seed=0, randomize_seed=True,
guidance_scale=2.5, steps=28, api_name="/infer")
path = res[0] if isinstance(res, (list, tuple)) else res
shutil.copy(path, task["dst"])
done_set.add(task["dst"])
touched_rooms.add(task["room"])
status["generated"].append({"room": task["room"], "photo": task["photo"],
"kb": os.path.getsize(task["dst"]) // 1024})
print("готово: %s / %s" % (task["room"], task["photo"]))
except Exception as e:
msg = str(e)
status["errors"].append(msg[:160])
print("ошибка: %s / %s -> %s" % (task["room"], task["photo"], msg[:100]))
if "ZeroGPU" in msg or "quota" in msg.lower():
status["quota_hit"] = True
state["quota_hit"] = started
break
time.sleep(3)
for room in touched_rooms:
try:
update_gallery(room)
except Exception as e:
status["errors"].append("галерея %s: %s" % (room, str(e)[:80]))
state["done"] = sorted(done_set)
state["runs"] = int(state.get("runs", 0)) + 1
state["last_run"] = started
json.dump(state, open(STATE, "w", encoding="utf-8"), ensure_ascii=False, indent=1)
left = [t for t in queue if t["dst"] not in done_set]
status["remaining"] = [{"room": t["room"], "photo": t["photo"]} for t in left]
status["finished"] = time.strftime("%Y-%m-%d %H:%M:%S")
json.dump(status, open(STATUS, "w", encoding="utf-8"), ensure_ascii=False, indent=1)
print("сгенерировано: %d | осталось: %d | квота: %s" % (
len(status["generated"]), len(left), "да" if status["quota_hit"] else "нет"))
return 0
if __name__ == "__main__":
sys.exit(main())
+16
View File
@@ -0,0 +1,16 @@
{
"done": [
"/root/buryan-infra/ops/home/renders/img2img/bedroom-spalnya-bed.jpg",
"/root/buryan-infra/ops/home/renders/img2img/bedroom-spalnya-doors.jpg",
"/root/buryan-infra/ops/home/renders/img2img/bedroom-spalnya-tv.jpg",
"/root/buryan-infra/ops/home/renders/img2img/bedroom-spalnya-window-tv.jpg",
"/root/buryan-infra/ops/home/renders/img2img/bedroom-spalnya-window.jpg",
"/root/buryan-infra/ops/home/renders/img2img/office-office-1.jpg",
"/root/buryan-infra/ops/home/renders/img2img/office-office-2.jpg",
"/root/buryan-infra/ops/home/renders/img2img/office-office-3.jpg",
"/root/buryan-infra/ops/home/renders/img2img/office-office-4.jpg"
],
"runs": 3,
"last_run": "2026-11-07 22:15:14",
"quota_hit": "2026-11-07 22:15:14"
}
+57
View File
@@ -0,0 +1,57 @@
{
"started": "2026-11-07 22:15:14",
"queue_total": 20,
"pending_before": 11,
"generated": [],
"errors": [
"You have exceeded your free ZeroGPU quota (90s requested vs. 90s left). Try again in 23:47:19. Subscribe to Hugging Face PRO to get 40 min of ZeroGPU quota a da"
],
"quota_hit": true,
"remaining": [
{
"room": "office",
"photo": "office-5.jpg"
},
{
"room": "office",
"photo": "office-6.jpg"
},
{
"room": "bathroom",
"photo": "bath-1.jpg"
},
{
"room": "bathroom",
"photo": "bath-2.jpg"
},
{
"room": "bathroom",
"photo": "bath-3.jpg"
},
{
"room": "corridor",
"photo": "corridor-1.jpg"
},
{
"room": "corridor",
"photo": "corridor-2.jpg"
},
{
"room": "corridor",
"photo": "corridor-3.jpg"
},
{
"room": "corridor",
"photo": "corridor-4.jpg"
},
{
"room": "danina",
"photo": "danina-loft.jpg"
},
{
"room": "laundry",
"photo": "laundry-1.jpg"
}
],
"finished": "2026-11-07 22:15:19"
}
Binary file not shown.

Before

Width:  |  Height:  |  Size: 37 KiB