Was macht Game Asset Pipeline – Lokale KI?
Maschine
- Windows 10, RTX 3090 24 GB, 28 GB RAM (→40 GB), Xeon E5-2696 v4
- ComfyUI 0.44.0 unter
D:\AI\ComfyUI, Modelle unterD:\AI\models\ - Dokumente:
D:\AI\SETUP_DOCUMENTATION.md,D:\AI\HANDOFF.md,D:\AI\PROJECTS.md
Aufgaben → Modell-Zuordnung
| Aufgabe | Modell | Workflow | Hinweise |
|---|---|---|---|
| Schnelle allgemeine Bilder | Z-Image Turbo (int8/FP8) | image_z_image_turbo_int8.json | 8-9 Schritte, CFG 1.0, 1024-1344px |
| Anime-Illustration | Nova Anime XL v19 / Prefect Pony XL v6 | nova_anime_xl_v19.json / prefect_pony_xl_v6.json | 28 Schritte, CFG 5-6, CLIP Skip 2 |
| Strukturgesteuert (Pose/Tiefe/Canny) | Z-Image Turbo + ControlNet Union | image_z_image_turbo_fun_union_controlnet_int8.json | Eingabebild steuert Struktur |
| Sprites (Pixel-Art) | SDXL + Pixel-Art-XL LoRA (noch nicht installiert) | Noch zu erstellen | Downscale mit Nächstem-Nachbarn, Palettenbegrenzung |
| Nahtlose Texturen | Z-Image Turbo oder SDXL + nahtloses LoRA | Noch zu erstellen | + TextureAlchemy PBR-Extraktion |
| 3D-Props | Pixal3D / TRELLIS.2 (nativ) | 3d_pixal3d_trellis2_image_to_model.json | GLB + PBR, 1024-1536px |
| Videoclips | MiniMax H3 (Ref2VA) | video_minimax_h3_r2v_safe.json | 5 s 864x480, 4-Schritt-Turbo; 15 s ~23 min |
| Konzeptkunst / Skyboxes | Z-Image Turbo | t2i-Workflow | Equirectangular LoRA für 360°-Himmel |
Sprite-Pipeline
- Generieren bei 1024 mit SDXL + Pixel-Art-XL LoRA (oder Z-Image + Pixel-Stil).
- Downscale mit Nächstem-Nachbarn auf 32/48/64/96/128 px.
- Palettenbegrenzung auf 16-32 Farben (Aseprite / Pixelorama).
- Manuelle Bereinigung (verirrte Pixel korrigieren, Silhouette ausrichten).
- Konsistenz: Seed sperren, ControlNet OpenPose für Posen oder ein Charakter-LoRA trainieren.
- Animation: Schlüsselposen mit ControlNet generieren; manuell säubern; Sprite-Sheet packen.
Ehrliche Grenzen: KI erzeugt „pixelart-ähnliche“ Bilder, keine echten Pixelraster. Gehzyklen benötigen manuelle Nachbearbeitung. Cloud-Tools (PixelLab, Retro Diffusion, Sprite AI) sind für Animationen von Haus aus besser, aber lokal gewinnt bei Privatsphäre/Kosten/Stil-Konsistenz.
Textur-Pipeline
- Nahtlose Albedo: SDXL + nahtloses LoRA oder Z-Image Turbo, 1024/2048, Draufsicht-Prompt.
- Nahtlos-Fix: TextureAlchemy „Seamless Tiling Maker“ + Naht mit Inpainting korrigieren.
- PBR-Extraktion: TextureAlchemy (Marigold/Lotus) → Normal, Rauheit, Metallisch, AO, Höhe, Krümmung.
- Alternative: CHORD (Ubisoft, nur Forschung – nicht kommerziell).
- Nachbereitung: Texture Equalizer (eingebaute Beleuchtung entfernen), ORM für Unity/Unreal packen.
- Upscaling auf 2K/4K mit SeedVR2 (konservativ, Open Source) oder ESRGAN (schnell).
Ehrliche Grenzen: Organische/stilisierte Materialien sind großartig; präzise parametrische Architektur (Ziegelmuster) gehört weiterhin in Substance Designer. CHORD ist nur für die Forschung.
3D-Pipeline
- Konzeptbild (Z-Image Turbo) – sauberer Hintergrund, Frontansicht. Optional Multi-View.
- Bild-zu-3D: ComfyUI-Vorlage „Pixal3D & TRELLIS.2“ → GLB + PBR.
- Boolean aus = Pixal3D (bessere Eingabetreue), an = TRELLIS.2 (komplexe Topologie).
- Nachbearbeitung in ComfyUI (Remesh, Dezimieren, Löcher füllen, Normalen glätten) oder Blender.
- Retopo/UV/LOD/Kollision in Blender; spielreif.
- Rigging: SkinTokens (MIT, Auto-Rig, ~6 GB GGML) oder Mesh2Motion (kostenlos, lokal, Mixamo-ähnlich).
- Export als FBX/GLB in die Engine.
Ehrliche Grenzen: Statische Props sind nach Bereinigung brauchbar; Charaktere benötigen manuelles Rigging/Weight Painting; Animation ist der schwierige Teil. Geschlossene Cloud-Dienste (Meshy, Tripo, Rodin) sind für Charaktere immer noch besser.
Konsistenz und Automatisierung
- Workflow-JSONs liegen im Projekt-Repo. Committe sie; gleicher Workflow + Seed = reproduzierbares Ergebnis.
- Staging-Ordner-Disziplin: Ausgabe →
staging/, menschliche Prüfung, dann ins Engine-Projekt verschieben. - ComfyUI API: POST Workflow-JSON an
/prompt;/historyabfragen oder WebSocket nutzen. - LoRA-Training: Kohya sd-scripts. SDXL 12-16 GB, FLUX 16-24 GB. 10-30 Bilder, 1024px, 1000-2500 Schritte. Dies ist der Schlüssel zu einem kohärenten Kunststil.
Lizenzierung (private Nutzung = keine Einschränkungen; für kommerziell:)
| Kategorie | Modelle | Kommerziell? |
|---|---|---|
| Apache 2.0 / MIT | Z-Image/Turbo, FLUX.2 klein 4B, FLUX.1 schnell, Qwen-Image/2512, ERNIE, HiDream (MIT), GLM (MIT), LongCat, Pixal3D, TRELLIS.2 (MIT), SkinTokens (MIT), Mesh2Motion | Ja |
| Umsatzbegrenzt | FLUX 3 Klein (<5 Mio. $ + Filter/Prüfung), SD 3.5 (<1 Mio. $), Krea 2 (<1 Mio. $), Stable Fast 3D (<1 Mio. $) | Unter Schwelle |
| Nicht-kommerziell | FLUX.1 dev, FLUX.2 dev/klein 9B, Qwen-Image-2.1, Ideogram 4, HunyuanImage-3.0 (territorial) | Nein |
| Nur Forschung | CHORD (Ubisoft PBR), Marigold/Lotus (prüfen) | Nur Prototyp |
Hinweis: Steam erfordert eine KI-Offenlegung für veröffentlichte Spiele. Civitai-LoRAs haben individuelle Lizenzen. Das US-Urheberrecht verlangt menschliche Urheberschaft.
Was installiert ist vs. nicht
Installiert: Z-Image Turbo, Nova Anime XL, Prefect Pony XL, Pixal3D, TRELLIS.2, MiniMax H3, ControlNet Union, BiRefNet, MoGe, DINOv3.
NICHT installiert (auf Anfrage verfügbar): SDXL-Basis, FLUX, Pixel-Art-LoRAs, SDXL ControlNet, H3 FL2VA, Upscale-Modelle (ESRGAN/SeedVR2), Textur-LoRAs, Kohya-Trainingswerkzeuge, Krita AI Diffusion, Aseprite/Pixelorama.
Referenzen
D:\AI\SETUP_DOCUMENTATION.md– vollständige 13-teilige ReferenzD:\AI\HANDOFF.md– Agenten-Kurzreferenz (Installationsverfahren)D:\AI\PROJECTS.md– ProjektübersichtD:\AI\README.txt– Benutzer-Kurzreferenz- Prompt-Repos: booru-prompt-gallery, sd-akashic, SupaGruen Spickzettel, Dalabad-Vorlagen, roblaughter-Stilreferenz, zsky-Prompt-Bibliothek