Pipeline de Activos para Juegos — Local con IA
Máquina
- Windows 10, RTX 3090 24 GB, 28 GB RAM (→40 GB), Xeon E5-2696 v4
- ComfyUI 0.44.0 en
D:\AI\ComfyUI, modelos enD:\AI\models\ - Docs:
D:\AI\SETUP_DOCUMENTATION.md,D:\AI\HANDOFF.md,D:\AI\PROJECTS.md
Mapeo Tarea → Modelo
| Tarea | Modelo | Flujo de trabajo | Notas |
|---|---|---|---|
| Imágenes generales rápidas | Z-Image Turbo (int8/FP8) | image_z_image_turbo_int8.json | 8-9 pasos, CFG 1.0, 1024-1344px |
| Ilustración anime | Nova Anime XL v19 / Prefect Pony XL v6 | nova_anime_xl_v19.json / prefect_pony_xl_v6.json | 28 pasos, CFG 5-6, CLIP skip 2 |
| Guiado por estructura (pose/profundidad/canny) | Z-Image Turbo + ControlNet Union | image_z_image_turbo_fun_union_controlnet_int8.json | La imagen de entrada controla la estructura |
| Sprites (pixel art) | SDXL + Pixel-Art-XL LoRA (aún no instalado) | Por crear | Redimensionar con vecino más cercano, limitar paleta |
| Texturas tileables | Z-Image Turbo o SDXL + LoRA tileable | Por crear | + Extracción PBR con TextureAlchemy |
| Props 3D | Pixal3D / TRELLIS.2 (nativo) | 3d_pixal3d_trellis2_image_to_model.json | GLB + PBR, 1024-1536px |
| Clips de video | MiniMax H3 (Ref2VA) | video_minimax_h3_r2v_safe.json | 5s 864x480, turbo de 4 pasos; 15s ~23 min |
| Arte conceptual / skyboxes | Z-Image Turbo | flujo de trabajo t2i | LoRA equirrectangular para cielos 360 |
Pipeline de Sprites
- Generar a 1024 con SDXL + Pixel-Art-XL LoRA (o Z-Image + estilo pixel).
- Redimensionar con vecino más cercano a 32/48/64/96/128 px.
- Limitar paleta a 16-32 colores (Aseprite / Pixelorama).
- Limpieza manual (arreglar píxeles sueltos, alinear silueta).
- Consistencia: fijar semilla, ControlNet OpenPose para poses, o entrenar un LoRA de personaje.
- Animación: generar poses clave con ControlNet; limpiar a mano; empaquetar hoja de sprites.
Límites honestos: La IA genera imágenes "similares a pixel art", no cuadrículas de píxeles reales. Los ciclos de caminata necesitan limpieza manual. Las herramientas en la nube (PixelLab, Retro Diffusion, Sprite AI) son más llave en mano para animación, pero lo local gana en privacidad/costo/consistencia de estilo.
Pipeline de Texturas
- Albedo tileable: SDXL + LoRA tileable o Z-Image Turbo, 1024/2048, prompt de arriba hacia abajo.
- Corrección sin costuras: TextureAlchemy "Seamless Tiling Maker" + pintar costura.
- Extracción PBR: TextureAlchemy (Marigold/Lotus) → normal, rugosidad, metálico, AO, altura, curvatura.
- Alternativa: CHORD (Ubisoft, solo investigación — no comercial).
- Post: Ecualizador de Texturas (eliminar iluminación horneada), empaquetar ORM para Unity/Unreal.
- Redimensionar a 2K/4K con SeedVR2 (conservador, código abierto) o ESRGAN (rápido).
Límites honestos: Los materiales orgánicos/estilizados son excelentes; la arquitectura paramétrica precisa (patrones de ladrillos) aún pertenece a Substance Designer. CHORD es solo para investigación.
Pipeline 3D
- Imagen conceptual (Z-Image Turbo) — fondo limpio, vista frontal. Opcional multivista.
- Imagen a 3D: Plantilla de ComfyUI "Pixal3D & TRELLIS.2" → GLB + PBR.
- Boolean apagado = Pixal3D (mejor fidelidad de entrada), encendido = TRELLIS.2 (topología compleja).
- Postprocesar en ComfyUI (remallar, decimar, rellenar agujeros, suavizar normales) o Blender.
- Retopo/UV/LOD/colisión en Blender; pase listo para juego.
- Rigging: SkinTokens (MIT, auto-rigging, ~6 GB GGML) o Mesh2Motion (gratuito, local, similar a Mixamo).
- Exportar FBX/GLB al motor.
Límites honestos: Los props estáticos son utilizables después de limpieza; los personajes necesitan rigging/pintura de pesos manual; la animación es la parte difícil. Las herramientas en la nube de código cerrado (Meshy, Tripo, Rodin) siguen siendo mejores para personajes.
Consistencia y Automatización
- Los JSON de flujos de trabajo viven en el repositorio del proyecto. Comprometerlos; mismo flujo de trabajo + semilla = salida reproducible.
- Disciplina de carpeta de staging: salida →
staging/, revisión humana, luego mover al proyecto del motor. - API de ComfyUI: POST del JSON del flujo de trabajo a
/prompt; consultar/historyo usar websocket. - Entrenamiento de LoRA: Kohya sd-scripts. SDXL 12-16 GB, FLUX 16-24 GB. 10-30 imágenes, 1024px, 1000-2500 pasos. Esta es la clave para un estilo artístico coherente.
Licencias (uso personal = sin restricciones; para comercial:)
| Categoría | Modelos | ¿Comercial? |
|---|---|---|
| Apache 2.0 / MIT | Z-Image/Turbo, FLUX.2 klein 4B, FLUX.1 schnell, Qwen-Image/2512, ERNIE, HiDream (MIT), GLM (MIT), LongCat, Pixal3D, TRELLIS.2 (MIT), SkinTokens (MIT), Mesh2Motion | Sí |
| Limitado por ingresos | FLUX 3 Klein (<$5M + filtros/revisión), SD 3.5 (<$1M), Krea 2 (<$1M), Stable Fast 3D (<$1M) | Bajo el umbral |
| No comercial | FLUX.1 dev, FLUX.2 dev/klein 9B, Qwen-Image-2.1, Ideogram 4, HunyuanImage-3.0 (territorial) | No |
| Solo investigación | CHORD (Ubisoft PBR), Marigold/Lotus (verificar) | Solo prototipo |
Además: Steam requiere divulgación de IA para juegos publicados. Los LoRA de Civitai tienen licencias individuales. El copyright de EE. UU. requiere autoría humana.
Instalado vs. No Instalado
Instalado: Z-Image Turbo, Nova Anime XL, Prefect Pony XL, Pixal3D, TRELLIS.2, MiniMax H3, ControlNet Union, BiRefNet, MoGe, DINOv3.
NO instalado (disponible bajo solicitud): SDXL base, FLUX, LoRAs de pixel art, SDXL ControlNet, H3 FL2VA, modelos de upscale (ESRGAN/SeedVR2), LoRAs de textura, herramientas de entrenamiento Kohya, Krita AI Diffusion, Aseprite/Pixelorama.
Referencias
D:\AI\SETUP_DOCUMENTATION.md— referencia completa de 13 seccionesD:\AI\HANDOFF.md— referencia rápida para agentes (procedimientos de instalación)D:\AI\PROJECTS.md— rastreador de proyectosD:\AI\README.txt— referencia rápida para usuarios- Repositorios de prompts: booru-prompt-gallery, sd-akashic, hoja de trucos de SupaGruen, plantillas de Dalabad, referencia de estilo de roblaughter, biblioteca de prompts zsky