Que fait Pipeline d'Actifs de Jeu — Local ?
Machine
- Windows 10, RTX 3090 24 Go, 28 Go RAM (→40 Go), Xeon E5-2696 v4
- ComfyUI 0.44.0 dans
D:\AI\ComfyUI, modèles dansD:\AI\models\ - Docs :
D:\AI\SETUP_DOCUMENTATION.md,D:\AI\HANDOFF.md,D:\AI\PROJECTS.md
Tâche → Cartographie des modèles
| Tâche | Modèle | Workflow | Remarques |
|---|---|---|---|
| Images générales rapides | Z-Image Turbo (int8/FP8) | image_z_image_turbo_int8.json | 8-9 pas, CFG 1.0, 1024-1344px |
| Illustration anime | Nova Anime XL v19 / Prefect Pony XL v6 | nova_anime_xl_v19.json / prefect_pony_xl_v6.json | 28 pas, CFG 5-6, CLIP skip 2 |
| Guidé par structure (pose/profondeur/canny) | Z-Image Turbo + ControlNet Union | image_z_image_turbo_fun_union_controlnet_int8.json | L'image d'entrée pilote la structure |
| Sprites (pixel art) | SDXL + LoRA Pixel-Art-XL (pas encore installé) | À créer | Redimensionnement par plus proche voisin, limitation de palette |
| Textures tuilables | Z-Image Turbo ou SDXL + LoRA tuilable | À créer | + Extraction PBR TextureAlchemy |
| Accessoires 3D | Pixal3D / TRELLIS.2 (natif) | 3d_pixal3d_trellis2_image_to_model.json | GLB + PBR, 1024-1536px |
| Clips vidéo | MiniMax H3 (Ref2VA) | video_minimax_h3_r2v_safe.json | 5s 864x480, turbo 4 pas ; 15s ~23 min |
| Concept art / ciels de boîte | Z-Image Turbo | workflow t2i | LoRA équirectangulaire pour ciels 360 |
Pipeline de sprites
- Générer en 1024 avec SDXL + LoRA Pixel-Art-XL (ou Z-Image + style pixel).
- Redimensionner par plus proche voisin à 32/48/64/96/128 px.
- Limiter la palette à 16-32 couleurs (Aseprite / Pixelorama).
- Nettoyage manuel (corriger les pixels parasites, aligner la silhouette).
- Cohérence : verrouiller la graine, ControlNet OpenPose pour les poses, ou entraîner une LoRA de personnage.
- Animation : générer des poses clés avec ControlNet ; nettoyage manuel ; assembler la feuille de sprites.
Limites honnêtes : L'IA crée des images "de type pixel art", pas de vraies grilles de pixels. Les cycles de marche nécessitent un nettoyage manuel. Les outils cloud (PixelLab, Retro Diffusion, Sprite AI) sont plus clés en main pour l'animation, mais le local l'emporte sur la confidentialité/le coût/la cohérence du style.
Pipeline de textures
- Albedo tuilable : SDXL + LoRA tuilable ou Z-Image Turbo, 1024/2048, prompt de haut en bas.
- Raccord sans couture : TextureAlchemy "Seamless Tiling Maker" + inpainting du raccord.
- Extraction PBR : TextureAlchemy (Marigold/Lotus) → normale, rugosité, métallique, AO, hauteur, courbure.
- Alternative : CHORD (Ubisoft, recherche uniquement — pas pour usage commercial).
- Post-traitement : Texture Equalizer (supprimer l'éclairage cuit), pack ORM pour Unity/Unreal.
- Upscale à 2K/4K avec SeedVR2 (conservateur, open source) ou ESRGAN (rapide).
Limites honnêtes : Les matières organiques/stylisées sont super ; l'architecture paramétrique précise (motifs de briques) relève encore de Substance Designer. CHORD est recherche uniquement.
Pipeline 3D
- Image concept (Z-Image Turbo) — fond propre, vue de face. Optionnel : multi-vue.
- Image vers 3D : modèle ComfyUI "Pixal3D & TRELLIS.2" → GLB + PBR.
- Booléen désactivé = Pixal3D (meilleure fidélité d'entrée), activé = TRELLIS.2 (topologie complexe).
- Post-traitement dans ComfyUI (remaillage, décimation, remplissage de trous, lissage des normales) ou Blender.
- Retopo/UV/LOD/collision dans Blender ; passage prêt pour le jeu.
- Rigging : SkinTokens (MIT, auto-rig, ~6 Go GGML) ou Mesh2Motion (gratuit, local, type Mixamo).
- Export FBX/GLB vers le moteur.
Limites honnêtes : Les accessoires statiques sont utilisables après nettoyage ; les personnages nécessitent un rigging/poids manuel ; l'animation est la partie difficile. Les outils cloud fermés (Meshy, Tripo, Rodin) restent meilleurs pour les personnages.
Cohérence et automatisation
- Les JSON de workflow vivent dans le dépôt du projet. Commitez-les ; même workflow + même graine = sortie reproductible.
- Discipline de dossier de staging : sortie →
staging/, révision humaine, puis déplacement vers le projet moteur. - API ComfyUI : POST du JSON de workflow vers
/prompt; interroger/historyou utiliser websocket. - Entraînement LoRA : Kohya sd-scripts. SDXL 12-16 Go, FLUX 16-24 Go. 10-30 images, 1024px, 1000-2500 pas. C'est la clé d'un style artistique cohérent.
Licences (usage personnel = aucune restriction ; pour usage commercial :)
| Catégorie | Modèles | Commercial ? |
|---|---|---|
| Apache 2.0 / MIT | Z-Image/Turbo, FLUX.2 klein 4B, FLUX.1 schnell, Qwen-Image/2512, ERNIE, HiDream (MIT), GLM (MIT), LongCat, Pixal3D, TRELLIS.2 (MIT), SkinTokens (MIT), Mesh2Motion | Oui |
| Plafonné par revenu | FLUX 3 Klein (<5M$ + filtres/révision), SD 3.5 (<1M$), Krea 2 (<1M$), Stable Fast 3D (<1M$) | Sous le seuil |
| Non commercial | FLUX.1 dev, FLUX.2 dev/klein 9B, Qwen-Image-2.1, Ideogram 4, HunyuanImage-3.0 (territorial) | Non |
| Recherche uniquement | CHORD (Ubisoft PBR), Marigold/Lotus (à vérifier) | Prototype uniquement |
Aussi : Steam exige une déclaration IA pour les jeux publiés. Les LoRAs de Civitai ont des licences individuelles. Le droit d'auteur américain exige une paternité humaine.
Ce qui est installé vs. pas installé
Installé : Z-Image Turbo, Nova Anime XL, Prefect Pony XL, Pixal3D, TRELLIS.2, MiniMax H3, ControlNet Union, BiRefNet, MoGe, DINOv3.
PAS installé (disponible sur demande) : SDXL base, FLUX, LoRAs pixel-art, SDXL ControlNet, H3 FL2VA, modèles d'upscale (ESRGAN/SeedVR2), LoRAs de texture, outils d'entraînement Kohya, Krita AI Diffusion, Aseprite/Pixelorama.
Références
D:\AI\SETUP_DOCUMENTATION.md— référence complète en 13 sectionsD:\AI\HANDOFF.md— référence rapide pour agent (procédures d'installation)D:\AI\PROJECTS.md— suivi de projetD:\AI\README.txt— référence rapide utilisateur- Dépôts de prompts : booru-prompt-gallery, sd-akashic, antisèche SupaGruen, modèles Dalabad, référence de style roblaughter, bibliothèque de prompts zsky