Communitygithub.com

video-vfx-3060-12gb-local

Sélectionne, optimise et débogue les pipelines locaux de génération vidéo IA, rotoscopie, matting, couche de normales, camera tracking 3D, colorimétrie OCIO/ACES 2.0, audio/Foley IA, OBS Spout2, TouchDesigner/Blender en direct, VSR et déchargement JS, strictement ajustés au matériel RTX 3060 12 GB VRAM + Ryzen 9 5900X + 32 GB RAM sous Windows 11.

Qu'est-ce que video-vfx-3060-12gb-local ?

Cette compétence est conçue pour les artistes VFX et développeurs travaillant localement avec un PC Windows 11 équipé d'une RTX 3060 (12 Go VRAM), d'un Ryzen 9 5900X et 32 Go de RAM. Elle fournit des règles strictes et des workflows optimisés pour exécuter des modèles de génération vidéo (Wan2GP, LTX, FramePack), de la rotoscopie (SAM 2/3, MatAnyone 2), des couches de normales (NormalCrafter, DAViDNormals), du camera tracking 3D (COLMAP, CoTracker3), de la colorimétrie ACES/AgX, du Foley audio (MMAudio), des simulations de feu/fluides GPU (Navier-Stokes, Mantaflow), et de l'upscaling (SeedVR2, FlashVSR). Elle intègre des scripts Python, des configurations TouchDesigner et Blender, et évite les pièges courants de Windows 11 (bugs de pip, limitations VRAM/RAM). Son approche par « portes quantitatives » (4 Gates) garantit la qualité technique des rendus : précision des normales, dynamique HDR, cohérence du mouvement et fidélité des couleurs.

Compatible avec~Claude Code~Codex CLI~Cursor✓Antigravity
npx skills add https://github.com/Leopoldoleoncancino/video-vfx-ai-bible/tree/main/skills/video-vfx-3060-12gb-local

Demander à votre IA préférée

Ouvre une nouvelle conversation avec cette compétence d'agent déjà préchargée.

Documentation

Compétence d'optimisation vidéo et VFX locale (RTX 3060 12 Go / 32 Go RAM / Win 11)

Quand appliquer cette compétence

Activez-la chaque fois que l'utilisateur demande d'installer, choisir des modèles, construire des flux ComfyUI/Wan2GP, rotoscoper, extraire une couche de normales, faire du camera tracking 3D, configurer la colorimétrie OCIO, générer du Foley/sous-titres/TTS, connecter TouchDesigner + Blender + OBS, simuler des fluides/feu GPU ou faire de l'upscaling/motion local sous Windows 11.

Règles strictes matérielles (À ne pas enfreindre)

  1. Limite de VRAM (12 Go GDDR6 Ampere sm_86) :
    • La RTX 3060 n'a pas de Tensor Cores FP8 natifs (sm_86 < 8.9) : interdit d'activer fp8_fast ou torch.compile sur e4m3fn dans WanVideoModelLoader ; utilisez base_precision="bf16", quantization="disabled", attention_mode="sageattn"/"sdpa", des poids GGUF (Q3_K_M 8.64 Go / Q4_K_S 10.55 Go / Q5_K_M) ou INT8 (quanto/mmgp).
    • Ne conservez jamais deux modèles de diffusion/VLM lourds résidents en VRAM en même temps : exécutez par phases séquentielles avec VRAM_Debug (unload_all_models=true, empty_cache=true, gc_collect=true) et réglez "max_mem_frames": 5 dans comfy-matanyone2/config.py.
  2. Limite de RAM système (32 Go — ~22–24 Go libres réels sous Windows 11) :
    • Évitez de laisser résident UMT5-XXL FP16 (~9.5 Go) ou Gemma en RAM avec des experts A14B : utilisez WanVideoTextEncodeCached (use_disk_cache=true), des versions GGUF Q4/Q5 (ou flux_empty_embed.pt dans Lotus-2) et fermez Premiere, AE, Blender lourd et Chrome avant les longs batches (fixez un Pagefile NVMe >=32 Go).
  3. Stratégie de résolution, FPS & tests R&D (33f -> 167f avec 4 portes quantitatives) :
    • Pour les plans de feu/VFX sur anatomie, exécutez d'abord le découpage critique de 33 images (job_33f) en validant les 4 portes quantitatives avec scripts/vfx_rd_metrics_eval.py :
      • Porte 0 : ‖N‖ ∈ [0.99, 1.01], fringe_delta_l < 0.03 sur les mèches noires (vfx_dual_matte_decontam.py).
      • Porte 1 : gain sur le poing noir <= 1.15x, contraste SSDO >= 3.5:1 (invert_normal_y=True avec NormalCrafter) et bureau blanc CIEDE2000 <= 1.5.
      • Porte 2 : pic HDR linéaire >= 4.0, pastel_yellow_clip_pct <= 1.0%, salmon_wash_pct <= 2.0% (en utilisant Stephen Hill ACES Filmic RRT+ODT ou PyOpenColorIO AgX Punchy + compose_hdr_on_plate_srgb, jamais m_inset simple) et bruit/MTF ±12%.
      • Porte 3 (Couplage mouvement↔feu) : lag_correlation >= 0.45 et mean_wake_deflection_px >= 1.2 px entre v_hand_world = v_hand_screen - v_cam et la traînée de la plume supérieure (en rejetant les feux procéduraux stateless rigides).
    • Pour I2V/T2V général, générez en 640x360 ou 832x480 à 16 fps (81 images ≈ 5s), mettez à l'échelle avec SeedVR2 (3B + block_swap) ou FlashVSR (tiling) et doublez les FPS à la fin avec Practical-RIFE avant d'ajouter le grain final.
  4. Pièges réels de Windows 11 + ComfyUI Portable (python_embeded -s) :
    • MatAnyone2 échoue lors de pip install à cause d'un bug de hatchling (matanyone2/config/__init__.py dupliqué) ➔ copiez le dossier matanyone2/ directement dans python_embeded\Lib\site-packages\.
    • transformers 5.9.0 lance KeyError: 'flash_attn' dans import_utils.py avec des stubs ➔ utilisez .get("flash_attn", []).
    • python_embeded -s ignore --user ➔ installez OpenEXR, PyOpenColorIO, pymatting toujours avec --target python_embeded\Lib\site-packages.
  5. Règle de déchargement JS/CPU & passes linéaires :
    • Si un élément est un HUD, du texte cinétique, un catalogue de vêtements ou de la 3D légère WebGL, rendez-le avec JavaScript (Remotion ProRes 4444 Alpha, Motion Canvas, GSAP, Three.js + Playwright) sur les 24 threads du Ryzen 9 5900X ou en direct via Web Render TOP (TD 2025.31550+) plutôt que de consommer de la VRAM de diffusion.
    • Conservez les passes techniques (Normal, Depth, Roughness) toujours en Non-Color / Raw EXR 16F/32F linéaire en dehors des courbes gamma sRGB. N'utilisez PAS FrequencyCombineMEC sur du feu HDR >1.0 car il rogne à [0, 1] SDR.

Sélection rapide par cas d'usage

  • Facilité / Multi-modèle "GPU Pauvre" : Wan2GP (deepbeepmeep/WanGP) avec moteur mmgp + INT8.
  • Vidéo avec Audio natif : LTX-2.3 / LTX-2.5 quantifié (GGUF Q3_K_M/Q4_K_M) ou LTX-Desktop.
  • Plans I2V longs (>10s anti-dérive) : FramePack (lllyasviel/FramePack).
  • Rotoscopie de cheveux/tissu & Matte Dual : SAM 2 / SAM 3 (SegmentC2C) ➔ MatAnyone 2 (max_mem_frames=5) ➔ MatteDesk (ForegroundDecontaminate) / scripts/vfx_dual_matte_decontam.py ➔ ProRes 4444 Straight Alpha.
  • Effacement d'objets + ombres + reflets : EffectErase (FudanCVL/EffectErase) ou ProPainter (pour câbles/marques rigides).
  • Camera Tracking 3D / Matchmoving / Point Tracking : Longue vidéo IA ➔ Depth-Anything-3 (DA3-Streaming) ou Pi3X (disable_multimodal()) ou VGGT-1B (export COLMAP) ; occlusions ➔ CoTracker3 / AllTracker ; matchmoving sub-pixel ➔ Blender Tracker / COLMAP (GLOMAP intégré ; colmap/glomap déprécié) ; 1 photo ➔ perarnia/fSpy.
  • Couche de Normales (Temps réel <25 ms) : DAViDNormals.tox (~10 ms dans td-native-inference ➔ Relight.tox), TouchDesigner MRT GLSL (scripts/td_mrt_normal_pass.frag), Blender View/World Normal AOV (scripts/blender_normal_pass_setup.py) via Spout2 ou Depth-to-Normal (scripts/td_depth_to_normal.frag).
  • Couche de Normales (Post-production VFX) : NormalCrafter --max-res 512 (~6 Go, VizClickNormalCrafter + VizClickNormalTemporalStabilizer), Lotus SD2.1 (~4–8 Go batch rapide), Lotus-2 FLUX GGUF (~8–11 Go micro-détail en stills), StableNormal-turbo + StableDelight (~6–9 Go), MoGe-2/3, DeepBump. Exporter en Camera Space OpenGL +Y vers le haut en EXR 16F/32F linéaire (FXTD-Studios/radiance / ComfyUI-ACES-IO).
  • Colorimétrie OCIO (ACES 2.0 / AgX) : Blender 5 (ACES 2.0/AgX - Punchy) · TouchDesigner (OpenColorIO TOP : sRGB - Texture ➔ Linear) · DaVinci Resolve (ACEScct / ACES 2.0) · ComfyUI (RadianceACES2OutputTransformFull ; le checkpoint RUDRA est non-commercial) · Python (aces_hill_filmic_tonemap / ocio_agx_tonemap + compose_hdr_on_plate_srgb dans scripts/vfx_ssdo_relight_16f.py).
  • Audio IA, Foley & Sous-titres : Foley synchronisé sur image ➔ hkchengrex/MMAudio (~6 Go fp16, poids CC-BY-NC-4.0) ; sous-titres synchronisés mot à mot ➔ WhisperX (<8 Go) ; nettoyage CPU gratuit ➔ DeepFilterNet ; stems ➔ python-audio-separator / Demucs ; TTS ➔ Chatterbox / F5-TTS / Kokoro (82M).
  • Face VFX & OBS Live : Retouche/regard naturel ➔ KlingAIResearch/LivePortrait (~4–8 Go) ; swap ➔ ReActor + CodeFormer (0.7–0.8, avertissement 128px) ; capture GPU 60 FPS ➔ obs-spout2-plugin + royshil/obs-mcp (4455).
  • TouchDesigner + Blender en Direct (Module C) : TouchDesigner/TDMCP (http://127.0.0.1:13316/mcp, "serverUrl" dans Antigravity) + TDMCPSkills (19 compétences td-*) ou Embody/Envoy (YAML TDXN) ; séparez les Modes VRAM 1 (Spout2 + StreamDiffusionTD), 2 (GVHMR ~4.2 Go ➔ Blender mcp-for-blender) et 3 (POPs + 3DGS).
  • Feu / Énergie VFX sur Anatomie, Fluide GPU Incompressible & Relighting PBR (Module A Phase 2.5 / Workflow 4 · Route G & B) :
    1. Bus Commun 16F (~60s/33f) : vfx_dual_matte_decontam.py (matte_skin vs matte_fabric) + NormalCrafter 512px + DepthAnything V2/DA3.
    2. Simulation Physique avec Inertie Réelle (Porte 3) :
      • Option GPU Directe (< 1 Go VRAM, < 1 min) : scripts/vfx_incompressible_fire_sim.py (Navier-Stokes incompressible avec projection de pression Red-Black SOR, compensation de caméra RANSAC Homography / LK, advection BFECC clamped, Vorticity Confinement, langues Curl advectées, étincelles Lagrangiennes et Occlusion Z-Buffer Continue Front/Back). Alternatives compatibles : taichi-dev/taichi / tum-pbs/PhiFlow.
      • Option 3D Volumétrique (Route C) : scripts/wilor_mano_to_blender_abc.py --enable-mantaflow (ferme le bord ouvert du poignet MANO avec cap_open_mesh_watertight pour une émission surfacique continue velocity_factor=1.25 + shader Lame Fine Blackbody Density=0.02 + collisionneur Proxy_Black_Cuff, ou export .abc vers JangaFX EmberGen / LiquiGen [OK-12GB]). N'émettez jamais depuis des sphères lâches sur les landmarks.
    3. Relighting PBR Couplé + Motion Blur 180° + Tone Map sans Lavande Saumon : scripts/vfx_ssdo_relight_16f.py (invert_normal_y=True, pyramide MIP build_fire_irradiance_pyramid + extract_dynamic_lights_from_fire, apply_velocity_motion_blur shutter=0.5 et compose_hdr_on_plate_srgb avec Stephen Hill ACES / PyOpenColorIO AgX Punchy).
  • Accélération Windows : woct0rdho/triton-windows + woct0rdho/SageAttention + TeaCache.

Skills associés