heygen-com/skills

Que fait skills ?

Traduisez et doublez une vidéo dans une autre langue avec clonage vocal et synchronisation labiale, grâce à HeyGen Video Translation. Le présentateur garde son visage, sa voix est clonée dans la langue cible, et les lèvres se resynchronisent sur le nouvel audio — les spectateurs voient la même personne parler couramment. À utiliser lorsque : (1) vous localisez une vidéo existante dans une ou plusieurs langues ("traduis cette vidéo en espagnol", "fais-la en français et en allemand", "double-la en japonais", "j'ai besoin de 10 langues pour un lancement"), (2) vous souhaitez adapter rapidement une présentation filmée pour un public multilingue sans refaire le tournage, (3) vous voulez maintenir la présence naturelle du locuteur original tout en atteignant des spectateurs de différentes régions.

Fonctionnement

1. Analyse vidéo – La vidéo source est analysée pour reconnaître le locuteur et extraire les caractéristiques vocales et faciales.
2. Clonage vocal – Un modèle de voix personnalisé est créé à partir d'échantillons audio de la vidéo d'origine, garantissant une intonation et un rythme fidèles.
3. Traduction – Le script audio est transcrit et traduit dans la ou les langues cibles, avec une optimisation contextuelle pour le doublage.
4. Synthèse audio – Le texte traduit est synthétisé avec la voix clonée, produisant un discours naturel dans la langue cible.
5. Synchronisation labiale – L'audio synthétisé est synchronisé avec les mouvements labiaux du locuteur, donnant l'illusion qu'il parle la langue cible.
6. Exportation – La vidéo finale est assemblée et rendue disponible au téléchargement ou à l'intégration.

Configuration requise

• Clé API – Une clé d'API HeyGen configurée via la variable d'environnement HEYGEN_API_KEY.
• Identité – Un face_id ou une identité préenregistrée (via le module identity) ou le paramètre no_face_id pour les nouvelles vidéos.
• Langues – Un dictionnaire de codes de langue vers des noms compréhensibles, comme {es: "Spanish", fr: "French"}.

Utilisation avec l'agent

1. Initialisation – L'agent vérifie la clé API et le dossier de sortie.
2. Téléchargement – Télécharge la vidéo source (via une URL ou un fichier local) et la soumet au service HeyGen.
3. Traduction – Spécifie les langues cibles (par exemple "fr" pour le français).
4. Traitement – Attend la fin du doublage (vérifie périodiquement l'état).
5. Réponse – Fournit un lien de téléchargement ou enregistre localement la vidéo finale.

Exemples

Agent, traduis cette vidéo YouTube en français et en allemand : <URL>

J'ai besoin de cette vidéo en espagnol, italien et portugais pour le lancement.

Double cette présentation en japonais avec la voix du locuteur.

Notes importantes

• La qualité du clonage vocal dépend de la clarté de l'audio original.
• Chaque doublage peut prendre plusieurs minutes selon la durée de la vidéo et le nombre de langues.
• Certains dialectes ou variations régionales peuvent ne pas être parfaitement reproduits.
• Pour des résultats optimaux, utilisez une vidéo avec un seul locuteur et un fond sonore minimal.

Référence

• Documentation HeyGen Video Translation
• Guide de l'API de traduction