Sistema de Generación de Prompts para Videos de Compras con Avatar Digital Xiao Sheng en Jimeng
Objetivo de la Tarea
- Este Skill se utiliza para: generar prompts de video Jimeng para los videos promocionales con avatar digital del asistente Xiao Sheng.
- Capacidades incluidas:
- Colaboración de cuatro agentes inteligentes: Generador de Prompts, Controlador de Calidad, Mantenedor de la Base de Conocimiento, Adaptador Multiherramienta.
- Impulsado por fórmula de prompts: sujeto + movimiento + escena + (lenguaje de cámara + iluminación + atmósfera).
- Versión bilingüe (chino e inglés): adaptada a las necesidades de herramientas de IA internacionales.
- Garantía de consistencia: consistencia del personaje, coherencia visual, coherencia emocional.
- Reutilización inteligente de la base de conocimiento: recuperación directa para necesidades similares, optimización iterativa para nuevas demandas.
- Adaptación multiherramienta: integración con Suno para generación musical y generación de arte con IA.
- Condición de activación: el usuario necesita generar prompts para videos promocionales con avatar digital del asistente Xiao Sheng.
Preparación Previa
- No requiere dependencias especiales.
- Preparar la información del video promocional:
- Tipo de escena (recomendación de producto, comparación de precios, actividad promocional, etc.).
- Tono emocional (entusiasta, profesional, cercano, urgente, etc.).
- Duración del video (por defecto 5s).
- Número de escenas (por defecto 5).
Pasos Operativos
Flujo de Trabajo Estándar (Colaboración de Cuatro Agentes)
Paso 1: Alineación de Demanda y Verificación de la Base de Conocimiento (Agente 3: Mantenedor de la Base de Conocimiento)
Responsabilidad: Priorizar la verificación de la base de conocimiento. Recuperar directamente prompts para necesidades similares; iniciar colaboración para nuevas demandas.
- Identificación de demanda: identificar tipo de escena, tono emocional, número de escenas.
- Verificación de base de conocimiento: consultar si existe una plantilla de prompts para escenas similares.
- Reutilización directa: si hay coincidencia, recuperar y devolver los prompts.
- Gestión de nuevas demandas: si no hay coincidencia, pasar al Generador de Prompts para iniciar la creación.
Formato de salida:
{
"demand_type": "recomendación de producto/comparación de precios/actividad promocional",
"emotion_tone": "entusiasta/profesional/cercano/urgente",
"scene_count": 5,
"knowledge_base_match": "true/false",
"existing_prompts": "si coincide, devolver prompts existentes; si no, devolver null"
}
Paso 2: Generación de Prompts (Agente 1: Generador de Prompts)
Responsabilidad: Generar prompts Jimeng según la fórmula, siguiendo estrictamente la consistencia.
Fórmula de Prompts:
sujeto (descripción del sujeto) + movimiento + escena (descripción de la escena) + (lenguaje de cámara + iluminación + atmósfera)
Requisitos principales:
- Consistencia del sujeto: todas las escenas deben usar la misma descripción fija del personaje principal.
- Adaptabilidad emocional: iluminación y atmósfera deben coincidir con la emoción de cada escena.
- Versión bilingüe: generar versiones en chino e inglés.
- Detalles concretos: movimiento coherente, adaptado a videos cortos de 5s.
- Detalles extendidos: evitar problemas de discontinuidad contextual generados por IA independiente.
Formato de salida (por escena):
{
"scene_number": 1,
"scene_name": "nombre de la escena",
"duration": "5s",
"chinese_prompt": {
"subject": "descripción del sujeto",
"movement": "descripción del movimiento",
"scene": "descripción de la escena",
"shot_language": "lenguaje de cámara",
"light": "iluminación",
"atmosphere": "atmósfera",
"full_prompt": "prompt completo en chino"
},
"english_prompt": {
"subject": "Descripción del sujeto",
"movement": "Descripción del movimiento",
"scene": "Descripción de la escena",
"shot_language": "Lenguaje de cámara",
"light": "Iluminación",
"atmosphere": "Atmósfera",
"full_prompt": "Prompt completo en inglés"
},
"emotion_tone": "emoción adaptada",
"consistency_check": {
"character_description": "coincide con la descripción fija del personaje principal",
"visual_elements": "elementos visuales coherentes",
"emotion_progression": "progresión emocional natural"
}
}
Paso 3: Control de Calidad (Agente 2: Controlador de Calidad)
Responsabilidad: Verificar la coincidencia de plano, iluminación y emoción de los prompts.
Lista de verificación:
- Consistencia del sujeto: descripción uniforme del mismo personaje (edad, peinado, vestimenta, temperamento).
- Razonabilidad del plano: el lenguaje de cámara debe ajustarse a los requisitos de la escena.
- Coincidencia de iluminación: la iluminación debe adaptarse al tono emocional.
- Coherencia emocional: la progresión emocional de la primera a la quinta escena debe ser natural.
- Coherencia visual: las pistas visuales deben mantenerse a lo largo de las cinco escenas (tono de color, elementos de escena).
- Requisitos de IA para imágenes/video: detalles concretos, movimiento coherente, adaptado a videos cortos de 5s.
- Correspondencia bilingüe: las versiones en chino e inglés deben ser semánticamente coherentes.
Gestión de fallos:
- Si se detectan problemas de inconsistencia, retroalimentar al Generador de Prompts para ajuste.
- Máximo 2 retroalimentaciones para evitar iteraciones excesivas.
Formato de salida:
{
"quality_check": "pass/fail",
"check_results": {
"character_consistency": "pass",
"shot_language": "pass",
"light_matching": "pass",
"emotion_progression": "pass",
"visual_coherence": "pass",
"ai_requirement": "pass",
"translation_quality": "pass"
},
"issues": [],
"adjustment_needed": "false"
}
Paso 4: Archivo en la Base de Conocimiento (Agente 3: Mantenedor de la Base de Conocimiento)
Responsabilidad: Archivar la descripción fija del personaje y las plantillas de prompts para su reutilización.
Contenido del archivo:
- Descripción fija del personaje principal (asistente Xiao Sheng).
- Plantillas de prompts emocionales para cinco escenas.
- Versiones bilingües (chino e inglés).
- Índice de clasificación por escenas.
Formato de salida:
{
"archive_id": "identificador único",
"scene_type": "recomendación de producto/comparación de precios/actividad promocional",
"emotion_tone": "tono emocional",
"character_profile": {
"gender": "femenino",
"age": "aproximadamente 25 años",
"appearance": "descripción de apariencia",
"outfit": "descripción de vestimenta",
"temperament": "descripción de temperamento"
},
"prompt_templates": {
"scene_1": "plantilla de la escena 1",
"scene_2": "plantilla de la escena 2",
"scene_3": "plantilla de la escena 3",
"scene_4": "plantilla de la escena 4",
"scene_5": "plantilla de la escena 5"
},
"bilingual_version": "versiones en chino e inglés",
"tags": ["etiqueta1", "etiqueta2"]
}
Paso 5: Adaptación Multiherramienta (Agente 4: Adaptador Multiherramienta)
Responsabilidad: Integrar con Suno para generación musical y generación de arte con IA, asegurando que todos los prompts compartan un mismo origen.
Prompt musical Suno (por escena):
{
"scene_number": 1,
"music_style": "estilo musical",
"music_prompt": "prompt musical",
"emotion_match": "coincidencia emocional",
"instrumentation": "configuración de instrumentos",
"tempo": "ritmo",
"duration": "duración"
}
Prompt de arte con IA (imagen antes del movimiento):
{
"scene_number": 1,
"painting_prompt": "prompt de pintura",
"pre_action_description": "descripción de la imagen antes de la acción",
"visual_elements": "elementos visuales",
"composition": "composición",
"color_palette": "paleta de colores"
}
Formato de salida:
{
"cross_tool_prompts": {
"suno_music": {
"scene_1": {...},
"scene_2": {...},
"scene_3": {...},
"scene_4": {...},
"scene_5": {...}
},
"ai_painting": {
"scene_1": {...},
"scene_2": {...},
"scene_3": {...},
"scene_4": {...},
"scene_5": {...}
}
}
}
Ejemplo de Salida Completa
{
"metadata": {
"scene_type": "recomendación de producto",
"emotion_tone": "entusiasta y profesional",
"total_duration": "25s (5 escenas × 5s)",
"character": "asistente Xiao Sheng"
},
"scenes": [
{
"scene_number": 1,
"scene_name": "Apertura Atractiva",
"duration": "5s",
"chinese_prompt": {
"full_prompt": "Sujeto: Avatar digital femenino de aproximadamente 25 años, rostro ovalado, ojos almendrados con sonrisa, cabello rizado castaño claro a la altura de los hombros, tez clara, labios rosa claro, viste traje de chaqueta y falda gris claro ajustado, camisa blanca interior, tacones finos beige, collar de plata sencillo, temperamento profesional y accesible, gestos elegantes y naturales. Movimiento: Levanta lentamente la mano derecha apuntando hacia la derecha, postura erguida. Escena: Entorno de negocios moderno, fondo con estantería de productos, primer plano con documentos sencillos. Lenguaje de cámara: Plano medio fijo, fondo desenfocado, iluminación frontal. Iluminación: Luz suave cálida, brillante y nítida. Atmósfera: Entusiasta y profesional, que capta la atención."
},
"english_prompt": {
"full_prompt": "Subject: 25-year-old female digital human, oval face, almond eyes with smile, light brown shoulder-length curly hair, fair skin, light pink lips, wearing light gray tailored suit skirt, white shirt, beige pumps, simple silver necklace, professional and friendly temperament, elegant hand gestures. Movement: Slowly raise hand pointing to the right, upright posture. Scene: Modern business setting, product display shelf in background, simple documents in foreground. Shot: Medium fixed shot, bokeh background, front light. Light: Warm soft light, bright and clear. Atmosphere: Enthusiastic and professional, attention-grabbing."
},
"emotion_tone": "entusiasta y profesional",
"suno_music_prompt": "Música moderna alegre, ritmo ligero, piano + música electrónica, solo instrumental, creando una atmósfera entusiasta y profesional.",
"ai_painting_prompt": "Plano medio, iluminación frontal, luz suave cálida en entorno de negocios moderno, fondo de estantería de productos desenfocado, primer plano con documentos sencillos; avatar digital femenino de 25 años (rostro ovalado, ojos almendrados sonrientes, cabello rizado castaño claro a la altura de los hombros, traje de chaqueta y falda gris claro + camisa blanca + tacones beige, collar de plata), postura erguida, gesto a punto de señalar a la derecha, expresión entusiasta y profesional, imagen general brillante y nítida."
}
]
}
Índice de Recursos
Documentos de Referencia Necesarios
Definiciones de Roles de los Cuatro Agentes: Ver references/agent-roles.md
- Definiciones detalladas de roles, límites de capacidad y flujo de colaboración de los 4 agentes.
- Cuándo leer: al necesitar entender las responsabilidades y la lógica de colaboración de los agentes.
Explicación Detallada de la Fórmula de Prompts: Ver references/prompt-formula.md
- Explicación detallada de la fórmula de prompts, pasos de descomposición y ejemplos de uso.
- Cuándo leer: al necesitar generar prompts.
Mecanismo de Garantía de Consistencia: Ver references/consistency-guide.md
- Mecanismos detallados de garantía de consistencia del personaje, coherencia visual y coherencia emocional.
- Cuándo leer: al necesitar asegurar la consistencia de los prompts.
Descripción Fija del Personaje: Ver references/character-profile.md
- Descripción fija del personaje principal del asistente Xiao Sheng.
- Cuándo leer: al generar la descripción del sujeto en los prompts.
Plantillas de Escenas: Ver references/scene-templates.md
- Biblioteca de plantillas de cinco escenas para escenas monetarias.
- Cuándo leer: al necesitar generar prompts rápidamente.
Adaptación Multiherramienta: Ver references/cross-tool-adaptation.md
- Guía de adaptación para generación musical Suno y generación de arte con IA.
- Cuándo leer: al necesitar integrar otras herramientas.
Activos de Salida
Prompts de Ejemplo: Ver assets/examples/sample-prompts.md
- Ejemplos completos de escenas (recomendación de producto, comparación de precios, actividad promocional).
- Cuándo leer: al necesitar referencias de formato de salida específico.
Consideraciones
Principios de Generación de Prompts
- Seguir estrictamente la fórmula: sujeto + movimiento + escena + (lenguaje de cámara + iluminación + atmósfera).
- Correspondencia bilingüe: asegurar coherencia semántica para adaptarse a herramientas de IA internacionales.
- Detalles concretos: movimiento coherente, adaptado a la duración de videos cortos de 5s.
- Coincidencia emocional: iluminación y atmósfera deben coincidir estrictamente con el tono emocional.
Garantía de Consistencia
- Consistencia del personaje: todas las escenas deben usar la misma descripción fija del personaje principal.
- Coherencia visual: establecer pistas visuales consistentes a lo largo de las cinco escenas (tono de color, elementos de escena).
- Coherencia emocional: la progresión emocional de la primera a la quinta escena debe ser natural.
Uso de la Base de Conocimiento
- Priorizar la reutilización: recuperar directamente materiales de la base de conocimiento para necesidades similares.
- Archivo incremental: después de crear una nueva demanda, archivarla obligatoriamente en la base de conocimiento.
- Índice de clasificación: establecer índice por tipo de escena y tono emocional.
Adaptación Multiherramienta
- Diseño de mismo origen: los prompts musicales Suno y los prompts de arte con IA deben compartir el mismo origen que los prompts Jimeng.
- Unidad emocional: asegurar que el estilo musical y la textura visual coincidan emocionalmente con los prompts Jimeng.
- Compatibilidad de formato: generar formatos que cumplan con los requisitos de cada herramienta.
Ejemplos de Uso
Ejemplo 1: Prompts para Video de Recomendación de Producto
Necesidad del usuario: Generar prompts Jimeng para un video de recomendación de producto de 5 escenas.
Método de ejecución:
- Mantenedor de la Base de Conocimiento: verificar la base de conocimiento, encontrar plantillas coincidentes.
- Recuperación directa: devolver las plantillas de prompts de recomendación de producto existentes.
- Adaptador Multiherramienta: generar prompts musicales Suno y de arte con IA.
Parámetros clave:
- Tipo de escena: recomendación de producto
- Tono emocional: entusiasta y profesional
- Número de escenas: 5
- Duración del video: 25 segundos (5 escenas × 5 segundos)
Ejemplo 2: Prompts para Video de Comparación de Precios
Necesidad del usuario: Generar prompts Jimeng para un video de comparación de precios de 5 escenas.
Método de ejecución:
- Mantenedor de la Base de Conocimiento: verificar la base de conocimiento, no hay plantillas coincidentes.
- Generador de Prompts: generar nuevos prompts según la fórmula.
- Controlador de Calidad: verificar la calidad de los prompts.
- Mantenedor de la Base de Conocimiento: archivar en la base de conocimiento.
- Adaptador Multiherramienta: generar prompts musicales Suno y de arte con IA.
Parámetros clave:
- Tipo de escena: comparación de precios
- Tono emocional: objetivo y profesional
- Número de escenas: 5
- Duración del video: 25 segundos (5 escenas × 5 segundos)
Ejemplo 3: Prompts para Video de Actividad Promocional
Necesidad del usuario: Generar prompts Jimeng para un video de actividad promocional de 5 escenas.
Método de ejecución:
- Mantenedor de la Base de Conocimiento: verificar la base de conocimiento, encontrar plantillas similares.
- Recuperación de plantillas similares: ajustar ligeramente basándose en la plantilla existente.
- Generador de Prompts: generar prompts personalizados.
- Controlador de Calidad: verificar la calidad de los prompts.
- Mantenedor de la Base de Conocimiento: archivar la nueva versión.
- Adaptador Multiherramienta: generar prompts musicales Suno y de arte con IA.
Parámetros clave:
- Tipo de escena: actividad promocional
- Tono emocional: urgente y entusiasta
- Número de escenas: 5
- Duración del video: 25 segundos (5 escenas × 5 segundos)