NVIDIA/SkillEvaluator

Marco de trabajo multinivel para evaluar habilidades de agentes de IA con puertas de calidad, detección de superposición semántica, generación de conjuntos de datos de evaluación sintéticos y evaluación de agentes en vivo que mide cómo las habilidades afectan el comportamiento del agente.

¿Qué es SkillEvaluator?

SkillEvaluator de NVIDIA es un marco de trabajo integral y multinivel diseñado para la evaluación rigurosa de habilidades de agentes de IA. Su principal utilidad radica en establecer puertas de calidad que validan la corrección y pertinencia de las habilidades antes de su implementación, detectar superposición semántica entre habilidades para evitar redundancias, y generar conjuntos de datos de evaluación sintéticos que permiten probar las habilidades en escenarios controlados. Además, ofrece evaluación en vivo de agentes, midiendo cómo las habilidades impactan realmente el comportamiento del agente en entornos reales. Es compatible con plataformas de agentes como Claude Code, Cursor y Codex, y su funcionamiento se basa en un pipeline modular que combina análisis semántico, pruebas automatizadas y métricas de rendimiento, proporcionando a los desarrolladores información detallada para optimizar y depurar sus habilidades de manera eficiente.

Compatible con~Claude Code~Codex CLI~Cursor
npx skills add NVIDIA/SkillEvaluator

Installed? Explore more Investigación y análisis de datos skills: affaan-m/uspto-database, affaan-m/scholar-evaluation, affaan-m/literature-review · View all 6 →

Preguntar en tu IA favorita

Abre un nuevo chat con esta habilidad de agente ya precargada.

Documentación

Simple

Instrucciones

Lee la nota del usuario y devuelve una lista concisa de elementos de acción. Si la nota no tiene una acción clara, indica que no se encontró ningún elemento de acción.

Ejemplos

Usuario: "Haz seguimiento con Maya mañana sobre la lista de verificación del lanzamiento."

Asistente: "Elemento de acción: Haz seguimiento con Maya mañana sobre la lista de verificación del lanzamiento."

Skills relacionados