adewale/skill-eval-harness

Banc d'essai pour évaluer les compétences d'un agent avec variantes appairées, artefacts de traces et adaptateurs d'exécution.

Qu'est-ce que skill-eval-harness ?

Le skill « adewale/skill-eval-harness » est un banc d'essai conçu pour évaluer les compétences d'un agent IA (comme Claude Code, Cursor ou Codex) en utilisant des variantes appairées (materialized ablations), des artefacts de traces et des adaptateurs d'exécution. Il permet de tester l'impact de modifications ciblées sur le comportement de l'agent, en fournissant un cadre reproductible et automatisé. Le skill s'appuie sur des règles de sévérité (Blocking, Minor, Clean) et une checklist de révision partagée pour garantir la qualité des évaluations. Les artefacts de traces permettent de conserver un historique des sessions d'évaluation, tandis que les adaptateurs d'exécution facilitent l'intégration avec différents environnements d'exécution (locaux ou distants). Ce skill est utile aux développeurs et aux équipes d'IA qui souhaitent valider l'efficacité de leurs compétences d'agent avant de les déployer dans des workflows réels.

Compatible avec~Claude Code~Codex CLI~Cursor
npx skills add adewale/skill-eval-harness

Installed? Explore more Développement et programmation skills: steipete/bluebubbles, steipete/eightctl, steipete/blucli · View all 6 →

Demander à votre IA préférée

Ouvre une nouvelle conversation avec cette compétence d'agent déjà préchargée.

Documentation

Révision de Démonstration

Un skill délibérément minuscule qui existe uniquement pour démontrer le banc d'essai de bout en bout (avec ablations matérialisées incluses). Il comporte exactement deux éléments porteurs — une règle de sévérité et une référence de checklist — chacun ciblé par une ablation ci-dessous.

Règles de sévérité

Étiquetez chaque constat avec l'un des éléments suivants : Bloquant, Mineur ou Propre. Indiquez l'étiquette explicitement afin que le lecteur puisse trier en un coup d'œil. Une modification qui est livrée sans test est au moins Bloquant.

Preuve

Étayez chaque constat par une preuve concrète et suivez la checklist de révision partagée : voir la checklist de révision.

Skills associés