CommunityCodierung & Entwicklunggithub.com

helloJamest/SkillBench

SkillBench ist ein Open-Source-Framework zur Bewertung und Weiterentwicklung von Codex-Fähigkeiten mit Eval-Case-Generierung, reinem-Richter-/Voll-Agent-Scoring, nachvollziehbaren Dashboards, CI-Gates und GEPA-ähnlichen Rückkopplungsschleifen zur Verbesserung von Skill-Dokumentationen.

Was ist SkillBench?

SkillBench ist ein Open-Source-Framework, das speziell für die Evaluierung und iterative Verbesserung von Codex-Skills entwickelt wurde. Es unterstützt Entwickler dabei, automatisierte Eval-Cases zu generieren, um die Qualität ihrer Skills zu messen. Das Framework bietet zwei Bewertungsmodi: 'Judge-only', bei dem ein spezialisierter Richter die Ausgabe bewertet, und 'Full-agent', bei dem ein vollständiger KI-Agent die Aufgabe ausführt. Mit nachvollziehbaren Dashboards und CI-Gates können Teams Fortschritte verfolgen und Qualitätsschwellen in ihre CI/CD-Pipelines integrieren. Der GEPA-ähnliche Feedback-Mechanismus analysiert Ergebnisse und schlägt gezielte Verbesserungen für die Skill-Dokumentation vor, was einen kontinuierlichen Kreislauf aus Bewertung und Optimierung ermöglicht.

Funktioniert mit~Claude Code✓Codex CLI~Cursor
npx skills add helloJamest/SkillBench

Installed? Explore more Codierung & Entwicklung skills: steipete/bluebubbles, steipete/eightctl, steipete/blucli · View all 6 →

In Ihrer bevorzugten KI fragen

Öffnet einen neuen Chat, in dem dieser Agent-Skill bereits geladen ist.

Dokumentation

Was macht SkillBench?

SkillBench ist ein Open-Source-Framework zur Bewertung und Weiterentwicklung von Codex-Fähigkeiten mit Eval-Case-Generierung, reinem-Richter-/Voll-Agent-Scoring, nachvollziehbaren Dashboards, CI-Gates und GEPA-ähnlichen Rückkopplungsschleifen zur Verbesserung von Skill-Dokumentationen.

Verwandte Skills