helloJamest/SkillBench

SkillBench é um framework de código aberto para avaliar e evoluir habilidades do Codex com geração de casos de avaliação, pontuação por juiz ou agente completo, painéis rastreáveis, gates de CI e loops de feedback no estilo GEPA para melhorar a documentação das habilidades.

O que é SkillBench?

SkillBench é uma plataforma de código aberto projetada para desenvolvedores que utilizam o Codex, permitindo a avaliação e evolução sistemática de suas habilidades (skills). Com ele, é possível gerar automaticamente casos de teste para avaliação, utilizando apenas um juiz (LLM) ou um agente completo para pontuar. O framework oferece painéis de controle rastreáveis para visualizar o progresso, além de gates de CI que impedem a implantação de habilidades com baixo desempenho. Inspirado pelo ciclo de feedback GEPA, o SkillBench fecha o loop entre avaliação e melhoria contínua, permitindo que os desenvolvedores refinem a documentação das habilidades com base em resultados objetivos. Ideal para equipes que buscam garantir qualidade e consistência em seus agentes de IA, o SkillBench se integra facilmente ao ecossistema Codex.

Funciona com~Claude Code✓Codex CLI~Cursor
npx skills add helloJamest/SkillBench

Installed? Explore more Programação e Desenvolvimento skills: steipete/bluebubbles, steipete/eightctl, steipete/blucli · View all 6 →

Perguntar na sua IA favorita

Abre um novo chat com esta habilidade de agente já pré-carregada.

Documentação

O que SkillBench faz?

SkillBench é um framework de código aberto para avaliar e evoluir habilidades do Codex com geração de casos de avaliação, pontuação por juiz ou agente completo, painéis rastreáveis, gates de CI e loops de feedback no estilo GEPA para melhorar a documentação das habilidades.

Habilidades Relacionadas