CommunityPesquisa e Análise de Dadosgithub.com

maximussthegreat/agent-skill-bench

Teste de referência para avaliar se as habilidades de agentes realmente melhoram tarefas de pesquisa e engenharia.

O que é agent-skill-bench?

O Agent Skill Bench é uma ferramenta de benchmarking projetada para avaliar objetivamente se as habilidades (skills) de agentes de IA realmente trazem melhorias mensuráveis em tarefas de pesquisa e engenharia. Ele permite que desenvolvedores e pesquisadores comparem o desempenho de agentes com e sem habilidades específicas, ajudando a validar a eficácia de cada skill. A ferramenta suporta ambientes de agentes como Claude Code, Cursor e Codex, e executa testes padronizados que medem métricas como precisão, tempo de conclusão e sucesso na resolução de problemas. Com isso, o Agent Skill Bench fornece dados concretos para orientar a seleção e o desenvolvimento de habilidades de agentes, evitando suposições subjetivas.

Funciona com~Claude Code~Codex CLI~Cursor
npx skills add maximussthegreat/agent-skill-bench

Installed? Explore more Pesquisa e Análise de Dados skills: affaan-m/uspto-database, affaan-m/scholar-evaluation, affaan-m/literature-review · View all 6 →

Perguntar na sua IA favorita

Abre um novo chat com esta habilidade de agente já pré-carregada.

Documentação

O que agent-skill-bench faz?

Teste de referência para avaliar se as habilidades de agentes realmente melhoram tarefas de pesquisa e engenharia.

Habilidades Relacionadas