CommunityPesquisa e Análise de Dadosgithub.com

agentscope-ai/OpenJudge

OpenJudge: Um framework unificado para avaliação holística e recompensas de qualidade

O que é OpenJudge?

OpenJudge é um framework unificado para avaliação holística de agentes de IA e sistemas, fornecendo recompensas de qualidade. Ele permite avaliar habilidades de agentes (como Claude Code, Cursor, Codex) em múltiplas dimensões, incluindo geração de código, planejamento, raciocínio e interação com ferramentas. A ferramenta suporta métricas customizáveis, pipelines de avaliação e escalabilidade para diferentes ambientes de agentes. Ele funciona definindo benchmarks, coletando resultados e calculando pontuações de qualidade, o que ajuda desenvolvedores a comparar agentes e melhorar seu desempenho de forma sistemática.

Funciona com~Claude Code~Codex CLI~Cursor
npx skills add agentscope-ai/OpenJudge

Installed? Explore more Pesquisa e Análise de Dados skills: affaan-m/uspto-database, affaan-m/scholar-evaluation, affaan-m/literature-review · View all 6 →

Perguntar na sua IA favorita

Abre um novo chat com esta habilidade de agente já pré-carregada.

Documentação

O que OpenJudge faz?

OpenJudge: Um framework unificado para avaliação holística e recompensas de qualidade

Habilidades Relacionadas