Communitygithub.com

vukhanhtruong/claude-eval-plugin

Um conjunto de habilidades do Claude Code para avaliar aplicações LLM de ponta a ponta: prompts, pipelines RAG, chamadas de ferramentas e agentes. Projetado para engenheiros de prompt, construtores de IA e equipes que desejam um ciclo repetível de 'editar → avaliar → ver pontuações → melhorar' em vez de iteração baseada em intuição.

O que é claude-eval-plugin?

Este repositório oferece uma coleção de habilidades especializadas para o Claude Code, focadas na avaliação de ponta a ponta de aplicações baseadas em grandes modelos de linguagem (LLMs). A ferramenta suporta a avaliação de prompts, pipelines de Retrieval-Augmented Generation (RAG), chamadas de ferramentas e agentes autônomos. Seu principal objetivo é substituir o desenvolvimento baseado em intuição e tentativa e erro por um ciclo de feedback estruturado e repetível: editar código, executar avaliações, visualizar métricas de desempenho e refinar a aplicação. A utilidade reside em fornecer um método sistemático para melhorar a qualidade e confiabilidade de sistemas de IA, permitindo que engenheiros de prompt e desenvolvedores AI tomem decisões baseadas em dados, acelerando o processo de refinamento e evitando a dependência de avaliações subjetivas. A execução ocorre diretamente via integração com o Claude Code, interpretando as instruções das habilidades para conduzir as avaliações de forma estruturada.

Funciona com✓Claude Code~Codex CLI~Cursor
npx skills add vukhanhtruong/claude-eval-plugin

Perguntar na sua IA favorita

Abre um novo chat com esta habilidade de agente já pré-carregada.

Documentação

O que claude-eval-plugin faz?

Uma coleção de habilidades do Claude Code para avaliar aplicações LLM de ponta a ponta: prompts, pipelines RAG, chamadas de ferramentas e agentes. Projetado para engenheiros de prompt, construtores de IA e equipes que desejam um ciclo repetível de "editar → avaliar → ver pontuações → melhorar" em vez de iteração baseada em intuição.

Habilidades Relacionadas