CommunityPesquisa e Análise de Dadosgithub.com

dave-wind/auto_train_skills

Aplica loops de treinamento de ML à engenharia de prompt — execute avaliações, avalie saídas com LLM e monitore taxas de aprovação para melhorar iterativamente as habilidades do Claude Code.

O que é auto_train_skills?

Esta skill permite que desenvolvedores que utilizam o Claude Code apliquem conceitos de aprendizado de máquina (ML) na engenharia de prompts de forma automatizada e iterativa. Ela fornece um sistema para executar avaliações (evals) em respostas geradas por modelos de linguagem (LLMs), pontuar a qualidade dessas saídas usando o próprio LLM como avaliador (LLM-grading) e acompanhar métricas como taxas de aprovação (pass rates) ao longo do tempo. Com base nos resultados, é possível refinar prompts, testar variações e medir melhorias de maneira sistemática, similar a um ciclo de treinamento supervisionado. Suporta a plataforma Claude Code, integrando-se diretamente ao fluxo de trabalho de desenvolvimento de habilidades (skills) para agentes de IA. É útil para engenheiros de prompt e desenvolvedores que desejam otimizar prompts de forma data-driven, garantindo que modificações levem a ganhos reais de desempenho.

Funciona com✓Claude Code~Codex CLI~Cursor
npx skills add dave-wind/auto_train_skills

Installed? Explore more Pesquisa e Análise de Dados skills: affaan-m/uspto-database, affaan-m/scholar-evaluation, affaan-m/literature-review · View all 6 →

Perguntar na sua IA favorita

Abre um novo chat com esta habilidade de agente já pré-carregada.

Documentação

O que auto_train_skills faz?

Aplica loops de treinamento de ML à engenharia de prompt — execute avaliações, avalie saídas com LLM e monitore taxas de aprovação para melhorar iterativamente as habilidades do Claude Code.

Habilidades Relacionadas