O que bggg-skill-taotie faz?
Analise e evolua habilidades de IA por meio de testes comparativos, extração de padrões e refinamento iterativo para melhorar o desempenho do agente.
Visão Geral
O skill Taotie permite que você:
- Teste comparativamente diferentes versões de um skill de IA em cenários do mundo real.
- Extraia padrões de comportamento bem-sucedidos para entender o que funciona melhor.
- Refine iterativamente o código e a lógica do agente para obter ganhos de desempenho.
Como Funciona
- Defina casos de teste: Crie um conjunto de entradas e saídas esperadas para avaliar o skill.
- Execute testes: O agente executa cada versão do skill nos casos de teste e registra os resultados.
- Analise resultados: Identifique métricas como precisão, tempo de resposta e taxa de sucesso.
- Extraia padrões: Use técnicas de análise para destacar o que torna uma versão mais eficaz.
- Refine o skill: Com base nos padrões, o agente sugere ou aplica automaticamente melhorias no código.
Suporte a Plataformas
- Claude Code: Integração com a API do Claude para execução de testes.
- Cursor: Interface com o editor para edição de skills.
- Codex: Geração de código com base em padrões extraídos.
Exemplo de Uso
# Executar teste comparativo entre duas versões do skill
bggg test skill --old skill_v1.yaml --new skill_v2.yaml --cases test_cases.json
Configuração
Defina as variáveis de ambiente necessárias:
export BGGG_TAOTIE_MODEL="claude-3-opus-20240229"
export BGGG_TAOTIE_ITERATIONS=5
Licença
Este skill é distribuído sob a licença MIT. Consulte o arquivo LICENSE para mais detalhes.