Avaliar um lançamento de IA
Use o RAGOps como um avaliador determinístico. Trate seu resultado como evidência de lançamento, não como prova de que um sistema é universalmente correto ou seguro.
Fluxo de trabalho
- Identifique o cenário, as respostas ou traces candidatos, a linha de base aceita e os limites de política. Não invente artefatos faltantes.
- Leia
references/commands.mdao selecionar o comando RAGOps ou interpretar códigos de saída. - Inspecione as entradas em busca de segredos ou dados pessoais antes de executar uma avaliação. Mantenha os relatórios gerados privados, a menos que o usuário aprove o compartilhamento.
- Execute o comando mais restrito aplicável através de
python3 scripts/run_ragops.py ...a partir deste diretório da skill. - Interprete o código de saída
0como APROVADO e o código de saída2como um BLOQUEIO avaliado, não uma falha de execução. Trate outros códigos diferentes de zero como erros operacionais. - Relate a decisão, os portões falhados, os deltas de métricas materiais, as limitações de proveniência e a menor próxima ação.
Diretrizes
- Não enfraqueça limites, substitua a linha de base aceita ou omita casos com falha para obter uma aprovação.
- Não afirme correção semântica quando apenas verificações lexicais ou de citação foram executadas.
- Não execute avaliação baseada em provedor a menos que o usuário forneça e autorize explicitamente a configuração do provedor.
- Não publique, mescle, crie tag ou implante baseando-se apenas na saída desta skill.
- Preserve os artefatos de entrada e os parâmetros de comando na evidência final para que outro revisor possa reproduzir o resultado.
Saída
Retorne uma recomendação de lançamento concisa com: decisão, evidências, portões_falhados, limitações e próxima_ação.