manykarim/robotframework-agentguard

Biblioteca Robot Framework para testar servidores MCP, Skills de Agente, Hooks, SubAgentes e CLIs de agentes de codificação — independente de provedor via LiteLLM, correspondência de chamadas de ferramentas de nível BFCL, N≥10 estatístico por padrão.

O que é robotframework-agentguard?

O manykarim/robotframework-agentguard é uma biblioteca especializada do Robot Framework projetada para testar rigorosamente sistemas de agentes de IA. Ela permite validar servidores MCP (Model Context Protocol), skills de agentes (como as do Claude Code, Cursor, Codex), hooks, subagentes e CLIs de agentes de codificação. A biblioteca é independente de provedor de modelo de linguagem, utilizando o LiteLLM para se conectar a diferentes provedores, garantindo flexibilidade. Para assegurar alta precisão na validação, ela emprega uma correspondência de chamadas de ferramentas de nível BFCL (Berkeley Function Calling Leaderboard), que verifica se o agente invocou exatamente as ferramentas e argumentos corretos. Por padrão, cada teste é executado estatisticamente N≥10 vezes para garantir resultados confiáveis e representativos, mitigando a variabilidade inerente aos modelos de IA. Suporta plataformas como Claude Code, Cursor, Codex e outras interfaces de linha de comando, facilitando a integração contínua e a garantia de qualidade em pipelines de desenvolvimento de software.

Funciona com~Claude Code~Codex CLI~Cursor
npx skills add manykarim/robotframework-agentguard

Installed? Explore more Programação e Desenvolvimento skills: steipete/bluebubbles, steipete/eightctl, steipete/blucli · View all 6 →

Perguntar na sua IA favorita

Abre um novo chat com esta habilidade de agente já pré-carregada.

Documentação

O que robotframework-agentguard faz?

Biblioteca Robot Framework para testar servidores MCP, Skills de Agente, Hooks, SubAgentes e CLIs de agentes de codificação — independente de provedor via LiteLLM, correspondência de chamadas de ferramentas de nível BFCL, N≥10 estatístico por padrão.

Habilidades Relacionadas