manykarim/robotframework-agenteval

robotframework-agenteval とは？

このRobot Frameworkライブラリは、AIコーディングエージェント（スキル、サブエージェント、フック、MCPサーバー、ツールなど）の評価を自動化するためのツールです。開発者はこのライブラリを使用して、Claude Code、Cursor、CodexなどのAIエージェントのパフォーマンスをテストおよび検証できます。Robot Frameworkのテスト構文に基づいて動作し、エージェントの行動を検証するためのテストケースを作成できるため、CI/CDパイプラインに統合して継続的な評価が可能です。Apache-2.0ライセンスのオープンソースプロジェクトであり、カスタムテストケースの作成や既存のテストスイートへの組み込みを容易にする柔軟な設計が特徴です。