AI-Skill-builder は何をしますか?
OpenClawスキルビルダー、スカウト、およびMLEエージェント向け二段階A/B評価フレームワーク
このプロジェクトは、OpenClaw互換のAIエージェントスキルを構築、探索、評価するためのツールセットを提供します。特に、MLエンジニアリング(MLE)エージェントを対象とした二段階のA/B評価フレームワークが含まれています。
はじめに
スキルビルダーを使用すると、テンプレートから新しいスキルを迅速に作成できます。スカウツ機能は既存のスキルをリポジトリから発見します。評価フレームワークは、2つのスキルバージョンを比較するための堅牢なパイプラインを提供します。
機能
- スキルビルダー: YAMLテンプレートを使用した新しいスキルの生成
- スカウト: スキルリポジトリの検索とメタデータの取得
- 二段階A/B評価:
- ステージ1: 単体テストと基本機能の検証
- ステージ2: エンドツーエンドのタスク実行とメトリクス比較
使用方法
スキルの作成
skill-builder create --name my-skill --template mle-agent
スカウト
skill-scout search --query "data-preprocessing"
A/B評価の実行
ab-evaluator run --baseline baseline-skill --candidate candidate-skill --stage all
対応プラットフォーム
- Claude Code
- Cursor
- Codex
- その他のOpenClaw互換エージェント
ライセンス
MIT