Community研究&データ分析github.com

InternScience/ResearchClawBench

🦞 ResearchClawBench: AIエージェントの自動研究能力を「再発見」から「新発見」まで評価するベンチマーク

ResearchClawBench とは?

ResearchClawBenchは、AIエージェントが科学的研究プロセスを自動化する能力を評価するためのベンチマークです。「再発見」(既存の知識を再現する)から「新発見」(新しい知見を得る)までの幅広い研究タスクをカバーしています。このベンチマークは、Claude Code、Cursor、CodexなどのAIエージェントが、文献調査、仮説生成、実験計画、データ分析、結果の解釈といった研究の各工程をどの程度自律的に実行できるかを測定します。評価は、研究の再現性、効率性、創造性の観点から行われ、エージェントが実際の科学研究に貢献できるレベルを定量的に示します。ResearchClawBenchを使用することで、開発者は自社のAIエージェントの研究能力を客観的に比較し、改善点を特定することができます。

対応~Claude Code~Codex CLI~Cursor
npx skills add InternScience/ResearchClawBench

Installed? Explore more 研究&データ分析 skills: affaan-m/uspto-database, affaan-m/scholar-evaluation, affaan-m/literature-review · View all 6 →

お気に入りのAIに質問する

このエージェントスキルを事前に読み込んだ状態で新しいチャットを開きます。

ドキュメント

ResearchClawBench は何をしますか?

🦞 ResearchClawBench: AIエージェントの自動研究能力を「再発見」から「新発見」まで評価するベンチマーク

ResearchClawBenchは、AIエージェントの科学研究自動化能力を評価するための包括的なベンチマークです。このベンチマークは、以下の研究フェーズをカバーします:

  • 文献調査と知識の再現(再発見)
  • 仮説生成と実験計画
  • データ分析と結果の解釈
  • 新しい知見の獲得(新発見)

対応プラットフォーム

  • Claude Code
  • Cursor
  • Codex
  • その他(随時追加予定)

使用方法

# 評価を実行する
python run_benchmark.py --agent claude --task rediscovery

評価指標

指標説明
再現性既存の研究成果を正しく再現できるか
効率性研究プロセスをどれだけ効率的に実行できるか
創造性新しい仮説や発見を生み出せるか

ライセンス

MIT License

関連スキル