Community코딩 & 개발github.com

trajectoryRL/trajrl-bench

TrajRL-Bench: AI 에이전트 기술 벤치마크. SSH 샌드박스, 모의 서비스, LLM 평가자 점수, 분할 반 델타 평가를 제공합니다. 리더보드: trajrl.com/bench

trajrl-bench란 무엇인가요?

TrajRL-Bench는 AI 에이전트의 기술을 평가하기 위한 벤치마크 도구입니다. SSH 샌드박스 환경에서 모의 서비스를 실행하고, LLM 평가자가 작업 수행 결과를 점수화하여 객관적인 성능 측정을 제공합니다. 주요 평가 방법론으로 분할 반 델타 평가(split-half delta evaluation)를 사용하며, 이는 작업의 절반과 나머지 절반의 성능 차이를 분석하여 에이전트의 일관성과 적응력을 측정합니다. GitHub와 같은 표준 개발 환경에서 원활하게 사용할 수 있으며, 평가 결과는 trajrl.com/bench 리더보드에 제출하여 커뮤니티와 비교할 수 있습니다. 이 벤치마크는 AI 에이전트 개발자, 연구자, 그리고 에이전트 성능 최적화에 관심이 있는 모든 엔지니어에게 유용합니다.

지원 대상~Claude Code~Codex CLI~Cursor
npx skills add trajectoryRL/trajrl-bench

Installed? Explore more 코딩 & 개발 skills: steipete/bluebubbles, steipete/eightctl, steipete/blucli · View all 6 →

즐겨 사용하는 AI에게 물어보기

이 에이전트 스킬이 미리 로드된 새 채팅을 엽니다.

문서

trajrl-bench은(는) 무엇을 하나요?

TrajRL-Bench: AI 에이전트 기술 벤치마크. SSH 샌드박스, 모의 서비스, LLM 평가자 점수, 분할 반 델타 평가를 제공합니다. 리더보드: trajrl.com/bench

관련 스킬