richard-gyiko/which-llm

which-llm은(는) 무엇을 하나요?

벤치마크, 성능 및 비용을 기반으로 적합한 LLM을 선택하기 위한 CLI 및 에이전트 스킬입니다. Cursor, Claude Code, Copilot 등과 함께 사용할 수 있습니다.

설명

이 스킬은 주어진 작업에 대해 최적의 LLM을 결정하는 과정을 간소화합니다. 개발자는 간단한 CLI 명령어를 실행하거나 AI 에이전트에게 질문하여 모델 추천을 받을 수 있습니다. 스킬은 광범위한 벤치마크 데이터베이스와 실시간 비용 정보를 활용하여 각 사용 사례에 대한 최상의 옵션을 제공합니다.

사용 방법

CLI:

which-llm --task "code generation" --budget "low"

에이전트 통합:

• Claude Code: @which-llm 호출하여 쿼리 프롬프트
• Cursor: 명령어 팔레트에서 실행
• Copilot: 채팅 인터페이스에서 사용

지원 플랫폼

• Cursor
• Claude Code
• GitHub Copilot
• 기타 호환 AI 에이전트

기능

• 작업 유형(코딩, 번역, 요약, 추론 등)별 모델 추천
• 가격 및 성능 기반 필터링
• 최신 벤치마크 데이터(MMLU, HumanEval, GSM8K 등) 통합
• 상세 모델 비교 및 요약

예시

# 예산이 낮은 코드 생성 작업에 적합한 모델 찾기
which-llm --task "code generation" --budget "low"

# 특정 벤치마크에서 최고 성능 모델 찾기
which-llm --benchmark "human-eval" --top 3

참고 사항

• 벤치마크 점수는 정기적으로 업데이트됩니다.
• 가격은 공급자 API 요금제를 기준으로 합니다.
• 결과는 컨텍스트 및 작업 복잡성에 따라 달라질 수 있습니다.