Knjss-0508/knowledge-base-analysis-advice

knowledge-base-analysis-advice란 무엇인가요?

이 스킬은 지식 베이스(Knowledge Base)와 RAG(Retrieval-Augmented Generation) 시스템의 실제 질문-답변 테스트 결과를 심층 분석하여, 문제의 근본 원인과 책임 계층(예: 문서 품질, 청크 전략, 검색 설정, LLM 프롬프트 등)을 추적하고, 실행 가능한 최적화 제안을 생성합니다. RAG 기반 애플리케이션을 개발하거나 유지보수하는 개발자와 AI 엔지니어에게 유용하며, Codex 플랫폼과 호환됩니다. 스킬은 먼저 지식 베이스의 문서 구조, 임베딩, 청크 크기, 검색 파라미터 등 각 레이어를 진단하고, 실제 Q&A 샘플에서 잘못된 답변, 누락된 정보, 환각(hallucination) 등의 패턴을 식별합니다. 분석 결과를 바탕으로, 예를 들어 '문서 섹션을 500자 단위로 분할' 또는 '검색 상위 K를 5로 증가'와 같은 구체적이고 우선순위가 매겨진 개선 조치를 권장합니다. 마크다운 형식의 보고서와 함께, 변경 전후 비교를 위한 권장 설정 값을 제공하여 프로세스의 투명성과 재현성을 보장합니다.