실험 내러티브은(는) 무엇을 하나요?
목적
실험 로그, 표 및 플롯에서 투명한 결과 내러티브를 작성합니다.
이 스킬은 의도적으로 좁은 범위를 가집니다. 누락된 증거가 필요한 작업을 완료한 척하지 않고 검토 가능한 결과물을 생성합니다.
필수 입력
다음 항목을 수집하여 시작하십시오: 가설, 설정, 메트릭, 결과, 아티팩트, 한계점.
필수 입력이 누락된 경우, 이를 요청하거나 결과적으로 발생하는 가정을 명시적으로 표시하십시오. 사실적 공백을 그럴듯한 세부 사항으로 채우지 마십시오.
워크플로우
- 가설과 비교 대상을 먼저 명시하십시오.
- 결과 해석에 필요한 설정 세부 사항만 설명하십시오.
- 해석 전에 효과 크기와 불확실성을 보고하십시오.
- 각 결론을 아티팩트와 연결하십시오.
- 실패한 실행과 경계 조건을 포함하십시오.
출력 계약
반환: 관찰, 해석 및 한계를 구분한 결과 섹션.
세 가지 계층을 분리하여 유지하십시오:
- 출처 사실: 제공되거나 관찰된 내용.
- 추론: 사실이 구성되거나 해석된 방식.
- 결정: 사용자가 승인, 변경 또는 확인해야 할 사항.
품질 게이트
전달하기 전에 다음을 확인하십시오:
- 기준선과 평가 분할이 명확합니다.
- 메트릭이 결과보다 먼저 정의됩니다.
- 결론이 실험 범위를 초과하지 않습니다.
확인에 실패하면 표준을 무단으로 낮추는 대신 차이점을 보고하십시오.
예시 형태
순위 실험 내러티브는 오프라인 이득, 신뢰 구간 및 누락된 온라인 검증을 보고합니다.
경계
- 이름, 측정값, 인용, 권한 또는 결과를 임의로 만들지 마십시오.
- 개인 정보 또는 민감한 자료는 작업에 필요한 범위로 제한하십시오.
- 광범위한 일반 조언 목록보다 작고 테스트 가능한 결과물을 선호하십시오.