Communitygithub.com

MrBinnacle/skill-harness

針對 LLM 技能的條款消融差異測試。測量技能構件中每個條款是否產生可衡量的方向性影響。預覽版。

skill-harness 是什麼?

此技能提供一種基於條款消融的差異測試方法,用於評估大型語言模型(LLM)技能中各個條款的影響方向與程度。開發者可以藉由逐一移除或隔離技能文件(如 SKILL.md)中的條款,觀察其對模型行為產生的具體變化,從而辨識哪些指令是關鍵的、哪些是冗餘的或可能有害的。目前支援指令式技能構件,適合 CLI 工具、開發者代理或自訂 LLM 應用的除錯與最佳化。這項技術類似於傳統軟體測試中的錯誤植入或差異分析,但專門針對自然語言指令的因果效應進行量化,有助於提升技能的精確度與穩健性。由於處於預覽階段,其穩定性和適用範圍有待進一步驗證。

相容平台~Claude Code~Codex CLI~Cursor
npx skills add MrBinnacle/skill-harness

在你喜歡的 AI 中提問

開啟一個已預先載入此 Agent Skill 的新對話。

說明文件

skill-harness 是做什麼的?

針對 LLM 技能的條款消融差異測試。測量技能構件中每個條款是否產生可衡量的方向性影響。預覽版。

相關技能