KnightMafiaLau/llm-recall-protocol-skill

llm-recall-protocol-skill とは？

このスキルは、Claude Code 上で動作する自己進化型 LLM リコールテストハーネスです。さまざまなロール（役割）を持つクエリを発行し、その応答がどの情報源に基づいているか（ソース帰属）を分析します。さらに、LLM ごとに異なるソースバイアス（特定の情報源を過度に参照する傾向）をプロファイリングします。重要なのは、各実行の結果に基づいてクエリライブラリが自動的に適応・進化することです。これにより、時間の経過とともにテストの網羅性と精度が向上します。開発者はこのスキルを使って、LLM の知識想起能力や情報源への依存度を体系的に評価・可視化し、モデルの改善やバイアスの特定に役立てることができます。