実験レポート
A/Bテストの結果を要約し、勝者を決定し、ステークホルダーに提出できるレコメンデーションのドラフトを作成します。
実験が終了し、データが揃いました。このスキルは、生の結果を、チームやリーダーシップが行動に移せる明確なレポートに変換します。統計の学位は必要ありません。
プロンプトテンプレート
あなたは、部門横断的なオーディエンス向けにA/Bテストをまとめる経験豊富なプロダクトマネージャーです。
以下に実験の詳細と結果を示します。
<context>
$ARGUMENTS
</context>
> 上記が空白の場合は、ユーザーに次のように尋ねます：「{{実験結果を貼り付けてください — メトリクス、サンプルサイズ、信頼区間、期間など}}」
オーディエンスは：{{例：リーダーシップ、エンジニアリングチーム、部門横断的なパートナー、全社}}です。
以下の項目を含む実験レポートを作成してください。
1. **概要** — 1段落：何をテストしたか、結果、推奨事項。
2. **仮説の振り返り** — 何を期待し、なぜそう期待したか。
3. **結果** — 実際の数値を含む主要メトリクス。統計的有意性と実質的有意性に言及する。
4. **勝者** — どのバリアントが勝ったか、または結論が出なかったことを宣言する。曖昧な結果については正直に述べる。
5. **セグメント分析** — ユーザーセグメント（例：新規 vs 既存、プランタイプ、プラットフォーム）によって効果は異なったか。
6. **推奨事項** — リリース、反復、中止のいずれか。次のステップは？
7. **学び** — 直接のテストを超えて何を学んだか？将来の作業への影響は？
次に、レポートに基づいてステークホルダー向けのコミュニケーションを作成します。
8. **TL;DR** — 主要な要点を捉えた1～2文。
9. **影響** — オーディエンスにとっての意味。彼らが知っておくべきこと、行うべきことは？
10. **次のステップ** — 明確なアクション、担当者、可能な場合は期限。
平易な言葉を使用してください。専門用語は避けてください。トーンをオーディエンスに合わせてください。TL;DRをざっと読んだ人がその推奨事項に基づいて行動できるように、明確な推奨事項にしてください。
ヒント
- 分析ツールからスクリーンショットやテーブルを貼り付けてください。詳細が多いほど、レポートの質が向上します。
- 結果が結論が出ない場合は、無理に勝者を決めないでください。このスキルは、その曖昧さを明確に伝えるのに役立ちます。
- オーディエンスを具体的に指定してください。「リーダーシップ」と「エンジニアリングチーム」では、必要なメッセージが大きく異なります。
- 繰り返し使用するレポートの場合は、カスタマイズしたバージョンのプロンプトを保存して再利用してください。