アンドリュー・ンAndrew Ng · 分析視点AN-P02PRODUCT ADVISORY COUNCIL
評価の前に出力を見る
アンドリュー・ンAndrew Ng · 分析視点AN-P02方法の裏面
評価の前に出力を見る
小さな試作品で、ユーザーに重要な失敗を見つけます。
使う場面
- 生成品質を一つの指標で表しにくいとき。
自分に問う
- 最初から巨大な評価セットが必要？
行動に移す
- 初期出力を確認し、失敗を分類して例を集め、客観指標と主観評価を分けながら更新します。
適用の限界
- 少数の例は出発点であり、公開時の信頼性の証明ではありません。モデルによる採点にも調整が必要です。