アンドレイ・カルパシーAndrej Karpathy · 分析視点AK-P03PRODUCT ADVISORY COUNCIL
信頼できる基準をつくる
アンドレイ・カルパシーAndrej Karpathy · 分析視点AK-P03方法の裏面
信頼できる基準をつくる
単純で再現可能な全工程の基準が、改善の理由を明確にします。
使う場面
- AI 改善の理由を説明しにくいとき。
自分に問う
- 新しい方式が改善したとどう分かる？
行動に移す
- 比較条件を固定し、一度に一つだけ変更し、取り除いた場合とも比べて寄与を確かめます。
適用の限界
- 学習損失の改善とユーザーへの効果は別です。独立した検証を残します。