安德烈·卡帕西Andrej Karpathy · 分析視角AK-P03PRODUCT ADVISORY COUNCIL
先建可信基線再增加複雜度
安德烈·卡帕西Andrej Karpathy · 分析視角AK-P03方法背面
先建可信基線再增加複雜度
用簡單端到端系統和可復現評測確認正確性，再逐項加入更複雜能力。
什麼時候用
- AI系統迭代難以解釋增益來源
先問自己
- 簡單方案表現如何，這次增益能歸因到哪個變化？
可以怎麼做
- 建立簡單基線，固定比較條件
- 每次加入一個變化並檢驗預期結果，保留消融記錄
別忽略這些邊界
- 訓練損失變好不是使用者效果變好；必須保留獨立驗證。