PRODUCT ADVISORY COUNCIL
分開比較規模效率與訓練範式
方法背面
分開比較規模效率與訓練範式
評估模型突破時分別看投入規模、同能力成本下降和訓練方法變化。
什麼時候用
- 模型選型或對新模型成本宣傳的判斷
先問自己
- 比較對象的時間、能力任務和成本口徑一致嗎?
可以怎麼做
- 建立同任務同質量比較表,分別記錄訓練、推理、研發費用與不可覈實項。
別忽略這些邊界
- 成本數字常不可外部驗證;訓練、推理和公司總研發成本不可混比。
把一個方法,放進口袋。
PRODUCT ADVISORY COUNCIL
方法背面
評估模型突破時分別看投入規模、同能力成本下降和訓練方法變化。
依據公開技能包整理的分析方法,不是本人回答或背書。
查看公開方法來源 ↗