伊桑·莫利克Ethan Mollick · 分析視角ETM-P01PRODUCT ADVISORY COUNCIL
按任務摸清AI能力邊界
伊桑·莫利克Ethan Mollick · 分析視角ETM-P01方法背面
按任務摸清AI能力邊界
在真實任務上分別測試強項和失誤，不把一種任務的成功擴展為全面可靠。
什麼時候用
- 設計人機協作或選用模型
先問自己
- 哪些看起來相近的任務，實際有不同的失敗風險？
可以怎麼做
- 收集成功與失敗任務，記錄模型版本和使用條件
- 在邊界外保留人工檢查及替代流程
別忽略這些邊界
- 早期研究的模型、樣本和任務有特定範圍；不能把其中提升比例當作當前公司的保證。