evals 作為所有 AI 系統開發的基底,是現在工程師最需要做的事情
其中最需要人工定義的評估方式往往是那種特別刁鑽的邊緣案例,以停車計費為例:
- 客人一次停 35 天如何計費?
- 月租到期變成臨停,又購買新的月租如何計費?
- 平日臨停進場,遇到特殊假日發生費率變化時如何計費?
如果正在開發一個系統但是不知道要如何 eval,那就跟伊利丹說的一樣
「你還沒準備好!」
其中最需要人工定義的評估方式往往是那種特別刁鑽的邊緣案例,以停車計費為例:
如果正在開發一個系統但是不知道要如何 eval,那就跟伊利丹說的一樣
「你還沒準備好!」