OpenAI正在製定新策略以應對人工智慧改進速度放緩的問題
根據《The Information》的一份新報道,OpenAI 的下一個旗艦模型可能不像其前輩那樣次次都有著巨大的飛躍。據報道,測試了代號為獵戶座(Orion)的新模型的員工發現,儘管其性能超過了OpenAI 現有的機型,但與他們在從GPT-3 到GPT-4 的躍升過程中所看到的相比,其改進幅度較小。
換句話說,改進的速度似乎正在放緩。 事實上,Orion 可能不會在某些領域(如編碼)可靠地優於先前的模型。
為此,OpenAI 成立了一個基礎團隊,負責研究如何在新的訓練資料不斷減少的情況下繼續改進模型。
據報導,這些新策略包括在人工智慧模型產生的合成資料上訓練Orion,以及在後訓練過程中對模型進行更多改進。
OpenAI 沒有立即回應置評請求。 在回應先前有關其旗艦機型計劃的報道時,該公司表示:”我們沒有計劃在今年發布代號為Orion 的模型”。