根據 The Information 的報導，OpenAI 在其下一款旗艦模型 Orion 上正面臨報酬遞減的問題。儘管 Orion 在測試中勝過 GPT-4，但內部測試顯示其代際躍升幅度小得多，且在編程能力上並無穩定提升。傳統的預訓練擴展法則已遇到瓶頸。