source avatarMinty

分享

繩索能解鎖更強大的 AI 系統嗎? 研究人員開發了一種新型繩索,讓現有模型能夠處理更長且更複雜的工作流程。 遞迴語言模型(RLM)將大型檔案和資料集保留在主模型的上下文之外。模型透過代碼選擇相關部分,將每部分發送至獨立的模型請求,並整合結果。 這與一般會話不同,一般會話中檔案、工具輸出和結果都會累積在單一上下文中。隨著上下文增長,模型可能會開始遺漏關鍵細節。 為測試此結構是否也能提升學習效果,研究人員使用強化學習(RL)在固定 RLM 繩索內僅使用短任務訓練 Qwen3-30B,然後在長度為 8–32 倍的任務上進行評估。 在較長的評估中,經 RLM 訓練的模型展現顯著改善,而未使用繩索訓練的相同模型則幾乎沒有進步。在其他獨立實驗中,該模型也將相同策略應用於需要類似基礎步驟的新領域。

No.0 picture
免責聲明:本頁面資訊可能來自第三方,不一定反映KuCoin的觀點或意見。本內容僅供一般參考之用,不構成任何形式的陳述或保證,也不應被解釋為財務或投資建議。 KuCoin 對任何錯誤或遺漏,或因使用該資訊而導致的任何結果不承擔任何責任。 虛擬資產投資可能存在風險。請您根據自身的財務狀況仔細評估產品的風險以及您的風險承受能力。如需了解更多信息,請參閱我們的使用條款風險披露