Liabooks Home|PRISM News
展示 Google 內部強化學習技術的 AI 思考路徑圖
TechAI分析

Google 內部強化學習 複雜推理 2026:告別文字遊戲,AI 迎來「隱形思考」時代

2分钟阅读Source

Google 推出「內部強化學習(Internal RL)」技術,透過元控制器引導 AI 內部狀態,突破次標記預測的局限。2026年,複雜推理與自律機器人發展將因此迎來關鍵轉捩點。

AI 的思考模式即將迎來翻天覆地的轉變。根據路透社引述研究報告,Google研發出一種名為「內部強化學習(Internal RL)」的新技術,旨在解決 LLM(大型語言模型)在處理複雜邏輯時容易崩潰的問題。這項技術不再僅僅依賴於預測下一個字,而是引導模型內部的活化狀態,建立高層次的逐步解決方案。

Google 內部強化學習 如何解決複雜推理難題

長期以來,AI 模型受限於「次標記預測(Next-token prediction)」的架構。當任務涉及長路徑規劃時,模型往往會在細節中迷失,導致成功機率降至「百萬分之一」。研究員 Yanick Schimpf 表示,在一個 20 步的任務中,代理人極易在單一步驟中耗盡精力而遺忘最終目標。這種「見樹不見林」的缺陷,正是當前自主代理人發展的絆腳石。

為了解放 AI 的潛力,Google團隊引入了「元控制器(Metacontroller)」。它不更動輸出的文字,而是像一名隱形的指揮家,在中層網路中微調神經元的活動。實驗證明,在四足機器人控制與複雜邏輯測驗中,傳統的 GRPO 演算法在訓練 100 萬次後仍無法掌握的任務,內部強化學習 僅需極少量訓練便能精準完成。

自律代理人的未來:從提示詞到內部轉向

這項技術對於企業級應用至關重要。以程式碼生成為例,開發者往往需要在預測性(低溫設定)與創造力(高溫設定)之間痛苦取捨。透過 內部RL,AI 能在抽象層面探索邏輯結構,同時交由基礎模型確保語法精確,達成兩全其美的效果。這意味著未來的 AI 將具備更強的適應力,且無需人類手動編寫繁瑣的提示指令。

本内容由AI根据原文进行摘要和分析。我们力求准确,但可能存在错误,建议核实原文。

相关文章