讓世界模型與大語言模型分工,是為了解決
「物理渲染」與「邏輯常識」截然不同的運算難題。Genie 本質上專精於視覺與聽覺的時空連續性,它知道物體撞擊會掉落、角色說話會張嘴,但缺乏宏觀的邏輯推理能力。
引入雙大腦協同具有關鍵優勢:
- 常識把關與糾錯:Gemini Omni 負責確保模擬內容符合現實規則,避免出現「杯子懸浮在半空」或「角色對危險毫無反應」的離奇幻覺。
- 拆解複雜任務流程:如同文章中展示的機器人下棋,Gemini 負責思考「走哪一步棋」,再將指令拆解給 Genie 去具象化模擬實體動作。
- 提升指令理解力:當玩家說「讓氣氛變浪漫」,Gemini 能將其轉譯為降低色溫、調柔光線並播放舒緩音樂等具體參數,減輕世界模型的解讀負擔。