#世界模型 — Public Fediverse posts
Live and recent posts from across the Fediverse tagged #世界模型, aggregated by home.social.
-
#開源分享 微軟開源了一個基於《當個創世神》的即時開源互動式世界模型:MineWorld,它可以根據玩家的動作預測遊戲世界接下來的變化,並即時生成新的遊戲畫面
它的核心是一個視覺動作自回歸Transformer模型,它接收遊戲場景和對應玩家動作的配對數據作為輸入,預測接下來的新場景
預測速度非常快,可以做到即時更新
它研發了一種新的並行解碼算法,可以同時預測每一幀中空間冗餘的 token,使不同規模的模型能夠達到每秒生成4到7幀的速度,實現與玩家的即時交互
專案地址: github.com/microsoft/MineWorld