北京,2026年1月5日——CreateAI(OTC:TSPH)今日宣布,公司與中國科學院自動化所共同研發的4D世界模型NeoVerse正式發布,相關研究論文已同步在項目主頁上線,供全球開發者查閱。該模型融合diffusion與4DGS核心技術,基于100萬段開放場景(in-the-wild)單目視頻訓練,30秒即可完成通用4D世界模型構建,不僅打破傳統4D建模對昂貴多視角數據的依賴,更實現“重建+生成”無限迭代閉環,相關性能在標準基準測試中達業界領先水平。
![]()
作為兼具通用性與高效性的4D建模解決方案,NeoVerse可全面覆蓋影視制作、具身智能、自動駕駛等各類場景,支持4D重建、精準漫游、多視角生成、視頻編輯、三維點跟蹤等多元應用,推動4D技術從“專用”走向“通用”,加速其在各行業的落地普及。
VGGT高斯化:秒級完成場景重建
NeoVerse基于視覺幾何基礎變換器(VGGT)構建免位姿輸入(pose-free)前饋式4D高斯濺射模型,摒棄傳統迭代式優化路徑,無需復雜離線預處理,一次預測即可在幾秒內完成動態場景4D建模,大幅降低技術應用門檻。
雙向運動建模:稀疏幀實現高保真渲染
模型創新性建模高斯基元前后向運動變化量,實現“稀疏幀重建,密集幀渲染”,在少量稀疏關鍵幀輸入的條件下渲染出連續密集的視頻畫面。在大幅提升重建效率的同時,保障動態場景的時空一致性。
單目退化模擬:攻克復雜場景泛化難題
通過高效稀疏重建出的高斯基元進行剔除與平均幾何濾波,NeoVerse能夠模擬出新視角下的退化渲染模式,這將與原視角的視頻構建訓練數據對。整個訓練管線僅需要單目視頻,擺脫了以往對昂貴多視角數據的依賴。
![]()
“NeoVerse是我們與中科院自動化所產學研協同的重要成果,更是用技術解決行業痛點的又一次實踐。”CreateAI首席科學家王峰表示,“大模型訓練依賴于可擴展的(scalable)海量數據,而多目或4D數據過于昂貴導致世界模型的發展速度受限。我們提出的Feedforward 4D Gaussian重建加Diffusion生成的方法,通過單目視頻即可高效地合成大量的4D數據,為4D世界模型的建立鋪平了道路。”
此次發布的NeoVerse模型支持強大的蒸餾LoRAs(distillation LoRAs)擴展,在單張顯卡上可實現低于30秒的快速推理,具備優異的產業級應用潛力。值得一提的是,公司此前在計算機視覺領域已斬獲佳績,相關研究論文成功入選頂會ICCV 2025;本次依托中科院自動化所在多模態人工智能領域的深厚學術積累,NeoVerse在技術創新性與學術領先性上獲得雙重保障。
![]()
如需了解此次NeoVerse相關研究論文的更多細節,請訪問:https://arxiv.org/abs/2601.00393
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.