本報訊 (記者李春蓮)2026年1月5日,CreateAI(OTC:TSPH)宣布,公司與中國科學院自動化所共同研發(fā)的4D世界模型NeoVerse正式發(fā)布,相關研究論文已同步在項目主頁上線,供全球開發(fā)者查閱。該模型融合diffusion與4DGS核心技術,基于100萬段開放場景(in-the-wild)單目視頻訓練,30秒即可完成通用4D世界模型構建,不僅打破傳統(tǒng)4D建模對昂貴多視角數(shù)據(jù)的依賴,更實現(xiàn)“重建+生成”無限迭代閉環(huán),相關性能在標準基準測試中達業(yè)界領先水平。
作為兼具通用性與高效性的4D建模解決方案,NeoVerse可全面覆蓋影視制作、具身智能、自動駕駛等各類場景,支持4D重建、精準漫游、多視角生成、視頻編輯、三維點跟蹤等多元應用,推動4D技術從“專用”走向“通用”,加速其在各行業(yè)的落地普及。
NeoVerse基于視覺幾何基礎變換器(VGGT)構建免位姿輸入(pose-free)前饋式4D高斯濺射模型,摒棄傳統(tǒng)迭代式優(yōu)化路徑,無需復雜離線預處理,一次預測即可在幾秒內(nèi)完成動態(tài)場景4D建模,大幅降低技術應用門檻。
模型創(chuàng)新性建模高斯基元前后向運動變化量,實現(xiàn)“稀疏幀重建,密集幀渲染”,在少量稀疏關鍵幀輸入的條件下渲染出連續(xù)密集的視頻畫面。在大幅提升重建效率的同時,保障動態(tài)場景的時空一致性。
通過高效稀疏重建出的高斯基元進行剔除與平均幾何濾波,NeoVerse能夠模擬出新視角下的退化渲染模式,這將與原視角的視頻構建訓練數(shù)據(jù)對。整個訓練管線僅需要單目視頻,擺脫了以往對昂貴多視角數(shù)據(jù)的依賴。
“NeoVerse是我們與中國科學院自動化所產(chǎn)學研協(xié)同的重要成果,更是用技術解決行業(yè)痛點的又一次實踐。”CreateAI首席科學家王峰表示,“大模型訓練依賴于可擴展的(scalable)海量數(shù)據(jù),而多目或4D數(shù)據(jù)過于昂貴導致世界模型的發(fā)展速度受限。我們提出的Feedforward 4D Gaussian重建加Diffusion生成的方法,通過單目視頻即可高效地合成大量的4D數(shù)據(jù),為4D世界模型的建立鋪平了道路。”
值得一提的是,公司此前在計算機視覺領域已斬獲佳績,相關研究論文成功入選頂會ICCV 2025;本次依托中國科學院自動化所在多模態(tài)人工智能領域的深厚學術積累,NeoVerse在技術創(chuàng)新性與學術領先性上獲得雙重保障。
(編輯 黃力)
| 11:56 | 央行等四部門:統(tǒng)籌建立常態(tài)化金融... |
| 11:33 | 京東集團:感謝巴黎警方對倉庫被盜... |
| 11:27 | 中鐵快運聯(lián)手菜鳥 今年春節(jié)讓旅客... |
| 11:22 | 五項汽車強制性國家標準征求意見 ... |
| 11:21 | 春節(jié)消費旺季將至 多地發(fā)文要求外... |
| 11:21 | 多家養(yǎng)殖公司1月份銷售價格回暖 |
| 11:20 | 冬奧賽場內(nèi)外“商戰(zhàn)”暗涌 運動戶... |
| 11:20 | 機器人共享模式要火?擎天租:預計... |
| 11:20 | 產(chǎn)業(yè)鏈企業(yè)協(xié)同共振守護春節(jié)“肉盤... |
| 11:17 | 海航控股開啟新年高質(zhì)量發(fā)展序幕 |
| 10:15 | 科大訊飛2025年經(jīng)營回款超270億元 |
| 09:59 | 天工國際攜手鮑迪克 粉末冶金產(chǎn)業(yè)... |
版權所有《證券日報》社有限責任公司
互聯(lián)網(wǎng)新聞信息服務許可證 10120240020增值電信業(yè)務經(jīng)營許可證 京B2-20250455
京公網(wǎng)安備 11010602201377號京ICP備19002521號
證券日報網(wǎng)所載文章、數(shù)據(jù)僅供參考,使用前務請仔細閱讀法律申明,風險自負。
證券日報社電話:010-83251700網(wǎng)站電話:010-83251800 網(wǎng)站傳真:010-83251801電子郵件:xmtzx@zqrb.net
安卓
IOS
掃一掃,加關注
掃一掃,加關注