昆侖萬維發(fā)布Matrix-Zero世界模型,開啟空間智能新時代
2025-02-14 19:15 互聯(lián)網(wǎng)
2月14日,昆侖萬維正式推出 Matrix-Zero世界模型,成為中國第一家同時推出3D場景生成和可交互視頻生成模型的探索空間智能的企業(yè)。

Matrix-Zero世界模型包含兩款子模型:
。1)昆侖萬維自研3D場景生成大模型,支持將用戶輸入的圖片轉化為可自由探索的真實合理的3D場景,比World Labs生成場景的探索范圍更大更自由,而且包括動態(tài)物理效果;
。2)昆侖萬維自研可交互視頻生成大模型,提供以用戶輸入為核心驅動的可交互空間智能視頻生成方案,支持根據(jù)用戶實時輸入生成互動視頻效果,具備更精準控制的action model。

昆侖萬維Matrix-Zero的3D場景生成功能,支持將用戶輸入的圖片轉化為可自由探索的真實合理的3D場景,具備全局一致性、可自由探索、支持不同風格圖片輸入、支持風格遷移、支持動態(tài)場景生成等亮點。
能夠實現(xiàn)這樣的逼真效果,得益于昆侖萬維自研3D場景生成大模型,包含兩個核心模塊:場景布局生成模塊和紋理生成模塊。幾何生成模塊借助可微渲染和擴散模型技術,能創(chuàng)造出和輸入圖片一致的3D場景布局;紋理生成模塊在圖片生成模型和視頻生成模型基礎上訓練,當用戶在場景中運動時,昆侖自研3D場景生成大模型不斷對場景缺失區(qū)域進行幾何和紋理的補全,從而確保用戶在任何位置、任何角度都能看到合理、一致的場景。
此前,谷歌Genie(可交互生成環(huán)境)系列已經(jīng)向大眾展示了世界模型的能力和魅力。為達到更好的流暢性、一致性等,昆侖萬維可交互視頻大模型建立在先進的生成式視頻模型之上,結合自主研發(fā)的用戶交互模塊,最終實現(xiàn)了一種以用戶輸入為核心驅動的空間智能視頻生成方案。
該方法能夠在保證開放領域視頻生成能力的同時,進一步增強對視頻內(nèi)容中視角移動的精確控制,使其更加符合用戶的交互需求和預期。通過這種方式,我們不僅可以生成符合用戶意圖的視頻內(nèi)容,還能夠優(yōu)化空間智能模型的適配性,從而拓展在虛擬環(huán)境、交互式應用以及沉浸式體驗中的應用場景。
作為針對圖片對應的 3D 世界中自由探索提出的視頻生成系統(tǒng),Matrix-Zero 能夠在不同環(huán)境下高效地生成高質(zhì)量的視頻內(nèi)容,并確保視頻的流暢性、一致性和合理性。
緊握AI時代脈搏,成為中國探索空間智能的領跑者。昆侖萬維作為中國AI領軍企業(yè),始終踐行公司使命——實現(xiàn)通用人工智能,讓每個人更好地塑造和表達自我,堅持在人工智能領域自主研發(fā),持續(xù)推出AI產(chǎn)品。
過去三年,昆侖萬維在視覺多模態(tài)、深度學習、強化學習等關鍵技術方向取得了一系列成績,同時構建起了完整的AI矩陣:最懂金融、學術的天工AI搜索,全球首個AI音樂創(chuàng)作平臺Mureka,AI 短劇平臺SkyReels,AI社交產(chǎn)品Linky,AI游戲等,形成了“AI前沿基礎研究——基座模型——AI矩陣產(chǎn)品/應用”的產(chǎn)業(yè)鏈。
2025年1月,「天工大模型4.0」o1版和4o版正式上線天工APP和網(wǎng)頁。2025年2月8日,昆侖萬維旗下「天工AI」正式推出PC版重大更新——上線“DeepSeek R1 + 聯(lián)網(wǎng)搜索”功能。
勇立潮頭,敢為人先。今天,昆侖萬維Matrix-Zero系列模型的開發(fā)和迭代也代表了公司對未來AI技術的提前布局,進一步賦能公司AI業(yè)務矩陣。交互生成模型的落地將變革可交互內(nèi)容引擎,大大提升公司AI多矩陣產(chǎn)品的生產(chǎn)力。
Matrix-Zero世界模型預計4月份上線,將對公司AI游戲生產(chǎn)、AI短劇生產(chǎn)和編輯等業(yè)務進一步賦能,為用戶和開發(fā)者帶來新的平臺和工具。當視頻模型發(fā)展到可以逼真模擬物理世界時,游戲可能不再需要傳統(tǒng)的3D引擎,許多實驗和模擬將可以在虛擬環(huán)境中進行,而影視創(chuàng)作也將變得更加普及,甚至成為每個人的基本技能。雖然這些看似是未來的場景,但技術正一步步將它們變?yōu)楝F(xiàn)實,視頻生成模型的火熱正是這一趨勢的重要體現(xiàn)。
未來大模型發(fā)展將更加關注智能體工具和用戶交互。空間智能技術不僅為未來智能體研發(fā)提供了虛擬平臺,也帶給用戶全新的與生成世界交互的體驗,大大提升了交互的多樣性?臻g智能技術的發(fā)展也將是通往具身智能乃至AGI路上的一個重要技術里程碑。我們?nèi)詫⒊掷m(xù)升級迭代,研發(fā)更先進的AI平臺、打磨體驗更好的AI產(chǎn)品,進一步推動人工智能的繁榮發(fā)展。
廣告
- 酶制劑行業(yè)亂象當休矣,以法律和自律清除合成
- Uoffer Global榮獲ICEF認證,讓留學選擇更專
- 北京市十大律師事務所2025年1月榜單
- 從研發(fā)到生產(chǎn):三維天地AI智能體助力藥企實現(xiàn)
- 輕客汽車大全優(yōu)選!上汽大通MAXUS新途V70,創(chuàng)
- 中免集團海南離島免稅店元宵、情人節(jié)活動繽紛
- 華盛美業(yè):線上線下齊發(fā)力 聯(lián)動提升增質(zhì)效
- 端側AI元年|日海模組先行一步,實測跑通Deep
- 浩萬(HORWIN)獲權威認可,攜手歐洲環(huán)境署(
- 開春養(yǎng)肝正當時,LAIFE「樂輕肝」成為養(yǎng)肝黑
- 酶制劑行業(yè)亂象當休矣,以法律和自律清除合成
- Uoffer Global榮獲ICEF認證,讓留學選擇更專
- 北京市十大律師事務所2025年1月榜單
- 從研發(fā)到生產(chǎn):三維天地AI智能體助力藥企實現(xiàn)
- 輕客汽車大全優(yōu)選!上汽大通MAXUS新途V70,創(chuàng)
- 中免集團海南離島免稅店元宵、情人節(jié)活動繽紛
- 華盛美業(yè):線上線下齊發(fā)力 聯(lián)動提升增質(zhì)效
- 端側AI元年|日海模組先行一步,實測跑通Deep
- 浩萬(HORWIN)獲權威認可,攜手歐洲環(huán)境署(
- 開春養(yǎng)肝正當時,LAIFE「樂輕肝」成為養(yǎng)肝黑