AI News HubLIVE
站內改寫4 分鐘閱讀

2025–2026年生成式空間AI的演進

本文回顧了2025年5月至2026年6月期間生成式空間AI的快速發展,從文本到網格、影片生成、互動式世界模型、相機可控生成、本地化生產管線到AI原生CAD,記錄了技術從演示到生產就緒的轉變,並討論了剩餘挑戰。

來源Hacker News AI作者: javierluraschi

在過去的十三個月裡,用於空間內容的生成式AI已從令人印象深刻但有限的資產建立工具,發展到能夠生成面向生產的三維網格、可控多檢視影像、互動式可導航世界,甚至從影像或文本生成引數化CAD的系統。這一歷程始於更好的網格和短影片片段,現已演變為鏈式創作者工作流、本地優先工具以及早期可程式設計世界模型。

本文透過2025年5月至2026年6月期間在X平臺上分享的關鍵公告和演示,追溯了這一發展軌跡。這些來自研究人員、構建者和策展人的帖子,提供了技術進步、採用模式和剩餘侷限性的即時地圖。

2025年5月至6月:建立高質量3D資產和影片基礎 這一階段始於專注於生產可用3D幾何體和紋理的釋出,同時影片生成領域取得了可與3D管線結合的強大進展。Meta的AssetGen 2.0引入了專門從文本或影像生成網格和紋理的模型,並討論了與遊戲引擎(Blender/Unreal管線)的相容性,這標誌著從早期研究原型向可直接匯入和使用的資產邁出了重要一步。騰訊的PrimitiveAnything透過Hugging Face上的Gradio展示了將複雜物件自迴歸分解為可編輯幾何基元的能力,在某些設計和遊戲工作流中提供了比純網格或隱式表示更好的可編輯性。影片生成方面,Google Veo 2在Google AI Studio中免費開放使用,提供強大的物理模擬和電影級短片段質量。早期實驗將FLUX與Hunyuan 3D模型結合,建立偽3D渲染,既展示了混合2D到3D管線的潛力,也暴露了真實網格一致性和拓撲方面的差距。到6月,Hunyuan-3D-2.1透過Hugging Face上的開放權重顯著提升了紋理質量。FreeTimeGS等研究推進了4D高斯潑濺技術,用於具有複雜運動的動態場景,指向未來動態世界重建能力。這些釋出表明,高質量的3D資產生成和支援性影片工具正在成為可訪問的構建模組,而非純粹的研究成果。

2025年8月:質的飛躍——互動式世界模型 2025年8月,Google DeepMind的Genie 3標誌著一個根本性轉變。社群帖子描述其為超越影片或靜態3D生成,進入文本到互動式3D世界的領域。使用者可以生成可探索的環境,在其中即時導航、與物體互動、透過提示觸發事件,並受益於湧現的世界記憶和一致的物理規則(包括飛行、游泳和時間一致性)。這代表了從媒體生成向生成式模擬的轉變,其對遊戲、機器人訓練、教育和沉浸式敘事的影響顯而易見。儘管當時仍處於可信測試者或早期訪問階段,但其技術方向——可提示、互動式、具有記憶的環境——已經明確。

2025年下半年:生產就緒網格、影片到世界生成以及早期無程式碼空間工具 2025年下半年,重點在於使輸出在實際管線中更可用,並擴充套件輸入/輸出模態。Hunyuan取得了顯著進展:Hunyuan 3D 3.0生成了更乾淨、遊戲就緒的網格,具有改進的拓撲(包括最佳化的低多邊形和高解析度密集變體),並整合到Scenario等平臺,支援單影像、多檢視或草圖到3D的工作流,並具備資產管理功能。Hunyuan World 1.1(WorldMirror)實現了快速的“影片到3D世界”,支援廣泛模態(影像/影片/3D先驗→3D高斯潑濺、深度、相機、法線、點雲),併發布了訓練程式碼以允許自定義。Gemini 3的能力使非編碼者能夠透過文本提示生成功能性的互動式3D網路體驗——例如基於three.js的場景,包含粒子系統、手部/滑鼠互動和引數控制,展示了早期無程式碼空間介面生成。創作者工作流演變為完整管線:草圖或手繪→風格遷移→3D角色生成(Hunyuan3D)→動畫(Kling或Mixamo)。本地可及性透過Hunyuan3D的行動式Windows執行器和WorldGen等開放庫得到改善,WorldGen用於文本/影像到3D場景生成。

2026年初至年中:相機控制、大規模氛圍編碼、本地工具、可玩世界和AI原生CAD 2026年上半年透過更好的可控性、本地執行、實用創作者工作流以及完全可玩生成內容和引數化設計的初步步驟,進一步推動了民主化。相機控制和多檢視一致性透過自定義Gradio元件用於相機控制LoRA以及允許使用者上傳影像並軌道移動虛擬相機以生成一致新角度的可訪問工具而得到提升,這些在動畫和鏡頭多樣性方面立即顯示出實用性。“氛圍編碼”工作流變得更加複雜並廣泛展示。構建者展示了遊戲資產和UI的完整管線:使用Nano Banana或Midjourney進行影像/角色設計→透過Hunyuan3D進行3D轉換→透過Gemini Pro進行UI邏輯和互動。詳細帖子涵蓋了骨骼繫結(Mixamo)、材質處理、迭代策略和現即時間估計(通常幾小時即可獲得令人印象深刻的功能性結果)。這些例子說明了如何將專用模型連結起來,供沒有傳統3D或編碼專業知識的個人快速原型製作。世界模型的公共訪問隨著Genie 3向Google AI Ultra訂閱者的推出而擴大,引發了關於互動式環境生成的廣泛討論。一個顯著的發展是Moonlake(由Reverie引擎驅動),它演示了文本提示生成完全可玩的3D遊戲/世界,包含NPC、物理、多人支援以及持久狀態。與預渲染影片不同,這些是互動式系統,其中變化(破壞、天氣、在保留機制的同時重新設計整個美學)是持久的。該專案展示了強大的支援,並定位為即時內容的可程式設計世界模型。本地和開源工具獲得了關注:Modly提供了完全在使用者GPU上執行的本地桌面影像到3D網格生成。Microsoft釋出了TRELLIS.2,一個4B引數的開源模型,能夠在大約3秒內將單張影像轉換為帶有PBR材質(粗糙度、金屬感、不透明度)的完全紋理化3D資產。它處理複雜幾何體的能力優於許多前輩,並輸出GLB檔案,可直接用於常見引擎。討論還指出了VRAM要求,並認為這代表了快速可用推理方面的持續進展。端到端資產建立管線被廣泛討論,一些聲稱大幅縮短了遊戲就緒資產的時間線,同時也引發了關於拓撲質量、清理需求、作者身份以及真正生產就緒性的現實質疑。最後,AI原生CAD開始出現。工具展示了將影像或生成的構思轉換為可編輯引數化CAD模型(STEP格式)的能力,示例包括像手錶這樣的詳細機械物體。ForgeCAD和MIT的GenCAD等專案指向了未來的工作流:設計意圖可以透過自然語言或影像表達,並直接生成可編輯的工程模型。

技術見解與剩餘挑戰 這一時期出現了幾個明確的技術趨勢:可控性透過LoRA、自定義相機介面和可提示系統得到改進,超越了單次生成。拓撲和生產就緒性有所提升(Hunyuan 3D 3.0中的最佳化網格,TRELLIS.2對複雜幾何體的更好處理),但在高階使用中,清理、UV和骨骼繫結通常是必需的。本地和開源推理對個人變得可行(Modly、TRELLIS.2),降低了成本和隱私壁壘。從資產到系統:該領域從靜態網格演進到具有狀態(Genie 3、Moonlake/Reverie)和引數化輸出(ForgeCAD、GenCAD)的互動式世界。鏈式工作流(“氛圍編碼”)被證明對快速原型製作有效,但仍受益於人工迭代和藝術指導。持續的挑戰包括生成世界中的長期一致性、大規模高階骨骼繫結/動畫、無縫引擎整合、材質/物理創作,以及令人印象深刻的演示與穩健生產資產之間的差距。社群回覆中的懷疑態度往往正確地指出了這些現實。

結論:各項元件到來的速度遠超預期 從2025年5月到2026年年中的X帖子記錄了生成式空間計算在公共領域的構建過程。我們現在擁有可訪問的高質量資產生成、相機可控影像、本地快速3D工具、早期文本到可玩互動系統以及初步的AI原生CAD能力。差距依然存在,但速度和方向是明確無誤的。開放研究、實踐性創作者實驗以及主要實驗室釋出(谷歌、微軟、騰訊、Meta等)的結合,將曾經需要數年的進展壓縮到了數月。“全息甲板”並非作為一個單一產品到來,而是透過這些漸進但複合的進步,一塊一塊地組裝起來——而在X等平臺上公開分享模型、演示和工作流,一直是追蹤和加速這一進展的最有效方式之一。對於2026年年中的構建者而言,問題已不再是這些能力是否存在,而是我們能夠以多快的速度將它們整合到真實產品、遊戲、工具和創作流程中——以及它們將開啟哪些新的空間表達形式。