當(dāng)AI技術(shù)持續(xù)向更縱深的領(lǐng)域探索，3D大模型正以驚人速度改變創(chuàng)意產(chǎn)業(yè)格局。

7月18日，在杭州拱墅舉辦的2025創(chuàng)業(yè)邦新青年創(chuàng)投大會上，VAST創(chuàng)始人&CEO宋亞宸帶來了這一技術(shù)發(fā)展現(xiàn)狀、核心突破及產(chǎn)業(yè)應(yīng)用的深度分享，為我們展開了一幅3D大模型從實(shí)驗(yàn)室技術(shù)走向產(chǎn)業(yè)落地的全圖景。

他認(rèn)為，3D大模型技術(shù)快速發(fā)展將重塑設(shè)計(jì)產(chǎn)業(yè)全鏈路。首先，設(shè)計(jì)過程將變得更高效，創(chuàng)意得以快速落地。小工作室、個(gè)人創(chuàng)作者能以更低成本、更高效率產(chǎn)出高質(zhì)量3D內(nèi)容。這勢必進(jìn)一步激發(fā)UGC生態(tài)潛力，使設(shè)計(jì)與消費(fèi)、虛擬與現(xiàn)實(shí)的邊界逐漸模糊。最終，整個(gè)行業(yè)也將從重投入、高風(fēng)險(xiǎn)向輕量化、個(gè)性化轉(zhuǎn)變。

以下是宋亞宸現(xiàn)場演講實(shí)錄，經(jīng)創(chuàng)業(yè)邦整理。

01技術(shù)迭代，兩年崛起的3D大模型與核心突破

我們公司叫VAST，是一家專注于3D大模型研發(fā)的企業(yè)。雖然公司成立僅兩年，但3D大模型這一技術(shù)的發(fā)展速度非常快。目前，我們已經(jīng)服務(wù)了3.5萬家中小客戶、700多家大客戶，還有三百萬海外創(chuàng)作者在使用我們的3D大模型。如果大家在這15分鐘里沒能記住太多內(nèi)容，我想有一個(gè)關(guān)鍵點(diǎn)一定要強(qiáng)調(diào)：這一技術(shù)從被人類發(fā)明至今，才兩年多時(shí)間。

在兩年多以前，人類想要實(shí)現(xiàn)“心想事成”或“言出法隨”般的創(chuàng)意落地，難度其實(shí)很大。但自從這一技術(shù)誕生后，一切都不同了——只需輸入一段文字、一張圖片，甚至更復(fù)雜的多模態(tài)輸入（比如三視圖），一個(gè)3D模型就能被快速生成。短短兩年多里，幾乎每3-5個(gè)月就會有一個(gè)全新的大模型出現(xiàn)，給各行各業(yè)帶來了非常大的變革。這種變革在普通用戶的日常體驗(yàn)中可能還不明顯，不過接下來我會和大家聊聊行業(yè)里已經(jīng)發(fā)生的變化。

我們本月將發(fā)布3.0版本的3D大模型，參數(shù)規(guī)模達(dá)到兩三百億級別。它的核心能力可以通過一段視頻來展示：基于文字或圖片生成3D模型后，系統(tǒng)能自動通過語義分割將模型拆分成一個(gè)個(gè)部分，每個(gè)部分會自動完成補(bǔ)全，用戶可以單獨(dú)對某一部分進(jìn)行編輯、風(fēng)格化調(diào)整；調(diào)整滿意后，還能通過AI算法重新組合起來。比如，你可以先構(gòu)建一個(gè)基礎(chǔ)模型，再生成一把精致的寶劍、一件帥氣的披風(fēng)，將它們集成到自己想要的角色身上；也可以上傳一張圖片，讓AI自動識別圖片風(fēng)格，對模型部件進(jìn)行風(fēng)格化處理；還能用智能筆刷調(diào)整細(xì)節(jié)，比如在衣服上添加LOGO。

我們還采用自回歸路線開發(fā)了低模生成功能，能為模型提供更優(yōu)的拓?fù)浣Y(jié)構(gòu)、布線設(shè)計(jì)，以及UV和烘焙優(yōu)化。更重要的是，我們實(shí)現(xiàn)了“萬物骨骼綁定”——不管是貓、人、龍還是蛇，AI都能自動完成骨骼綁定并讓它們動起來，真正實(shí)現(xiàn)了在一整套AI工作流上端到端地制作3D內(nèi)容。

在技術(shù)路線上，我們既有閉源技術(shù)，也做了很多開源工作。目前這一技術(shù)還處于相對早期的階段，我們希望通過大量開源工作——包括發(fā)表40多篇頂會論文——來推動整個(gè)技術(shù)的發(fā)展。

值得一提的是，3D大模型解決了傳統(tǒng)多模態(tài)生成技術(shù)的一大痛點(diǎn)。像文生圖、文生視頻等技術(shù)，輸出的內(nèi)容往往是不分層的，很難接入傳統(tǒng)創(chuàng)作管線或編輯工具進(jìn)行二次開發(fā)和專業(yè)修改。而3D大模型的語義分割功能，相當(dāng)于自動完成了分層，這一功能目前在全世界范圍內(nèi)只有我們的產(chǎn)品具備。低模生成則讓模型能更好地適配游戲、動畫、XR、元宇宙等場景的創(chuàng)作管線，提升實(shí)時(shí)渲染性能；貼圖材質(zhì)的優(yōu)化讓模型表面的顏色可以手動調(diào)整，滿足個(gè)性化需求；而“萬物骨骼綁定”更是突破了傳統(tǒng)局限，讓生成的萬物都能變得可動可交互。

02場景落地，3D大模型如何重構(gòu)行業(yè)創(chuàng)作邏輯

3D大模型到底能發(fā)揮什么作用？這是一個(gè)很重要的話題，之前我也沒和大家深入聊過。它的出現(xiàn)，正在多個(gè)行業(yè)里引發(fā)深刻變革。

在游戲領(lǐng)域，這種變革尤為顯著。過去，開發(fā)一款專業(yè)游戲往往需要投入數(shù)億甚至更多資金，幾百人甚至上千人的團(tuán)隊(duì)耗時(shí)數(shù)年才能完成，不僅投資風(fēng)險(xiǎn)大，周期也很長。而現(xiàn)在，尤其是在美術(shù)環(huán)節(jié)，創(chuàng)作成本大幅下降；更重要的是，創(chuàng)作門檻降低了——不僅大公司能開發(fā)游戲，一些小型工作室甚至個(gè)人都能制作更輕量級的游戲，而且周期更短、成本更低。

在空間與場景設(shè)計(jì)領(lǐng)域，3D大模型的應(yīng)用也在改變傳統(tǒng)流程。前段時(shí)間，我們剛和酷家樂簽署戰(zhàn)略合作協(xié)議，用戶可以在里面生成自己的家，進(jìn)行布置——想把桌子放在室內(nèi)中央，放一個(gè)沙發(fā)，擺一些擺件，都能直接生成；生成完成后，用戶可以在軟件里直接下單，系統(tǒng)會推薦相近的產(chǎn)品，還能讓消費(fèi)者清楚了解設(shè)計(jì)的預(yù)算。

XR領(lǐng)域的發(fā)展長期受限于創(chuàng)作門檻和成本過高，導(dǎo)致內(nèi)容嚴(yán)重不足。而現(xiàn)在，已有幾千個(gè)XR應(yīng)用是基于我們的技術(shù)能力開發(fā)出來的。比如開發(fā)者創(chuàng)作的“XR日記”，過去日記是文字形式，現(xiàn)在可以變成3D場景；還有一個(gè)開發(fā)者制作的釣魚游戲，突破了傳統(tǒng)釣魚游戲內(nèi)容重復(fù)的問題——AI能自動生成不同地域的特色魚類，用戶去中國區(qū)域釣魚，會遇到中國特有的魚；去大西洋區(qū)域釣魚，會遇到大西洋的特色魚類，內(nèi)容深度大幅增加，開發(fā)者只需在中間設(shè)一個(gè)池塘，就能讓用戶不斷體驗(yàn)釣魚的樂趣。

3D大模型還為設(shè)計(jì)領(lǐng)域的從業(yè)者和學(xué)習(xí)者提供了便利。很多2D設(shè)計(jì)從業(yè)者畫草圖、拍照片、做2D設(shè)計(jì)都沒問題，但要在3D領(lǐng)域展現(xiàn)創(chuàng)意就會遇到困難；中國一些美術(shù)院校的大學(xué)生做畢設(shè)時(shí)，無論是新媒體交互、當(dāng)代藝術(shù)還是陳設(shè)藝術(shù)，都需要將作品3D化，而3D大模型正好能滿足這一需求。

在實(shí)時(shí)互動場景中，3D大模型的應(yīng)用也很有意思。比如在網(wǎng)易今年年初發(fā)布的游戲《燕云十六聲》中，有一個(gè)叫“萬物太極”的亮點(diǎn)玩法：玩家在游戲中往前走，遇到一條河過不去，就能生成一座橋走過去；遇到天上的寶箱夠不到，能實(shí)時(shí)生成一個(gè)梯子爬上去；打怪獸打不過，能生成一棵樹躲在后面。這種交互形態(tài)，在虛擬世界、數(shù)字孿生、XR元宇宙等場景中，將會成為非常主流的交互方式——心里想要什么，或者用文字、圖片表達(dá)出來，對應(yīng)的3D內(nèi)容就能實(shí)時(shí)生成并實(shí)現(xiàn)交互。

03跨界融合，從虛擬創(chuàng)作到實(shí)體落地的全鏈路

3D大模型的價(jià)值不僅局限于虛擬領(lǐng)域，更在于打通虛擬與現(xiàn)實(shí)的連接，尤其是在實(shí)體行業(yè)中發(fā)揮著重要作用。

在電商領(lǐng)域，展示展陳是非常重要的一環(huán)。目前大部分展示展陳方式和信息傳遞方式都以2D為主，而3D大模型能改變這一現(xiàn)狀——隨著3D創(chuàng)作門檻和成本的下降，那些用2D難以充分傳遞信息或信息密度不夠高的場景，都能通過3D來呈現(xiàn)，不僅信息密度大大提升，沉浸感也會更好。除了電商，博物館的展品展示、菜單呈現(xiàn)、廣告、教育等場景，都能借助3D技術(shù)提升效果。

在品牌營銷領(lǐng)域，3D大模型正在激活UGC的潛力。過去，品牌發(fā)布IP時(shí)，往往只能通過官方賬號或請KOL發(fā)布視頻進(jìn)行傳播；而現(xiàn)在，品牌可以向二創(chuàng)開發(fā)者和創(chuàng)作者社區(qū)開放能力，讓他們快速進(jìn)行二次創(chuàng)作，這些大量的3D內(nèi)容能在朋友圈、抖音、小紅書等平臺快速傳播，形成更廣泛的二次傳播效應(yīng)。

更重要的是，3D大模型正在與柔性化生產(chǎn)（尤其是3D打?。┚o密結(jié)合，讓文創(chuàng)產(chǎn)品從虛擬創(chuàng)意走向?qū)嶓w落地。在文旅場景和定制化產(chǎn)品生產(chǎn)中，這種結(jié)合尤為明顯：用戶可以通過3D大模型表達(dá)自己的定制需求，系統(tǒng)則快速生成設(shè)計(jì)圖或工業(yè)原稿，直接對接產(chǎn)線進(jìn)行3D打印。無論是手辦、鍵帽、鑰匙扣、冰箱貼，還是其他任何文創(chuàng)產(chǎn)品，用戶只需通過文字或圖片輸入想法，就能輸出3D設(shè)計(jì)稿，進(jìn)入生產(chǎn)流程，最終收到定制化的實(shí)體產(chǎn)品。