虛擬現(xiàn)實的新血液 AI 賦能下的 3D 建模行業(yè)

　　生成式 AI 的上限在哪里?這個問題的答案或許在短時間內都不會有答案，至少現(xiàn)在生成式 AI 似乎又征服了一個新的領域。此前，生成式 AI 的工作范湊主要集中在文字處理、繪畫、聲音處理等方面，但是生成式 AI 的能力顯然遠不止于此。

　　近日，開源生成式 AI 公司 Stability AI 正式發(fā)布了 Stable Animation SDK，以及備受關注的 Stable Diffusion 模型(以下簡稱 Stable)也正式公布新版本，現(xiàn)在用戶可以更好的控制 AI 生成的 3D 模型，并且對特定參數(shù)進行修改。

　　或許很多人看到這個消息的想法是："3D 模型?是指方塊、長條之類的東西?"，畢竟在多數(shù)人看來，真正的 3D 建模復雜性恐怕是普通 AI 難以處理的。不過，生成式 AI 的魅力就在這里，通過對數(shù)據(jù)的處理與分析，配合對自然語言的理解，如今的 AI 可以根據(jù)描述生成更加復雜、完善的模型，并不僅限于簡單的方塊模型。

　　不僅僅是 2D 變 3D

　　在此之前，Stable 就因為可以將 2D 畫面、描述直接轉換成 3D 模型而引起了許多關注，Stable 生成的 3D 模型在精細度上雖然比不上專業(yè)人員花長時間搭建的模型，但是考慮到生成所需的時間，也足以帶給大家不小的震撼。

　　而在 Stability AI 公布的最新演示視頻中，Stable 的 3D 模型已經(jīng)不僅限于靜物，即使是一直在運動的人物形象，也可以輕松轉變?yōu)?3D 模型，并且運動的幅度、姿勢都與原版十分接近。類似的技術在動畫制作中其實經(jīng)常被用到，一些動畫為了讓畫面、物體顯得更具有立體感時，就會通過 2D 轉 3D 的方式來制作這段畫面，凸顯畫面的張力

　　而在傳統(tǒng)的動畫行業(yè)里，想要將 2D 畫面轉為 3D，需要不少工作人員忙碌一段時間，而在 Stable 的幫助下，只需要將 2D 畫面輸入模型中，即可獲得高質量的起始 3D 模型，大幅度降低建模所需的時間與成本。

　　當然，如果只是這樣，或許也就從業(yè)者會高興，對于廣大網(wǎng)友來說，Stable 又有什么用呢?關鍵就在于 Stable 的 3D 模型生成并不需要精細的引導，即使只是簡筆畫，Stable 也可以生成出大差不差的 3D 模型，比如這幅如圖幼兒園小孩般的涂鴉，經(jīng)過 Stable 的 " 潤色 " 后就變成了一個還算能看的 3D 畫面。

　　讓你的一切繪畫作品，甚至文字動起來，這就是 Stable 的期盼與目標。所以，Stability AI 的所有成果都是直接公開，以開源的方式提供給網(wǎng)友使用，對于廣大二次元愛好者來說，或許這是讓他們的 " 紙片老婆 " 們動起來的最簡單方法。

　　而且從 Stable 的 3D 動態(tài)模型生成能力中，我們也可以看到一些未來的應用場景，比如更低廉、便利的動作捕捉系統(tǒng)，理論上只要算力足夠，就可以通過攝像頭捕捉的畫面實時生成對應的 3D 模型動作。

　　除此之外還有什么妙用呢?不知道大家是否有看過近日的一個熱聞，海外網(wǎng)紅 Caryn Marjorie 通過與 AI 團隊合作，用 GPT-4 復制了一個數(shù)字版的自己，然后將數(shù)字版的使用權以每分鐘一美元的價格出售給自己的粉絲。

　　在短短的一周里，Caryn Marjorie 就以此獲得了 7.1 萬美元的收入，而她提供的僅僅是語音對話閑聊服務。作為視覺生物，我們對于聲音的敏感度其實要低于畫面，如果 Stable 也被應用到相關領域，是否可能打造出真正意義上的 AI 女友呢?可動、可聊，足以撫慰你空虛的內心。

　　咳咳，好吧，這個話題先打住，至少在目前的模型效率和算力規(guī)模下，個人想要實現(xiàn)實時且高規(guī)格的 3D 動態(tài)模型生成，恐怕還十分困難，但是考慮到半導體行業(yè)的進步速度，或許這一天離我們并不遙遠。

　　全新的生產(chǎn)力工具

　　Stable 此前最大的問題在于只能根據(jù)描述或圖像來生成 3D 模型，如果生成的效果不好，只能重新調整圖像或文字信息來重新生成，根據(jù)顯卡的性能不同，3D 模型的生成時間也會有所區(qū)別，相較于 ChatGPT 等傳統(tǒng)問答式 AI，Stable 的時間成本高很多。

　　所以，雖然 Stable 的 3D 模型生成效果遠優(yōu)于以往的類似應用，使用場景卻十分受限，僅僅是能夠給社區(qū)愛好者提供一個簡單便利的 3D 模型生成工具。一直以來，社區(qū)用戶都希望 Stability AI 就可以給 Stabel 增加參數(shù)調整功能，這樣就可以對不滿意的模型細節(jié)進行修改。

　　Stability AI 給出的回應就是 Stable Animation SDK，該接口可以被加載到 Stabel 的模型中，用戶在使用 Stabel 生成 3D 模型后，可以通過接口直接輸入對應的參數(shù)，調整或增加模型的細節(jié)，讓模型更符合用戶的要求。

　　從接口的描述文件來看，支持修改的參數(shù)非常多，從基礎的顏色、形狀、大小、紋理到動作姿勢等都可以進行調節(jié)，而且調節(jié)過程并不需要輸入專業(yè)數(shù)據(jù)或是名詞，只需要如圖生成 3D 模型時一樣輸入文字信息即可。

　　比如你生成了一只小狗的 3D 模型，然后覺得小狗身上的花紋不太滿意，只需要從接口輸入你想要的花紋描述，Stabel 就會根據(jù)描述對模型進行修改并重新渲染相關圖層。

　　除此之外，Stable Animation SDK 還支持動作命令的輸入，可以讓靜態(tài)的 3D 模型直接執(zhí)行你的動作指令，比如你渲染了一只飛龍，然后輸入指令 " 讓龍飛起來噴火 "，Stable 就會開始對 3D 模型進行動作渲染。

　　而且 Stable 還提供攝影功能，用戶可以調整拍攝機位、照明效果、背景等一系列的參數(shù)，對 3D 模型進行靜態(tài)和動態(tài)的錄像。是的，大家估計都猜到了，3D 建模、3D 動畫等與 3D 建模有關的行業(yè)，都將會感受到來自 AI 的 " 溫暖 "。

　　另外，部分網(wǎng)友認為 Stable 與虛擬現(xiàn)實設備結合，或許會讓虛擬現(xiàn)實設備的生產(chǎn)力表現(xiàn)得到飛躍式提升。大家應該都看過漫威電影《鋼鐵俠》，電影主角史塔克就擁有一個高級人工智能程序 " 賈維斯 "，在史塔克制造鋼鐵俠鎧甲時給予了許多幫助。

　　其中一個片段就是史塔克通過對話直接生成了一個零件的 3D 模型，然后對其進行調整并應用到鎧甲上，這套流程聽起來是不是有點耳熟?沒錯，某種意義上這就是 Stable+ChatGPT 的未來版本，通過對話直接創(chuàng)造出 3D 模型，讓設計師可以在虛擬現(xiàn)實設備中直接檢視物品的外觀、使用效果等。

　　將這個過程放到現(xiàn)實生活照，就相當于將產(chǎn)品設計中最耗時的打樣、調整過程簡化，實質性的提高產(chǎn)品從設計到落地的整個流程效率。而且，結合虛擬現(xiàn)實設備的功能，甚至可以讓設計師提前在虛擬現(xiàn)實中使用和體驗自己的產(chǎn)品。

　　當然，現(xiàn)在的產(chǎn)品設計流程中，其實就已經(jīng)廣泛利用類似的 3D 模型軟件來渲染場景，但是 Stable 的優(yōu)勢在于生成的速度，本來需要數(shù)小時甚至數(shù)天進行調整渲染的模型，如今只需要十分之一或更短的時間即可生成，背后所帶來的效率提升不言而喻。

　　隨著生成式 AI 的遍地開花，可以看到 AI 對我們的社會、生產(chǎn)等方面會造成十分深遠的影響，今天是 3D 模型，明天又會是什么?我非常期待。

　　來源：雷科技 Ieitech