谷歌旗下人工智能研究機構(gòu) DeepMind 發(fā)布了一款名為 Genie 2 的新型模型,可通過單張圖片和文字描述生成“無限”種類的可玩 3D 世界。作為今年初推出的 Genie 模型的升級版,Genie 2 標志著人工智能在虛擬世界生成領(lǐng)域的一次重大突破。
Genie 2 能夠根據(jù)用戶輸入的文本描述和圖像,實時生成交互式的三維場景。例如,輸入“森林中的可愛人形機器人”,模型便可構(gòu)建一個包含機器人角色和可探索環(huán)境的動態(tài)場景。用戶可以通過鍵盤或鼠標操作角色在世界中進行跳躍、游泳等互動。
DeepMind 表示,Genie 2 可以生成具有不同視角(如第一人稱視角和等距視角)的連貫世界,持續(xù)時間長達一分鐘,其中大多數(shù)持續(xù) 10 到 20 秒。
DeepMind 還稱,Genie 2 在生成過程中能夠模擬物體交互、動畫、光照、物理反射以及“非玩家角色”(NPC)的行為。許多生成的場景畫質(zhì)接近 AAA 級別的電子游戲,甚至在物體視角一致性和場景記憶方面表現(xiàn)優(yōu)異。
與之類似的模型還有李飛飛創(chuàng)立的 World Labs 和以色列初創(chuàng)公司 Decart 的產(chǎn)品,雖然大多數(shù)像 Genie 2 這樣的模型 —— 也就是世界模型 —— 可以模擬游戲和 3D 環(huán)境,但存在偽影、一致性和幻覺相關(guān)的問題。例如,Decart 的 Minecraft 模擬器 Oasis 分辨率低,并且很快就會“忘記”關(guān)卡的布局。然而,Genie 2 可以記住模擬場景中不在視野范圍內(nèi)的一部分,并在它們再次可見時準確地渲染它們。(World Labs 的模型也可以做到這一點。)
值得注意的是,DeepMind 未詳細披露 Genie 2 的訓練數(shù)據(jù)來源,但業(yè)內(nèi)推測其可能包括大量熱門游戲的游玩記錄?紤]到谷歌可訪問 YouTube 海量視頻資源,并聲稱擁有使用其內(nèi)容進行訓練的權(quán)利,這引發(fā)了外界對該模型是否侵犯知識產(chǎn)權(quán)的爭議。
目前用 Genie 2 創(chuàng)建的游戲?qū)嶋H上不會那么有趣,因為每隔一分鐘左右就會抹去進度。因此,DeepMind 將其定位為研究與創(chuàng)意工具,應用于快速原型設(shè)計和 AI 智能體評估等場景。
DeepMind 在其博客中寫道:“通過 Genie 2 的泛化能力,概念藝術(shù)和手繪草圖可以轉(zhuǎn)化為完全互動的環(huán)境。這讓研究人員能夠快速生成多樣化的環(huán)境,為未見過的任務(wù)場景提供評估支持。”
谷歌對世界模型研究的投入在持續(xù)擴大。今年 10 月,DeepMind 聘請了 OpenAI 前視頻生成項目負責人 Tim Brooks,同時兩年前從 Meta 挖來了以開放式實驗聞名的 Tim Rockt schel。
文章內(nèi)容僅供閱讀,不構(gòu)成投資建議,請謹慎對待。投資者據(jù)此操作,風險自擔。
2024年的Adobe MAX 2024發(fā)布會上,Adobe推出了最新版本的Adobe Creative Cloud。
奧維云網(wǎng)(AVC)推總數(shù)據(jù)顯示,2024年1-9月明火炊具線上零售額94.2億元,同比增加3.1%,其中抖音渠道表現(xiàn)優(yōu)異,同比有14%的漲幅,傳統(tǒng)電商略有下滑,同比降低2.3%。
“以前都要去窗口辦,一套流程下來都要半個月了,現(xiàn)在方便多了!”打開“重慶公積金”微信小程序,按照提示流程提交相關(guān)材料,僅幾秒鐘,重慶市民曾某的賬戶就打進了21600元。
華碩ProArt創(chuàng)藝27 Pro PA279CRV顯示器,憑借其優(yōu)秀的性能配置和精準的色彩呈現(xiàn)能力,為您的創(chuàng)作工作帶來實質(zhì)性的幫助,雙十一期間低至2799元,性價比很高,簡直是創(chuàng)作者們的首選。
9月14日,2024全球工業(yè)互聯(lián)網(wǎng)大會——工業(yè)互聯(lián)網(wǎng)標識解析專題論壇在沈陽成功舉辦。