火山引擎：“算法+引擎”支撐智能互動(dòng)特效

　　廣受用戶歡迎的智能互動(dòng)特效，為用戶帶來的沉浸式互動(dòng)體驗(yàn)，是抖音保持高速增長的推力。

　　9月9日，“萬娛自有引力 AI互動(dòng)新生長”火山引擎增長沙龍人工智能專場(chǎng)在上海舉行。

　　火山引擎智能互動(dòng)特效解決方案相關(guān)負(fù)責(zé)人分享了智能互動(dòng)特效幫助企業(yè)實(shí)現(xiàn)增長的實(shí)踐經(jīng)驗(yàn)和技術(shù)探索。

　　據(jù)介紹，在火山引擎，實(shí)現(xiàn)增長主要由效果團(tuán)隊(duì)和算法團(tuán)隊(duì)兩個(gè)團(tuán)隊(duì)合力完成。前者負(fù)責(zé)如何增長以及在增長環(huán)節(jié)中做哪些工作，后者負(fù)責(zé)在算法和引擎等技術(shù)層面進(jìn)行支撐。

　　在火山引擎看來，算法和引擎之間是相輔相成的作用，“最底層的算法作為單點(diǎn)能力的積累，引擎部分沉淀了渲染和實(shí)現(xiàn)效果的東西”。

　　具體來說，火山引擎將其算法部分拆解為算法適配、工程優(yōu)化、場(chǎng)景落地三個(gè)層面。

　　算法適配是指對(duì)于場(chǎng)景需要有更深的理解。從理論上講，不論是近距離或中遠(yuǎn)距離等不同距離的場(chǎng)景，還是仰視、俯視、平視等不同的視角，或者是人像、物理場(chǎng)景等不同的畫面。都需要適配不同的算法才能真正“讀懂”視頻內(nèi)容。體現(xiàn)在實(shí)際效果中，這會(huì)直接決定人在暗光場(chǎng)景下是否足夠清晰，肢體只露半身是不是能達(dá)到足夠好的準(zhǔn)確率等等。

　　在工程優(yōu)化方面，主要是指云渲染、芯片特殊加速等技術(shù)在APU、NPU以及智能網(wǎng)聯(lián)車SOC等不同硬件條件下，能否做到更好的體驗(yàn)。

　　在場(chǎng)景落地方面，就是要在不同場(chǎng)景下解決不同的問題，比如電商場(chǎng)景中試穿試戴的精準(zhǔn)穩(wěn)定，自動(dòng)駕駛場(chǎng)景中對(duì)前方物體的檢測(cè)識(shí)別等等。

　　以上三個(gè)層面涉及到很多種算法，僅在CV領(lǐng)域就涉及到20多個(gè)一級(jí)項(xiàng)目和一百多個(gè)子小項(xiàng)。所以要想對(duì)場(chǎng)景理解得足夠深刻，背后肯定要涉及到大量的技術(shù)人員。

　　在引擎部分，與游戲級(jí)別的渲染引擎產(chǎn)品普遍做得很重、性能消耗巨大不同，移動(dòng)端的引擎要實(shí)現(xiàn)對(duì)多平臺(tái)的支持，而且必須照顧到低端機(jī)型的計(jì)算瓶頸。

　　目前還有不少手機(jī)采用的都是數(shù)年前的芯片產(chǎn)品，主頻等技術(shù)參數(shù)非常低。“在這類手機(jī)上，我們的3D渲染和GAN新玩法能不能給用戶帶去同樣優(yōu)秀的體驗(yàn)?這都是我們?cè)诠こ谭矫嫘枰�解決的問題。”火山引擎智能互動(dòng)特效解決方案相關(guān)負(fù)責(zé)人說。

　　另外在生態(tài)層面，火山引擎也已經(jīng)在著手打造。比如相關(guān)特效已經(jīng)上架大概一萬多款，而且還在以非常高的頻率保持更新;不斷完善數(shù)據(jù)標(biāo)簽，把數(shù)據(jù)可視化同步到平臺(tái)上，方便用戶在云端或者離線使用;火山引擎的這一引擎既是一個(gè)下發(fā)平臺(tái)，也是一個(gè)數(shù)據(jù)監(jiān)控平臺(tái)，中間會(huì)陸續(xù)加入A/B測(cè)試等工具，方便用戶進(jìn)行管理。

　　據(jù)悉，在本次活動(dòng)之后，火山引擎增長沙龍的其他主題活動(dòng)也在陸續(xù)展開，將把字節(jié)跳動(dòng)背后的更多的技術(shù)、產(chǎn)品和生態(tài)開放出來，跟業(yè)內(nèi)合作伙伴一起增長、共贏。