視頻編輯工具Fairy 通過(guò)自然語(yǔ)言即可轉(zhuǎn)換風(fēng)格

　　Fairy是由Meta GenAI開(kāi)發(fā)的一個(gè)視頻編輯工具，它可以通過(guò)自然語(yǔ)言指令對(duì)視頻進(jìn)行編輯，包括風(fēng)格轉(zhuǎn)換和物體或角色變換等。該工具的速度非�？�，能夠在14秒內(nèi)生成120幀的512×384視頻。

　　Fairy的主要功能特點(diǎn)包括風(fēng)格轉(zhuǎn)換和物體或角色變換。通過(guò)Fairy，用戶(hù)可以將視頻中的圖像風(fēng)格轉(zhuǎn)換為不同的藝術(shù)風(fēng)格，例如梵高或畢加索風(fēng)格，同時(shí)保持視頻的原始內(nèi)容和結(jié)構(gòu)。此外，F(xiàn)airy還可以將視頻中的特定物體或角色轉(zhuǎn)換成其他形式，例如將人物轉(zhuǎn)換成木雕或金屬騎士雕塑。

　　除此之外，F(xiàn)airy還能夠處理相對(duì)較長(zhǎng)的視頻，而不會(huì)遇到內(nèi)存問(wèn)題。在進(jìn)行風(fēng)格轉(zhuǎn)換或物體變換時(shí)，F(xiàn)airy能夠保留視頻中的重要細(xì)節(jié)，確保編輯后的視頻仍然保持高質(zhì)量和真實(shí)感。同時(shí)，F(xiàn)airy特別注重在編輯過(guò)程中保持視頻的時(shí)間連貫性，確保從一幀到下一幀的過(guò)渡自然和流暢。

　　技術(shù)細(xì)節(jié)方面，F(xiàn)airy采用了一種基于錨點(diǎn)的跨幀注意力機(jī)制，能夠在視頻幀之間隱式地傳播擴(kuò)散特征，從而確保時(shí)間上的連貫性和高保真度的視頻合成。

　　此外，F(xiàn)airy還使用了基于擴(kuò)散模型的方法來(lái)生成或編輯視頻幀，以及特殊的數(shù)據(jù)增強(qiáng)策略，使模型能夠更好地處理視頻中的自然運(yùn)動(dòng)和變換。同時(shí)，F(xiàn)airy的設(shè)計(jì)支持并行計(jì)算，使其能夠在多個(gè)GPU上同時(shí)處理視頻，從而顯著提高處理速度。