Meta開(kāi)源AI語(yǔ)言模型MusicGen 可將文本和旋律轉(zhuǎn)化為完整樂(lè)曲

　　6月12日消息，Meta 近日在 Github 上開(kāi)源了其 AI 語(yǔ)言模型 MusicGen，該模型基于谷歌 2017 年推出的 Transformer 模型。MusicGen 主要用于音樂(lè)生成，它可以將文本和已有的旋律轉(zhuǎn)化為完整樂(lè)曲。

　　據(jù)IT之家報(bào)道，研發(fā)團(tuán)隊(duì)表示：“我們使用了 2 萬(wàn)小時(shí)的授權(quán)音樂(lè)來(lái)對(duì)訓(xùn)練該模型，并采用 Meta 的 EnCodec 編碼器將音頻數(shù)據(jù)分解為更小的單元進(jìn)行并行處理，進(jìn)而讓 MusicGen 的運(yùn)算效率和生成速度都比同類(lèi)型 AI 模型更為出色。”

　　除此之外，MusicGen 還支持文本與旋律的組合輸入，例如你可以提出生成“一首輕快的曲目”并同時(shí)要求“將它與貝多芬的《歡樂(lè)頌》結(jié)合起來(lái)”。

　　研發(fā)團(tuán)隊(duì)還對(duì) MusicGen 的實(shí)際表現(xiàn)進(jìn)行了測(cè)試。結(jié)果顯示，與谷歌的 MusicLM 以及 Riffusion、Mousai、Noise2Music 等其他音樂(lè)模型相比，MusicGen 在測(cè)試音樂(lè)與文本提示的匹配度以及作曲的可信度等指標(biāo)上表現(xiàn)更好，總體而言略高于谷歌 MusicLM 的水平。