剪映的AI革命，字節(jié)的AI狂想

　　“淘金熱時，聰明的人會去賣鏟子，而剪映就像短視頻時代的那把鏟子。”2019年，剪映作為字節(jié)跳動產(chǎn)品矩陣里的新爆款，在那年年底被字節(jié)跳動內(nèi)部如此形容道。

　　從2021年剪映月活躍用戶超1億，成為國內(nèi)最大的移動視頻編輯產(chǎn)品，到2020年跟隨TikTok揚帆出海，截至2023年剪映海外版Cap Cut月活躍用戶超2億，根據(jù)以上兩個可追溯的數(shù)據(jù)保守估計，剪映和CapCut全球月活躍用戶數(shù)量早已突破3億大關。

　　誕生之時，剪映被視為一個依附于抖音的工具App，在視頻剪輯、編輯等主要功能之外，通過提供剪輯模版、豐富的素材庫，降低短視頻UGC(用戶生產(chǎn)內(nèi)容)創(chuàng)作門檻。

　　而恐怕讓很多人都沒想到的是，隨著產(chǎn)品迭代、功能越來越強大，它逐漸成長為中長視頻PGC(專業(yè)生產(chǎn)內(nèi)容)創(chuàng)作者、甚至專業(yè)影視從業(yè)人員必備的生產(chǎn)力工具之一。

　　相比抖音、TikTok，作為生產(chǎn)力工具的剪映在創(chuàng)作者端有口皆碑，但卻鮮少進入大眾視野，引發(fā)討論。

　　然而，最近有兩件事將剪映推上了風口浪尖。一是張楠辭任抖音集團CEO，轉(zhuǎn)向剪映相關業(yè)務;二是OpenAI的文生視頻模型Sora發(fā)布，能夠根據(jù)用戶輸入的文本描述，生成1分鐘的高清視頻。

　　Sora的出現(xiàn)對剪映構成了威脅。相關人士透露，張楠帶隊剪映是想在AI輔助創(chuàng)作上有所突破，推出一個AI視頻和圖像生成產(chǎn)品。也就是說，剪映瞄準的視頻生成賽道正是Sora的領域。

　　Sora會“殺死”剪映嗎?或許探討這個問題之前，更值得關注的是:AI沖擊下，這款在短視頻時代大殺四方的創(chuàng)作工具如今怎么樣了?剪映+AIGC還有新故事可講嗎?

　　為了嘗試回答以上問題，我們梳理了剪映國內(nèi)版與海外版Cap Cut最新的AI功能，希望對內(nèi)容創(chuàng)作者有所幫助的同時，找到問題的解。

　　剪映+AI，悶聲干大事

　　視頻制作流程通常包括前期內(nèi)容策劃、拍攝制作、后期剪輯合成等環(huán)節(jié)，涉及文案撰寫、視頻素材采集、配音錄制、視覺效果制作以及字幕添加等繁瑣的內(nèi)容生產(chǎn)步驟。

　　如今打開剪映，你會發(fā)現(xiàn)AI功能已經(jīng)融入視頻制作的各個環(huán)節(jié)。從一鍵成片到AI特效，其中一些功能已經(jīng)為大家所熟知。為了避免重復造輪子，下面我們重點聊聊剪映最新上線的AI功能。

　　1.AI克隆音色

　　近期，剪映悄悄上線了AI克隆音色。去年年底，該項功能只對少數(shù)用戶開放體驗權限�，F(xiàn)在打開剪映，點擊“開始創(chuàng)作”，添加圖片或視頻素材，點擊菜單欄的“音頻”，即可看到“克隆音色”功能。

　　入口極為隱蔽，但不少眼尖的創(chuàng)作者已經(jīng)玩上了“克隆音色”。

　　例如，百萬粉絲博主“拉宏桑”近期發(fā)布的小紅書視頻《汗流浹背了!發(fā)現(xiàn)了一種新的詐騙方式!》，就通過繞口令、夾子音等方式體驗了AI克隆人聲的效果，一番測試下來，“拉宏桑”認為如果沒有對比，已經(jīng)很難分辨真人和AI克隆的聲音。

　　盡管博主在視頻中沒有提及具體使用的軟件，但通過實測界面，可以明顯看出是剪映最近上線的AI克隆音色功能。

　　由于克隆效果十分驚艷，相比技術進步帶來的生產(chǎn)力提升，評論區(qū)網(wǎng)友更為關心的一個問題是AI聲音克隆所帶來的安全風險。畢竟在實際應用中已有大量AI電信詐騙、版權侵犯的案例。

　　針對該功能，“頭號AI玩家”也淺淺體驗了一下。實測中，點擊“開始克隆”后，會跳出用戶使用須知和錄制提示，需要確認《剪映音色生成條款》才能進入下一步。

　　確認條款后，朗讀錄制一段文本(不支持上傳音頻文件)，即可生成自己的AI克隆聲音。

　　生成的AI克隆聲音會根據(jù)錄制時的語氣和情感發(fā)生變化，那么它可以克隆方言嗎?帶著好奇心，我用家鄉(xiāng)話錄制了一段聲音，上傳生成的聲音依舊是普通話發(fā)音。

　　可見，該功能目前尚不支持克隆方言。并且在實際測試中，我們發(fā)現(xiàn)使用已有的克隆聲音朗讀長文案的效果并不如官方示例所展示的那樣理想。隨著文案長度的增加，AI朗讀時的機械感也變得更加明顯。

　　此外，需要各位玩家注意的是，目前在AI克隆音色上傳的聲音，剪映沒有提供刪除途徑。擔心安全風險的玩家，請謹慎嘗試。

　　2.圖文成片

　　圖文成片功能包含兩個核心步驟:智能寫文案和智能匹配素材。

　　用戶只需要輸入提示詞要求，AI就可以智能生成視頻文案，并根據(jù)文案自動匹配視頻素材，自動添加字幕、配音和配樂，大大簡化了視頻制作流程。

　　比如，輸入“影視解說《銀翼殺手2049》”，不到5秒就給出了視頻文案，確認后點擊右下角的生成視頻，選擇智能匹配素材，就得到了以下這條視頻:

　　從生成的視頻來看，大部分圖片素材都與文字內(nèi)容相關，但視頻完全由簡單的圖片切換構成，顯得有些單調(diào)和無聊。當然你也可以選擇繼續(xù)優(yōu)化編輯，替換掉不合適的圖片，增加視頻素材、特效等。

　　3.數(shù)字人口播

　　用戶可以通過這個功能生成虛擬的數(shù)字人形象，為視頻解說配音。尤其是在需要特定角色或虛擬形象進行口播時，數(shù)字人口播功能可以大大提高制作效率、降低成本。

　　剪映有35個數(shù)字人形象可供選擇，CapCut則有超過138個數(shù)字人形象，這些數(shù)字人有著不同的風格，以適應不同的視頻內(nèi)容和場景需求。

　　數(shù)字人口播功能支持批量制作，這意味著用戶可以一次性制作多個獨立的數(shù)字人視頻。

　　4. 視頻生成

　　最近，剪映海外版CapCut推出了文生視頻功能，用戶可以通過文本提示生成4秒的視頻，支持1:1、16:9、9:16多種比例，每人每天有5次免費生成機會。

　　根據(jù)網(wǎng)友分享的演示界面，Capcut的視頻生成功能與Runway、Pika等主流AI視頻生成工具類似，均支持通過輸入文字提示詞來生成相關視頻。

　　截至發(fā)稿時，我們未能成功訪問該功能的體驗地址(鏈接已整理至文末)。不過，已經(jīng)有體驗過的用戶反饋，目前Capcut文生視頻功能在視頻清晰度、對提示詞的理解以及交互設計方面存在不足，且生成視頻的等待時間可能超過100分鐘。

　　Sora會“殺死”剪映嗎?

　　Sora會不會“殺死”剪映?這是最近圈內(nèi)議論甚廣的一個問題。

　　目前來看，由于Sora和剪映的一些產(chǎn)品功能存在重疊，可能會對剪映構成一定的競爭壓力，但兩者在功能定位、應用場景上存在差異，不太可能出現(xiàn)一方“殺死”另一方的情況。

　　Sora主要專注于利用AI生成視頻內(nèi)容，更側(cè)重于為用戶提供基于文本描述的視頻創(chuàng)作能力。而剪映則提供了較為全面的視頻編輯功能，包括剪輯、特效、音頻處理等，更適合用戶對已有視頻素材進行編輯和創(chuàng)作。用戶可以在需要快速生成視頻時使用Sora，而在需要精細編輯和創(chuàng)作時選擇剪映。

　　新壹科技CEO雷濤表示:“Sora仍是生成視頻素材級別的AI工具，素材生成技術的進步對于剪映、一幀秒創(chuàng)這樣的工具是極大的極好，一方面可以降低對現(xiàn)成素材的依賴，另一方面也可以提升視頻生成效果。”(相關閱讀:爆火的Sora會改變內(nèi)容行業(yè)的游戲規(guī)則嗎?9位一線從業(yè)者這么說)

　　更重要的是，剪映(CapCut)與抖音(TikTok)的深度整合，為用戶提供了更便捷的內(nèi)容創(chuàng)作和分享體驗。

　　最近，張楠宣布辭任抖音集團CEO，重心轉(zhuǎn)向剪映。有接近剪映的人士透露，過去一年，張楠已經(jīng)把絕大多數(shù)精力傾斜到剪映相關業(yè)務上，將在AI輔助視頻內(nèi)容創(chuàng)作方面持續(xù)發(fā)力，并即將推出一個AI生圖和視頻的產(chǎn)品。此外，抖音的短視頻算法、月活超7億的用戶數(shù)據(jù)等，也是剪映逐夢AI賽道的優(yōu)勢。

　　揭秘字節(jié)的AI版圖

　　字節(jié)的AI布局，不僅剪映這一步棋。

　　近幾個月來，字節(jié)在視頻領域的動作不斷，前后發(fā)布了包括Magic Animate、Magic-Me等在內(nèi)的多個AI視頻開源項目。

　　當然，除了當家的視頻業(yè)務外，有著“App超級工廠”之稱的字節(jié)，也在積極擴張其他領域的產(chǎn)品版圖。

　　過去一年，字節(jié)跳動推出了多款基于AI的產(chǎn)品，涵蓋了AI對話/情感伴聊、AI Bot無代碼創(chuàng)建、AI虛擬角色互動等多個類別，展現(xiàn)了其在AI應用賽道上的多元化策略。據(jù)《晚點 LatePost》透露，字節(jié)內(nèi)部有多個AI團隊賽馬。

　　2023年1月，字節(jié)組建了首個大模型團隊�；�于“云雀大模型”，字節(jié)開始測試多個AI產(chǎn)品和服務，比如飛書的My AI，以及代號“Grace”的AI對話類測試項目。2023年下半年，字節(jié)成立了Flow部門。2023年8月，AI聊天應用“豆包”上線。2024年2月，對標GPTs Store的“扣子”在國內(nèi)正式上線。

　　扣子是字節(jié)跳動針對國內(nèi)市場推出的AI Bot創(chuàng)建平臺。它允許用戶無需編程背景就能創(chuàng)建和定制自己的AI助手。用戶可以通過扣子平臺，利用預設的模板和模塊，快速搭建出能夠完成特定任務的AI Bot，如客服機器人、個人助理等。

　　Coze則是字節(jié)跳動面向海外市場推出的AI Bot創(chuàng)建平臺。與扣子類似，Coze也提供了一個開放的使用和創(chuàng)建環(huán)境，用戶可以輕松地將各種插件集成到自己的AI Bot中，實現(xiàn)多樣化的功能。

　　此外，字節(jié)還面向海外市場推出了名為ChitChop的AI工具平臺，該平臺將AI Bot分為多個類別，如AI創(chuàng)作、AI繪圖、娛樂休閑等，用戶可以根據(jù)需求選擇合適的Bot進行互動。

　　BagelBell是字節(jié)于2023年12月推出的AI劇情互動平臺，它能通過連續(xù)劇情創(chuàng)造完整的故事體驗。用戶可以在平臺上與AI角色互動，解鎖不同的劇情和背景場景，享受沉浸式的故事體驗。

　　據(jù)媒體報道，字節(jié)跳動還在內(nèi)部測試一款名為“PicPic”的AI產(chǎn)品，可能與圖片處理相關。

　　總的來說，字節(jié)在AI領域的多元布局展現(xiàn)了其積極的市場競爭態(tài)度，以及對市場需求變化的敏感性，這有助于其在多個細分市場中建立影響力，從而降低對單一市場的依賴。但值得注意的是，基于AI的產(chǎn)品創(chuàng)新或許能在短期內(nèi)吸引用戶，但長期競爭力的構建需要持續(xù)的投入與積累。