大模型“聚會(huì)”：國(guó)內(nèi)卷價(jià)格，國(guó)外卷能力

　　在中美AI大模型的競(jìng)爭(zhēng)上，正衍生出兩種不同的路徑。

　　繼北京時(shí)間5月14日凌晨OpenAI春季發(fā)布會(huì)上，OpenAI推出兼具聽、看、說能力的GPT-4o后。北京時(shí)間5月15日凌晨谷歌I/O開發(fā)者大會(huì)上，谷歌CEO桑達(dá)爾·皮查伊發(fā)布數(shù)十款Google和AI 結(jié)合產(chǎn)品，堪稱“全家桶”級(jí)別，全面圍剿Open AI。

　　其中包括支持200萬(wàn)token長(zhǎng)文本的Gemini 1.5 Pro和 Gemini 1.5 Flash，對(duì)標(biāo)Sora的Veo，開源模型Gemma 2，支持生成式搜索的AI Overviews、第六代TPU等。

　　整場(chǎng)開發(fā)者大會(huì)最大的看點(diǎn)為，谷歌推出的AI語(yǔ)音助手——Astra，它能夠通過攝像頭識(shí)別物體、代碼和各種東西�，F(xiàn)場(chǎng)演示視頻中，用戶要求Astra在看到發(fā)出聲音的東西時(shí)告訴她，助手回答說，它可以看到一個(gè)發(fā)出聲音的揚(yáng)聲器。對(duì)于一閃而過的蘋果，Astra居然也能夠準(zhǔn)確回答出在眼鏡旁邊。

　　除Astra外，谷歌還推出基于Gemini的多款通用AI Agent子系列產(chǎn)品。如音頻的NotebookLM、音樂的Music AI Sandbox、視頻的Veo、圖像的Imagen 3，直接對(duì)標(biāo)OpenAI發(fā)布的GPT-4o、Dall-E和Sora。

　　和谷歌、OpenAI圍繞技術(shù)之爭(zhēng)不同的是，國(guó)內(nèi)大模型或?qū)⒂瓉韮r(jià)格戰(zhàn)時(shí)代。在5月15日字節(jié)舉辦2024春季火山引擎Force原動(dòng)力大會(huì)上，字節(jié)推出3款A(yù)I產(chǎn)品，包括AI生圖產(chǎn)品 PicPic、AI 教育產(chǎn)品河馬愛學(xué)、AI 劇情互動(dòng)產(chǎn)品貓箱。

　　除這三款產(chǎn)品外，字節(jié)面向TOC端的產(chǎn)品還包括定位AI教育的Gauth，定位AI對(duì)話的豆包和CiCi;定位AI工具的小悟空ChitChop;定位Al Bot創(chuàng)建平臺(tái)的Coze和扣子;定位AI互動(dòng)劇情的BagelBel等。

　　但字節(jié)率先啟動(dòng)行業(yè)價(jià)格戰(zhàn)，火山引擎總裁譚待表示，豆包大模型將開啟付費(fèi)商業(yè)化，且定價(jià)遠(yuǎn)低于行業(yè)價(jià)格。以豆包通用模pro-32k版為例，模型推理輸入價(jià)格僅為0.0008元/千Tokens。市面上同規(guī)格模型的定價(jià)一般為0.12元/千Tokens，是豆包模型價(jià)格的150倍。

　　字節(jié)本輪降價(jià)后，后續(xù)國(guó)內(nèi)其他大模型廠商或?qū)⒏�隨。但降價(jià)能否幫助國(guó)內(nèi)大模型廠商帶來更多新增用戶和付費(fèi)用戶，仍值得商榷。

　　GPT-4o和谷歌Gemini不斷宣傳現(xiàn)階段AI能力大幅度提高，兩家誰(shuí)的大模型能力更強(qiáng)呢?基于此，我們也對(duì)GPT-4o和Gemini展開了多維度的測(cè)試。

　　一、文本輸出：Gemini和GPT-4o愈發(fā)接近，部分能力已趕超

　　因GPT-4o和Gemini均屬于世界TOP級(jí)的大模型，在測(cè)試兩家大模型的文本輸出能力上，我們直接將難度升級(jí)。

　　為什么很多國(guó)家仍以油車為主?你覺得影響新能源汽車海外滲透率提高的因素有哪些?我們將這一問題同時(shí)給到GPT-4o和Gemini，二者均指出充電基礎(chǔ)設(shè)施建設(shè)、購(gòu)置成本、技術(shù)進(jìn)步、政策支持、消費(fèi)者文化習(xí)慣是很多國(guó)家仍以燃油車為主的原因。

　　但相較于GPT-4o，Gemini不僅識(shí)別到我們提問的是兩個(gè)問題，且均給出答案，也回答出GPT-4o沒有指出的車企方面、宣傳教育方面的問題。也就是說，Gemini的回答可能更為完整。

　　圖源：基于Gemini和GPT-4o生成內(nèi)容整理 DoNews制圖

　　我們繼續(xù)追問要求兩個(gè)大模型同時(shí)給我們撰寫一份10000字全球新能源汽車報(bào)告，并要求報(bào)告中需要包括行業(yè)價(jià)格戰(zhàn)、電池技術(shù)、未來發(fā)展方向、產(chǎn)業(yè)趨勢(shì)。

　　但此時(shí)兩個(gè)大模型的表現(xiàn)已經(jīng)出現(xiàn)明顯差異，GPT-4o給我們生成七大章節(jié)的框架，每個(gè)框架下也要對(duì)應(yīng)的小框架。但就是不輸出我們要求的內(nèi)容，這或許和當(dāng)前GPT-4o在長(zhǎng)文本能力上的欠佳有關(guān)。

　　圖源：GPT-4o官網(wǎng)

　　Gemini雖給我們具體的文本內(nèi)容，但全文1679字和我們要求的萬(wàn)字報(bào)告差距較大。內(nèi)容被大幅度壓縮后，整個(gè)內(nèi)容質(zhì)量也相對(duì)欠佳。

　　如在提到新能源汽車產(chǎn)業(yè)趨勢(shì)發(fā)展上，Gemini給出的內(nèi)容為產(chǎn)業(yè)鏈整合、跨界合作、國(guó)際化競(jìng)爭(zhēng)，每條內(nèi)容僅有一句話進(jìn)行概括。換言之，在真正涉及行業(yè)專業(yè)性問題上，Gemini和GPT-4o均存在不同程度的短板。

　　圖源：Gemini官網(wǎng)

　　當(dāng)我們將難度繼續(xù)提高后，詢問為什么今年以來全球大宗商品價(jià)格持續(xù)上漲?這種漲幅帶來的影響有哪些?未來價(jià)格是否會(huì)回落?在首問中GPT-4o和Gemini給出的答案有所相同，均指出和供應(yīng)鏈、地緣沖突、全球經(jīng)濟(jì)等因素有關(guān)。且在未來價(jià)格走勢(shì)預(yù)測(cè)中，兩者給到的答案也基本相同。

　　但在漲幅所帶來的影響上，Gemini給出的答案可能更為完整。尤其是在金融、企業(yè)利潤(rùn)、社會(huì)等方面的影響，GPT-4o并未指出。

　　圖源：基于Gemini和GPT-4o生成內(nèi)容整理 DoNews制圖

　　在文本內(nèi)容快速分析上，我們讓兩款大模型同時(shí)給我們分析安克創(chuàng)新2024年Q1財(cái)報(bào)中存在的風(fēng)險(xiǎn)點(diǎn)，GPT-4o生成的風(fēng)險(xiǎn)點(diǎn)包括現(xiàn)金流減少、高額的銷售費(fèi)用和管理費(fèi)用、財(cái)務(wù)費(fèi)用大幅度波動(dòng)、公允價(jià)值帶來?yè)p失這四點(diǎn)。

　　圖源：GPT-4o官網(wǎng)

　　但Gemini給出的內(nèi)容卻包括營(yíng)收增速放緩、經(jīng)營(yíng)活動(dòng)大幅度下降、銷售費(fèi)用和管理費(fèi)用大幅度增加、存貨跌價(jià)損失增加、匯兌大幅度增加、對(duì)政府補(bǔ)助依賴這六點(diǎn)。這也不能看出，Gemini的回答更為完整。

　　圖源：Gemini官網(wǎng)

　　而當(dāng)我們要求兩款大模型同時(shí)以如何幫助失戀的人走出陰影，寫一篇2000字的文章。要求文章有觀點(diǎn)，并且文章內(nèi)需要配上對(duì)應(yīng)的圖片和音頻，Gemini的表現(xiàn)可以說完全吊打GPT-4o。

　　在文章開頭，Gemini直接放入一曲舒緩的音樂，且這個(gè)音樂也支持播放。每個(gè)細(xì)分章節(jié)下，Gemini直接從網(wǎng)站上檢索到和內(nèi)容相關(guān)的圖片，實(shí)現(xiàn)OpenAI提到的文本、音頻、圖像的任意組合。

　　圖源：Gemini官網(wǎng)

　　對(duì)比之下，GPT-4o給到的內(nèi)容就有些遜色。除文章開始處能看到圖片外，其余正文處均未看到任何和內(nèi)容相關(guān)的圖片，且全文中也看不到音頻。

　　圖源：GPT-4o官網(wǎng)

　　整體測(cè)試下來后我們發(fā)現(xiàn)，谷歌在生成式AI領(lǐng)域尤其在文本能力輸出上已經(jīng)從“落后”到追趕，甚至內(nèi)容質(zhì)量上、內(nèi)容組合等能力上已經(jīng)超過GPT-4o。

　　二、對(duì)比之下，Gemini綜合能力不容忽視

　　在測(cè)試過程中，我們發(fā)現(xiàn)Gemini不僅支持文本內(nèi)容提問，且也支持語(yǔ)音提問。但因國(guó)內(nèi)網(wǎng)絡(luò)受限，暫無法對(duì)語(yǔ)音功能進(jìn)行測(cè)試，也無法判斷這是否為谷歌發(fā)布會(huì)上提到的Astra。相較于谷歌的快速，GPT-4o目前仍是支持單一的文本內(nèi)容提問。