嘗鮮訊飛星火認(rèn)知大模型 看看它能力如何？

　　4月24日，科大訊飛在官微上發(fā)布訊飛星火認(rèn)知大模型，不過目前官方對(duì)其介紹并不多，該認(rèn)知大模型將于5月6日正式亮相。DoNews通過申請(qǐng)拿到了這款認(rèn)知模型的內(nèi)測(cè)名額，并進(jìn)行了大量的測(cè)試。

　　通過科大訊飛的介紹，可以看到，通過海量文本、代碼和知識(shí)的學(xué)習(xí)，訊飛星火認(rèn)知大模型擁有跨領(lǐng)域的知識(shí)和語言理解能力，能夠基于自然對(duì)話方式理解與執(zhí)行任務(wù)，只需一個(gè)指令，訊飛星火認(rèn)知大模型便可以懂你所言、答你所問、創(chuàng)你所需、解你所難、學(xué)你所教�？梢哉f是非常貼心的“智能助手“。

　　具體體驗(yàn)如何，我們來親自體驗(yàn)一下吧。

　　以下是部分測(cè)試的截圖：

　　首先，提出簡(jiǎn)單的問題：可以做一下自我介紹嗎?

　　在首次操作中，內(nèi)容的快速生成還是出乎意料的。

　　一、創(chuàng)作能力

　　作為文字工作者最關(guān)心的莫過于創(chuàng)作能力和數(shù)據(jù)的實(shí)時(shí)性。先來一題“出一篇《長(zhǎng)月燼明》的影評(píng)“，看看它的寫作能力。

　　可以看到，訊飛星火認(rèn)知大模型的回復(fù)僅是在套用模板化的格式，對(duì)于其主角描述存在誤差的。我們點(diǎn)擊“重新生成”按鈕，希望訊飛星火認(rèn)知大模型再次回答，看看結(jié)果能否讓人滿意。

　　從結(jié)果來看，仍然不盡如人意。先拋開劇情的套話描述，其演員團(tuán)隊(duì)依舊是錯(cuò)誤的。

　　再來一個(gè)問題：以“訊飛星火”做一首藏頭詩.

　　通過以上兩次生成的內(nèi)容來看，訊飛星火認(rèn)知大模型有一定的能力，但其能力并不完美，完成度只能達(dá)到50%左右。

　　對(duì)外的內(nèi)容出現(xiàn)偏差，可以理解，那對(duì)內(nèi)呢?來問一下，科大訊飛2022年的營(yíng)收情況。

　　這個(gè)回復(fù)是出乎意料的。在時(shí)間上，科大訊飛在4月20日晚已發(fā)布財(cái)報(bào)，不是未來時(shí)間。同時(shí)，作為語言模型，訊飛星火認(rèn)知大模型也未生成模板化的內(nèi)容。

　　二、邏輯能力

　　把兩杯50度的水融在一起后，水的溫度是多少?

　　1+1在什么情況下等于3?

　　如果貓會(huì)爬樹，那么狗也會(huì)。

　　針對(duì)邏輯性問題，筆者也嘗試了重新生成，來看看有沒有不同的答案，但多次生成的回復(fù)是一樣的。

　　三、編程能力

　　先來一個(gè)簡(jiǎn)單的編程問題“從1加到100等于多少，請(qǐng)用JAVA語言編程，并得出結(jié)論。”

　　“編寫一個(gè)JAVA程序，用if-else語言判斷2023年是否為閏年。”

　　對(duì)于其編程能力，筆者也問了兩位JAVA程序員，他們都表示其編程能力還是有的。但對(duì)于大型項(xiàng)目還說，具體編程效果如何，可能還得看能夠給出具體的描述。

　　四、圖文生成能力

　　前有百度文心一言，后有通義千問等等大模型。圖文生成能力也是備受關(guān)注的一點(diǎn)。

　　可以看到，訊飛星火認(rèn)知大模型定位于語言模型目前無法生成圖片。

　　五、交互能力

　　成語接龍是最直接的交互形式，來玩一局。

　　對(duì)于出現(xiàn)“及時(shí)雨”回復(fù)時(shí)，多次讓其重新生成，答案內(nèi)容并未改變。

　　整體來看，科大訊飛這次推出的訊飛星火認(rèn)知大模型表現(xiàn)還比較初級(jí)，無論是語義理解，持續(xù)對(duì)話、編程能力，還是數(shù)理推理能力等，與真正的“對(duì)話式AI”還有距離。

　　最后再來一個(gè)問題，“目前有幾個(gè)和你類似的認(rèn)知智能模型?”

　　通過回復(fù)可以看到，當(dāng)前類似的認(rèn)知智能模型已經(jīng)有很多了，訊飛星火認(rèn)知大模型的將呈現(xiàn)怎樣獨(dú)有的優(yōu)勢(shì)呢?還需要再等十余天才能揭曉。