把大模型裝進(jìn)手機(jī) AI幫我打工更容易了

　　本文來自于微信公眾號 量子位(ID:QbitAI)，作者:明敏 蕭簫。

　　如今大模型進(jìn)手機(jī)是真的火啊。

　　各大手機(jī)廠商發(fā)布會都標(biāo)配大模型，而且直接真刀真槍來現(xiàn)場演示。

　　喏，在ODC2023大會上現(xiàn)場演示可以看到，ColorOS的一鍵識別屏幕文本，再進(jìn)行智能摘要。

　　這誰看了不激動啊喂。

　　于是我們也來趕緊實(shí)測體驗了一把~

　　它不僅提供各種AI生成能力，比如寫大眾點(diǎn)評:

　　還能長按圖像閃速摳圖。

　　而且整個系統(tǒng)都變得“更懂事兒”了。復(fù)制地址直接彈出導(dǎo)航窗口、復(fù)制英文就彈出翻譯窗口。能它做的事盡量不麻煩你。

　　這么看，裝入大模型的ColorOS14真有點(diǎn)個人助理那味兒了。而且其中很多新技能點(diǎn)，都點(diǎn)在了生產(chǎn)力方向。

　　難道說，讓AI在手機(jī)上幫我打工都要成為現(xiàn)實(shí)了?

　　我們用ColorOS14試了試。還能這樣手機(jī)辦公?

　　以我們?nèi)粘�寫短訊為例，一般需要明確提綱、查找資料、理解內(nèi)容，然后進(jìn)行圖文創(chuàng)作，而且速度要快。

　　用ColorOS14輔助的話，畫風(fēng)是醬嬸兒的:

　　首先可以讓小布助手幫忙頭腦風(fēng)暴這篇稿件該如何寫?

　　感覺提綱有點(diǎn)冗長，能進(jìn)一步提出要求“寫短一點(diǎn)”。

　　在有了主體框架后，需要補(bǔ)充細(xì)節(jié)。這方面，可以把已有資料喂給小布，讓它找到重點(diǎn)，直接生成可以用的文字。

　　如果遇到?jīng)]有操作權(quán)限的文檔，還能使用小布識屏提取內(nèi)容，復(fù)制到中轉(zhuǎn)站暫存。

　　然后打開小布助手，讓它對剛剛的內(nèi)容總結(jié)摘要�？梢蕴岢鲞M(jìn)一步要求，比如語句簡潔、用三句話表達(dá)等。

　　哪怕是資料是英文都沒關(guān)系，只要復(fù)制內(nèi)容，就會彈出翻譯窗口，能直接查看中文意思。

　　一般我們還會準(zhǔn)備一些圖片素材豐富文章，有時還要使用ps二次處理圖片，最常用的就是摳圖功能了。

　　這方面ColorOS14也能實(shí)現(xiàn)。

　　打開相冊，找到對應(yīng)圖片，長按想要摳出的部分即可。圖像素材同樣能保存到中轉(zhuǎn)站中備用。

　　這樣一來，在手機(jī)上即可搞定一篇圖文并茂的快訊。

　　再加上ColorOS14的文件隨心開支持許多以往在安卓機(jī)上無法打開的文件格式，比如psd、iOS生態(tài)的Pages/Numbers等。

　　中轉(zhuǎn)站功能在同賬號下，能跨設(shè)備流轉(zhuǎn)，手機(jī)上保存的素材平板上直接用，無需再手動傳輸。

　　通過PhoneLink，無需下載任何APP，即可在Windows電腦上打開手機(jī)應(yīng)用、接打電話、收發(fā)短信、傳輸文件。

　　這真的是要把手機(jī)生產(chǎn)力拉滿啊。

　　但還沒完，我們發(fā)現(xiàn)ColorOS14新增的泛在服務(wù)在流體云交互下的全新體驗，還是個出差利器。 外出辦公、趕飛機(jī)兩不誤

　　一般出差途中都需要查看航班/車票具體信息，包括出發(fā)到達(dá)時間、座位、航班狀態(tài)等。

　　但問題是在途中，很可能還要同步辦公(別問我怎么知道)。

　　這就導(dǎo)致很容易忽略重要的行程信息，或者要手忙腳亂反復(fù)確認(rèn)航班/車次狀態(tài)。

　　ColorOS14的流體云，一方面提供了實(shí)時提醒的功能，能將航班/車次/網(wǎng)約車/導(dǎo)航狀態(tài)信息“釘”在屏幕上，方便查看;另一方面，它還支持復(fù)制車次/航班號快速查看行程，或者是將導(dǎo)航地址直接同步到車端。

　　同時這些提醒能以不同優(yōu)先級呈現(xiàn)，最重要的信息最明顯，提醒也有強(qiáng)弱之分，更符合大家使用手機(jī)的直覺邏輯。

　　另外還支持多模態(tài)提醒，重要行程信息能在耳機(jī)內(nèi)播報。

　　在未來，當(dāng)你詢問過小布“可以購買幾點(diǎn)去北京的高鐵票”后，它就能準(zhǔn)確捕捉到你的需求，然后推薦適合你的車次、當(dāng)?shù)靥鞖狻⒆∷扌畔⒌取?/p>

　　這背后不僅考驗大模型能力，同時也給系統(tǒng)任務(wù)編排、復(fù)雜意圖理解等能力提出要求。

　　從最新升級的ColorOS14來看，OPPO已經(jīng)構(gòu)建出了實(shí)現(xiàn)如上效果的基本底座能力。它們也是這一次ColorOS14大幅提升手機(jī)體驗的關(guān)鍵。

　　具體帶來哪些新技術(shù)?往下看。 用大模型更好理解用戶意圖

　　給ColorOS14帶來新體驗的核心技術(shù)為兩方面:

　　AndesGPT大模型

　　潘塔納爾系統(tǒng)

　　其中，AndesGPT大模型主要提供AIGC能力，如上小布助手中種種智能化體驗，都得益于它。

　　不僅能基于知識庫、知識圖譜和通用搜索提升回答準(zhǔn)確性，70億大模型就支持最高2k tokens的輸入長度;

　　未來還將支持文生圖、圖生圖，甚至當(dāng)場來一首歌，從主題風(fēng)格到元素都能定制。

　　然而，要想在手機(jī)上實(shí)現(xiàn)這些能力并不那么容易，光靠手機(jī)算力無法運(yùn)行較大的模型，聯(lián)網(wǎng)運(yùn)行又無法處理個人隱私信息。

　　為此，OPPO自主訓(xùn)練的AndesGPT大模型采用了端云協(xié)同的部署方式，從十億到千億大模型不等，端側(cè)小模型處理個人數(shù)據(jù)，云端大模型負(fù)責(zé)完成復(fù)雜任務(wù)指令，如知識查詢等。

　　為了讓端側(cè)小模型塞進(jìn)手機(jī)的同時保持性能，AndesGPT還采用了4位量化技術(shù)，在縮短生成時間的同時確保模型輸出性能。

　　總結(jié)來看，AndesGPT的所有能力，都是為了將手機(jī)打造成你的“第二大腦”。

　　潘塔納爾系統(tǒng)，是OPPO的自研智慧跨端系統(tǒng)。

　　流體云中的實(shí)時提醒、消息按照主次顯示，以及中轉(zhuǎn)站文件跨端流轉(zhuǎn)、文件隨心開、隨身工作臺等功能，都得益于潘塔納爾系統(tǒng)。

　　兩部分功能對應(yīng)它的兩大能力:泛在服務(wù)和跨端互聯(lián)。

　　泛在服務(wù)，簡單來說就是讓服務(wù)無處不在，從人找服務(wù)變成服務(wù)找人。

　　例如出門游玩，基于泛在服務(wù)可以根據(jù)榜單幫忙規(guī)劃游玩路線、推薦門票購買、預(yù)定機(jī)票酒店等;機(jī)票訂購，會結(jié)合天氣和日歷等APP安排時間和出行方式……

　　跨端互聯(lián)，用ColorOS打通了手機(jī)、耳機(jī)、TV、PC、甚至Osmo云臺、車機(jī)等設(shè)備的連接，進(jìn)一步打破端與端的邊界，給用戶帶去更無縫的跨端體驗。

　　而且在ColorOS14上，AndesGPT和潘塔納爾系統(tǒng)首次融合、“無縫協(xié)同”，來解決手機(jī)功能繁雜、操作門檻高的問題。

　　如果原本手機(jī)只是一個菜籃子，AndesGPT和潘塔納爾系統(tǒng)就是廚師，用戶提出菜名，它們就能完成準(zhǔn)備材料、炒菜和上菜一系列操作，最大程度上降低操作門檻。

　　不僅如此，潘塔納爾系統(tǒng)升級的情境感知能力，也能進(jìn)一步幫助AndesGPT做出決策，更好理解用戶意圖。

　　如今AIGC時代來臨，各行各業(yè)出現(xiàn)新的變革契機(jī)。對于終端行業(yè)而言，是否也能基于新發(fā)布的ColorOS14，歸納出一系列新的標(biāo)準(zhǔn)，來衡量性能和實(shí)力?

　　換言之，AIGC時代下，怎樣的終端設(shè)備才能給用戶帶來更好的體驗? AIGC時代造就怎樣的新終端?

　　當(dāng)下，AIGC趨勢和終端市場正在相互成就。

　　對于終端而言，AIGC是必須要把握的趨勢。它不僅給發(fā)展成熟的手機(jī)終端帶來新氣息，更是明確了手機(jī)等終端下一步的發(fā)展方向:更智能。

　　但是在智能手機(jī)基本交互邏輯已經(jīng)確定的當(dāng)下，這種“更智能”并非易事。

　　因為它根本上是對細(xì)節(jié)的考驗。

　　透過ColorOS14的發(fā)布可以看到，系統(tǒng)做了600+細(xì)節(jié)升級。從UI設(shè)計、泛在服務(wù)到小布助手，細(xì)節(jié)上的改變都是希望更逼近用戶最自然的交互習(xí)慣，讓這種升級更加“潤物細(xì)無聲”。

　　由此也傳遞出了一個行業(yè)認(rèn)知:終端系統(tǒng)的大框架已經(jīng)基本固定，未來操作系統(tǒng)的突破，關(guān)鍵看細(xì)節(jié)。

　　以ColorOS14的革新為例，無論是操作系統(tǒng)還是智能助手，結(jié)合產(chǎn)學(xué)研等多方力量共同實(shí)現(xiàn)了諸多突破，而在突破之下，是對細(xì)節(jié)的把控與考量。

　　在OPPO長期的產(chǎn)學(xué)研投入中，這樣的技術(shù)細(xì)節(jié)迭代帶來的產(chǎn)品革新無處不在。

　　這些年來，OPPO已經(jīng)與國內(nèi)外90余所高�？蒲袉挝�、600余名專家學(xué)者達(dá)成科研合作，在核心技術(shù)領(lǐng)域開展了500余項科研課題研究，與國內(nèi)15個高校共建了軟件方面的聯(lián)合實(shí)驗室。

　　例如，在ColorOS14發(fā)布以前，OPPO已經(jīng)早早和在語音對話系統(tǒng)有著深入研究的清華大學(xué)計算機(jī)系黃民烈教授團(tuán)隊建立合作，針對AndesGPT大模型在手機(jī)上的適配展開研發(fā)，將最新學(xué)術(shù)成果與OPPO的智能對話系統(tǒng)技術(shù)結(jié)合起來，從而讓ColorOS14中的小布助手學(xué)到了更復(fù)雜的意圖理解能力。

　　潘塔納爾系統(tǒng)首席科學(xué)家李治軍認(rèn)為操作系統(tǒng)革新最關(guān)鍵的細(xì)節(jié)之一，正是系統(tǒng)與用戶的交互方式。在ChatGPT爆火后，他馬上跟進(jìn)大模型研究，并基于團(tuán)隊已有的成果和大模型技術(shù)，將其應(yīng)用到100多個場景中。

　　也正是基于這些準(zhǔn)備，能讓ColorOS14上車大模型更加絲滑流暢，進(jìn)一步提升用戶在辦公、差旅等場景中的體驗，把操作手機(jī)變成“和手機(jī)打交道”等。

　　當(dāng)然，無論應(yīng)用場景如何豐富、技術(shù)如何改善，最終的評判標(biāo)準(zhǔn)，還是要由用戶來定。

　　隨著ColorOS14正式推送，OPPO的幾款新機(jī)型，如OPPO Find X6Pro、Find X6、Find N2、Find N2Flip、Reno9Pro、一加11，已經(jīng)可以直接玩上了。

　　你最期待哪些新功能體驗?