合合信息啟信產(chǎn)業(yè)大腦攜手市北新區(qū)打造“一企一畫像”平臺,加速數(shù)字化轉(zhuǎn)型重慶:力爭今年智能網(wǎng)聯(lián)新能源汽車產(chǎn)量突破 100 萬輛,到 2027 年建成萬億級產(chǎn)業(yè)集群微信iOS最新版上線:iPhone用戶可在朋友圈發(fā)實況照片了蘋果有線耳機或?qū)⑼.a(chǎn)沖上熱搜!閑魚相關(guān)搜索量暴漲384%2024 vivo開發(fā)者大會官宣:OriginOS 5/自研藍河系統(tǒng)2降臨真·AI程序員來了,阿里云「通義靈碼」全面進化,全流程開發(fā)僅用幾分鐘東方甄選烤腸全網(wǎng)銷量及銷售額領(lǐng)先鴻蒙PC要來了 界面很漂亮!余承東:目前華為PC將是最后一批搭載Windows上半年中國AR/VR出貨23.3萬臺,同比下滑了 29.1%IDC:2024 上半年中國 AR / VR 頭顯出貨 23.3 萬臺,同比下滑 29.1%英特爾AI加速器Gaudi3下周發(fā)布,挑戰(zhàn)NVIDIA統(tǒng)治地位!大屏技術(shù)邂逅千年色彩美學!海信激光電視成為電影《只此青綠》官方合作伙伴OpenAI將最新AI模型o1擴展到企業(yè)和教育領(lǐng)域三星新專利探索AR技術(shù)新應(yīng)用:檢測屏幕指紋殘留,提高手機安全性猛瑪傳奇C1:直播圖傳技術(shù)的革新者JFrog推出首個運行時安全解決方案,實現(xiàn)從代碼到云的全面軟件完整性和可追溯性亞馬遜推出一大波生成式 AI 工具,購物體驗全面升級機器人公司1X推出世界模型Apple Intelligence測試版現(xiàn)已開放革命性AI對話系統(tǒng)Moshi問世:機器也能說人話了?
  • 首頁 > 云計算頻道 > 大模型

    三大AI開發(fā)神器亮相 李彥宏:只要會說話,就可以成為一名開發(fā)者

    2024年04月16日 14:45:49   來源:Donews

      4月16日,百度創(chuàng)始人、董事長兼首席執(zhí)行官李彥宏在Create 2024百度AI開發(fā)者大會上發(fā)表“人人都是開發(fā)者”的主題演講,他指出,“AI正在掀起一場創(chuàng)造力革命,未來開發(fā)應(yīng)用就像拍個短視頻一樣簡單,人人都是開發(fā)者,人人都是創(chuàng)造者。”

      他表示,百度作為一家技術(shù)公司,定位是盡可能為大家提供所需的開發(fā)工具,提升社會創(chuàng)造力,這包括了1個強大的基礎(chǔ)模型系列和三大AI開發(fā)工具,它們組成了一個工具箱,支持開發(fā)者打包帶走,隨取隨用。

      強大的基礎(chǔ)模型系列,也就是文心大模型系列,包括了:旗艦版的ERNIE3.5和4.0,和輕量版的ERNIE Speed、Lite、Tiny等;現(xiàn)場,李彥宏還正式發(fā)布了文心大模型4.0的工具版。文心一言發(fā)布一年多以來,用戶數(shù)已經(jīng)突破2億,目前,文心大模型已成為中國最領(lǐng)先、應(yīng)用最廣泛的AI基礎(chǔ)模型。

      李彥宏強調(diào),通過強大的文心4.0降維裁剪出來的更小尺寸模型,要比直接拿開源調(diào)出來的模型,同等尺寸下效果明顯更好,同等效果下,成本明顯更低,“大家以前用開源覺得開源便宜,其實在大模型場景下,開源是最貴的。所以開源模型會越來越落后。”

      同時,百度還為大家做好了“開箱即用”的三大AI開發(fā)工具,包括智能體開發(fā)工具AgentBuilder、AI原生應(yīng)用開發(fā)工具AppBuilder、各種尺寸的模型定制工具ModelBuilder。“這三個工具,都代表了先進生產(chǎn)力。”

      會上,李彥宏分享了百度基于大模型開發(fā)AI原生應(yīng)用的具體思路,指出MoE、小模型和智能體是值得關(guān)注的三個方向,“這是我們百度根據(jù)過去一年的實踐,踩了無數(shù)的坑,交了高昂的學費換來的。”

      以下是李彥宏《人人都是開發(fā)者》主題演講實錄:

      你只要會說話,就可以成為一名開發(fā)者

      大家好,歡迎參加Create 2024百度AI開發(fā)者大會,這是Create大會首次在粵港澳大灣區(qū)舉辦。今天現(xiàn)場來了5000多位開發(fā)者和科技愛好者。過去這一年,我跟很多創(chuàng)業(yè)者、開發(fā)者交流,感覺大家都處在一種“FOMO”狀態(tài),也就是Fear of Missing Out,既興奮、又害怕錯過。確實,大模型和生成式AI,將徹底改變開發(fā)者這個群體。

      過去,開發(fā)者用代碼改變世界;未來,自然語言將成為新的通用編程語言,你只要會說話,就可以成為一名開發(fā)者,用自己的創(chuàng)造力改變世界。

      這一天并不遙遠,我們看到,因為有了強大的基礎(chǔ)大模型,有了很多低門檻,甚至零門檻的開發(fā)工具,開發(fā)者的生產(chǎn)力大大提高了。

      比如,基于文心大模型的智能代碼助手Comate,不僅支持100多種語言和所有主流IDE平臺,可以推薦代碼、生成代碼注釋、查找代碼缺陷、給出優(yōu)化方案,還可以深度解讀代碼庫、關(guān)聯(lián)私域知識生成新的代碼。上崗一年多,Comate已經(jīng)走入了喜馬拉雅、三菱電梯、軟通動力等上萬家企業(yè),生成的代碼采納率達到了46%,百度每天新增的代碼中,已經(jīng)有27%是由Comate生成的。

      今天,你不會寫代碼,也可以做出一個AI應(yīng)用;不用編程,也可以做出一個智能體。AI正在掀起一場創(chuàng)造力革命,未來開發(fā)應(yīng)用就像拍個短視頻一樣簡單,人人都是開發(fā)者,人人都是創(chuàng)造者。

      作為一家技術(shù)公司,百度的角色定位,就是盡可能地為大家提供所需的開發(fā)工具,不斷提升整個社會的創(chuàng)造力。具體來說,我們提供1個強大的基礎(chǔ)模型系列,就是文心大模型系列,這包括旗艦版的ERNIE3.5, ERNIE4.0, 也包括輕量版的ERNIE Speed、Lite、Tiny等等。

      我們還提供基于大模型來開發(fā)各種應(yīng)用的工具,包括智能體開發(fā)工具AgentBuilder,AI原生應(yīng)用開發(fā)工具AppBuilder,以及各種尺寸的模型定制工具ModelBuilder。這三個工具,都代表了先進生產(chǎn)力。下面,我會給大家一一展示。

      文心一言用戶超2億,文心大模型4.0工具版發(fā)布

      首先講一下,文心一言和文心大模型的最新進展:

      文心一言從去年3月16日發(fā)布,到今天是一年零一個月的時間。我們的用戶數(shù)突破了2億,API日均調(diào)用量也突破了2億,服務(wù)的客戶數(shù)達到了8.5萬,利用千帆平臺開發(fā)的AI原生應(yīng)用數(shù)超過了19萬。

      我們看看,大家都在用文心一言做什么?

      視頻中的真人真事只是冰山一角。我們可以看到,文心一言正在改變更多人的工作和生活。

      支撐文心一言的基座模型,就是文心大模型。過去一年,它經(jīng)歷了從3.0版本到3.5,再到4.0版本的進化。文心4.0在理解、生成、邏輯、記憶四大能力方面,均達到了業(yè)界領(lǐng)軍水平。

      近幾個月來,文心大模型在代碼生成、代碼解釋、代碼優(yōu)化等通用能力方面實現(xiàn)了進一步的顯著提升,達到國際領(lǐng)先水平。

      今天,我們正式發(fā)布文心大模型4.0的工具版,現(xiàn)在,大家可以在工具版上,體驗代碼解釋器功能,通過自然語言交互,就能實現(xiàn)對復(fù)雜數(shù)據(jù)和文件的處理與分析,還可以生成圖表或文件,能夠快速洞察數(shù)據(jù)中的特點、分析變化趨勢、為后續(xù)的決策提供高效精準的支撐。

      文心大模型已經(jīng)成為了中國最領(lǐng)先、應(yīng)用最廣泛的AI基礎(chǔ)模型。

      不僅如此,相比一年前,文心大模型的算法訓練效率提升到了原來的5.1倍,周均訓練有效率達到98.8%,推理性能提升了105倍,推理的成本降到了原來的1%。

      也就是說,客戶原來一天調(diào)用1萬次,同樣成本現(xiàn)在可以調(diào)用100萬次。媒體可能不會因為成本下降99%而興奮。但是企業(yè)也好,開發(fā)者也好,一旦用起來,最關(guān)注的就是效果和成本。

      我們能在提升性能的同時,把推理成本降到1%,正是因為百度在芯片、框架、模型、應(yīng)用這四層架構(gòu)上有著全棧的布局,通過端到端優(yōu)化,不斷地把成本打下來,讓更多人都可以高效、低價地用大模型來做AI應(yīng)用。

      毫無疑問,大模型相關(guān)的話題,在2024年依然會很熱,各類技術(shù)突破還會不斷涌現(xiàn)。媒體也會繼續(xù)熱衷于用“震撼發(fā)布”“史詩級更新”這樣的標題進行渲染。但我想強調(diào)的是,大模型本身并不直接創(chuàng)造價值,基于大模型開發(fā)出來的AI應(yīng)用才能滿足真實的市場需求。

      分享開發(fā)AI原生應(yīng)用的具體思路和工具:“踩了無數(shù)的坑,交了高昂學費”

      今天我想跟大家分享的是一些基于大模型開發(fā)AI原生應(yīng)用的具體思路和工具。這是我們百度根據(jù)過去一年的實踐,踩了無數(shù)的坑,交了高昂的學費換來的。

      第一是MoE。未來大型的AI原生應(yīng)用基本都是MoE架構(gòu),這里所說的MoE不是一般的學術(shù)概念,而是大小模型的混用,不依賴一個模型來解決所有問題。但什么時候調(diào)用小模型、什么時候調(diào)用大模型、什么時候不調(diào)用模型,這都是有技術(shù)含量的,要針對應(yīng)用的不同場景做匹配。

      第二是小模型。小模型推理成本低,響應(yīng)速度快,在一些特定場景中,經(jīng)過SFT精調(diào)后的小模型,它的使用效果可以媲美大模型。這就是我們發(fā)布Speed,Lite、Tiny三個輕量模型的原因。我們通過大模型,壓縮蒸餾出來一個基礎(chǔ)模型,然后再用數(shù)據(jù)去訓練,這比從頭開始訓小模型,效果要好很多,比基于開源模型訓出來的模型效果更好,速度更快,成本更低。

      第三是智能體。智能體是當下很熱的一個話題,隨著智能體能力的提升,會不斷催生出大量新的應(yīng)用。智能體機制,包括理解、規(guī)劃、反思和進化,它讓機器像人一樣思考和行動,可以自主完成復(fù)雜任務(wù),在環(huán)境中持續(xù)學習、實現(xiàn)自我迭代和進化。在一些復(fù)雜系統(tǒng)中,我們還可以讓不同的智能體互動,相互協(xié)作,更高質(zhì)量地完成任務(wù)。這些智能體能力,反思、規(guī)劃、自我計劃的能力,我們已經(jīng)開發(fā)出來了,并且向開發(fā)者全面開放。

      在MoE、小模型、智能體這三個方向上,百度都已經(jīng)給大家做好了“開箱即用”的工具。下面,我就給大家介紹三種不同的工具,分別是:智能體開發(fā)工具AgentBuilder、AI原生應(yīng)用開發(fā)工具AppBuilder、各種尺寸的模型定制工具ModelBuilder。

      智能體開發(fā)工具AgentBuilder:

      智能體是里每個人最近、最主流的大模型使用方式

      首先是智能體開發(fā)工具AgentBuilder。智能體可能是未來離每個人最近、最主流的大模型使用方式,基于強大的基礎(chǔ)模型,智能體可以批量生成,應(yīng)用在各種各樣的場景。

      百度剛剛升級了文心智能體平臺。截至目前,已經(jīng)有3萬多個智能體被創(chuàng)建、5萬多名開發(fā)者和上萬家企業(yè)入駐。我們的目標是,讓每個人、每個組織都成為智能體的開發(fā)者,打造國內(nèi)最完整的智能體生態(tài)。

      那如何實現(xiàn)這個目標呢?就是給大家提供零門檻的智能體開發(fā)工具AgentBuilder。

      下面我們就先以“新加坡旅游局”為例一起看看,一個智能體是如何做出來的。

      首先,我們打開文心智能體平臺,創(chuàng)建頁面有著零代碼、低代碼兩種模式,新手可以直接選擇“零代碼模式”,用自然語言,幾句話就能創(chuàng)建一個智能體。

      我們先給智能體起名叫“新加坡旅游局”,然后在設(shè)定里寫明需要打造旅游方案、解答問題,提供酒店門票預(yù)訂服務(wù),這些設(shè)定都是用來指導智能體的,告訴它都能做什么。

      如果只需要基礎(chǔ)智能體,平臺會自動完成填寫。但我們希望“新加坡旅游局”是一個專業(yè)的智能體,所以要進行高級配置。我可以把新加坡百科詞條和官網(wǎng)鏈接都添加到知識庫里,讓它每天更新。然后添加一些工具,如酒店查詢、景點門票購買等,增強它的服務(wù)能力。目前我們已經(jīng)跟攜程合作,提供了酒店、景點、票務(wù)等旅游服務(wù)工具。這樣,一個新加坡旅游局的智能體就做好了,可以進一步預(yù)覽、調(diào)優(yōu)。

      現(xiàn)在打開百度APP,搜索“什么時候去新加坡人最少”,因為大家出去旅游都想避開人潮。智能體會綜合多個來源的信息,生成一個答案,“1-3月人最少”。我們還可以點擊智能體,和它進一步互動,比如去新加坡旅游的注意事項,推薦新加坡排名前三的酒店,還能讓它直接預(yù)訂新加坡環(huán)球影城的門票,一站式解決需求,大大節(jié)省了用戶時間。

      除了新加坡之外,大連、沈陽等文旅類智能體也都在文心智能體平臺上線,還有知識類、創(chuàng)作類、學習類、娛樂類等各式各樣的智能體,這些都是用AgentBuilder做出來的。

      去年文心一言剛發(fā)布的時候,我就說過,文心一言會影響到每一家公司。因為它強大的自然語言理解能力、表達能力、推理能力,可以使任何一個公司都離自己的客戶更近。

      今天,每一個商家、每一個客戶,都能在百度擁有專屬的智能體。整個過程完全不需要編程,通過類似提示詞的信息輸入,和簡單的幾步操作調(diào)優(yōu),就能迅速生成一個智能體,成為7X24小時在線的金牌業(yè)務(wù)員。

      我們來看一下,一個商家智能體是怎么做出來的。

      啟德教育是家知名教育企業(yè),在全國有60多家分支機構(gòu),還有很多海外分公司,覆蓋國家廣,對接待的話術(shù)要求很高。如何能全天24小時回復(fù)客戶的咨詢,并且提高接待水平、降低經(jīng)營成本呢?

      啟德教育利用百度的AgentBuilder,打造了專屬的智能體。

      我們來看看,如何打造一個具備基本能力的智能體。很簡單,在平臺上填寫智能體的頭像、名稱、經(jīng)營業(yè)務(wù)范圍和歡迎語,再設(shè)置一些需要用戶提供的信息,比如年齡、學歷。5分鐘、零門檻,一個智能體就做好了。

      啟德教育還希望這個智能體是個懂業(yè)務(wù)、懂學生的留學顧問。它可以針對學生的不同情況,比如想去美國還是澳洲、是碩士還是學士、雅思和托?剂硕嗌俜值鹊,做出專業(yè)分析,給出精準回答。我們可以通過添加知識、角色、工具這幾大模塊,來打造一個更高級的智能體。

      在知識模塊中,上傳私域知識,讓平臺實時解析,自動生成對話語料;在角色模塊,把一些不在經(jīng)營范圍內(nèi)的留學國家,增加到過濾方案中,可以提高用戶線索的有效率;在工具模塊,加入預(yù)約到店等服務(wù)。通過這樣幾步簡單操作,一個擁有專業(yè)能力的啟德教育智能體就做好了。

      現(xiàn)在,我們來搜索“澳洲留學申請條件”,可以看到智能體快速給出了需要的語言能力、專業(yè)選擇等七大必備條件,還給能出相應(yīng)的留學咨詢方案,對各種難題都有問必答、有求必應(yīng)。

      啟德教育智能體非常的受歡迎,上線第一周,就成功分發(fā)了155萬次,與用戶交互了5.8萬次,線索轉(zhuǎn)化量直線增長、有效線索的轉(zhuǎn)化成本明顯降低,經(jīng)營效率大幅提升。

      下面,我再給大家介紹一個家居行業(yè)的智能體。

      索菲亞是專注全屋定制的家居品牌。就像剛剛展示的,它也可以通過填寫極其簡單的信息,創(chuàng)建出一個基礎(chǔ)的商家智能體。但對于家居行業(yè),消費者的線下體驗更重要,所以索菲亞希望能在線上打造出一個金牌銷售,還原線下的接待體驗。

      因此在進一步的設(shè)置中,它在角色模塊,選擇了數(shù)字人作為展示方式,然后給數(shù)字人選取了合適的背景和聲音,并且結(jié)合平臺的智能解析能力,自動總結(jié)了一套銷售話術(shù)。最終打造出一位溫柔親切、話術(shù)專業(yè)的金牌銷售,她能24小時滿足用戶的各種需求,提供高水準的服務(wù)體驗。

      當百度搜索用戶有裝修訴求時,索菲亞智能體會利用文心大模型的能力,優(yōu)先給出問題的答案。除此之外,她還會主動與客戶確認具體需求,如裝修類型、預(yù)算等,并推薦附近的線下門店。

      索菲亞商家智能體上線以來,有效線索成本下降了30%。也就是說,它獲得一個有效客戶,如果過去的成本是100塊,現(xiàn)在只需要70塊了。

      目前,已有超過1萬個百度的客戶擁有了商家智能體,涵蓋了教育培訓、房產(chǎn)家居、機械設(shè)備、商務(wù)服務(wù)等超過30個行業(yè)。

      上面,通過三個Demo,我展示了開發(fā)者和商家,如何利用AgentBuilder,制作不同行業(yè)智能體的過程。

      現(xiàn)在,制作一個智能體,真的就是分分鐘的事。但問題來了!如果沒流量、沒分發(fā)、找不到、沒人用,那么開發(fā)者和商家就沒有收益,沒有收益就沒有動力。怎么解決這個痛點呢?

      我們的文心智能體平臺,為開發(fā)者們提供了流量變現(xiàn)的通路。除了百度搜索,百度生態(tài)的其他產(chǎn)品,如小度、地圖、貼吧、車機等,都能接入智能體的相關(guān)能力,為開發(fā)者解決流量分發(fā)的后顧之憂,獲得實打?qū)嵉氖找妗?/p>

      有分發(fā),就會有數(shù)據(jù)反饋;有數(shù)據(jù)反饋,飛輪轉(zhuǎn)起來,智能體就能夠自主迭代,越用越聰明。文心智能體平臺還上線了智能體的數(shù)據(jù)分析和問答調(diào)優(yōu)模塊,不久后還將有更多的新能力上線。文心智能體平臺將通過分發(fā)-診斷-收益的數(shù)據(jù)飛輪,驅(qū)動智能體形成質(zhì)量更優(yōu)、流量更好、收益更大的正循環(huán)。

      AppBuilder:自然語言三步就能開發(fā)一個應(yīng)用

      下面,我給大家介紹第二個開發(fā)工具,AppBuilder。它是目前最好用的AI原生應(yīng)用開發(fā)工具。在AppBuilder上面,我們提前封裝和預(yù)置了開發(fā)AI原生應(yīng)用所需的各種組件和框架,大幅降低開發(fā)門檻。

      最快只需三步,開發(fā)者就可以用自然語言開發(fā)出一個AI原生應(yīng)用,并且能夠便捷地發(fā)布、集成到各種各樣的業(yè)務(wù)環(huán)境中。我們來看幾個案例:

      今年年初,我們搞過一期AI原生應(yīng)用開發(fā)挑戰(zhàn)賽,賽題是利用AppBuilder打造一款“游樂場排隊規(guī)劃助手”,幫助游客更好地了解游樂場排隊情況,設(shè)計個性化的游玩路線,在有限時間內(nèi)獲得最好的游玩體驗。

      這期比賽的冠軍選手,沒寫一行代碼,就開發(fā)出了應(yīng)用,拿到了百度提供的10萬元大獎。這個題目如果會寫代碼的話,你寫一個并不難,但是你一行代碼都不寫還能做出來,那還是非常依賴基礎(chǔ)模型和AppBuilder這個工具的能力的。

      我們來看下,怎么用AppBuilder,把這個AI應(yīng)用做出來。

      我們先回顧一下賽題。它假定了“環(huán)球影城”各個項目的排隊時間和刺激指數(shù),那么在有限的時間內(nèi)獲得刺激指數(shù)最高的體驗,就是這期賽題要解決的問題。

      首先,打開AppBuilder的開發(fā)界面,給應(yīng)用起名“游樂場排隊助手”;第二步,我們在角色指令中描述具體要求,包括調(diào)用代碼解釋器、算出在固定時間內(nèi)的最佳組合、輸出結(jié)果等;第三步就是到工具組件中,把代碼解釋器添加進來,幫助運算。

      現(xiàn)在,我們來測下效果,在右側(cè)輸入問題“我有3個半小時時間,怎么玩最刺激?”,可以看到,代碼解釋器將這個問題翻譯成了代碼,再調(diào)用數(shù)據(jù)理解工具,對已知條件進行分析。經(jīng)過一系列計算,得出將《哈利波特禁忌之旅》、《侏羅紀大冒險》、《霸天虎過山車》、《大黃蜂回旋機》,這四個項目組合游玩,效果最佳。測試沒問題,點擊發(fā)布,在零代碼的情況下,一個應(yīng)用就生成了。

      現(xiàn)在,AppBuilder又進一步升級了,在創(chuàng)建的過程中,全部可以通過“AI優(yōu)化配置”功能,自動幫助開發(fā)者優(yōu)化角色指令、組件配置等環(huán)節(jié),進一步提高開發(fā)效率。

      我們再看一個例子。

      今年年初,華北電力大學提出,希望為全校師生提供智能化的專屬服務(wù);诎俣鹊腁ppBuilder,我們共同打造了一個華電AI助理,下面,我來給大家展示一下,華電AI助理是怎么做出來的:

      第一步:打開AppBuilder,進入創(chuàng)建頁面,點擊AI自動生成配置。首先為應(yīng)用設(shè)置名稱、簡介、頭像等基本信息。

      第二步:通過自然語言在角色指令中描述具體要求,包括任務(wù)、組件能力、要求與限制。

      第三步:插入自定義的圖書借閱查詢、課表查詢、學生成績查詢等組件,讓校園助手能夠具備智能化服務(wù)的能力。之后再為校園助手添加一個開場白,這樣應(yīng)用就配置好了。

      接下來,我們在預(yù)覽界面中,結(jié)合用戶提問,對助手進行調(diào)試。比如詢問四六級考試的報名時間,測試各組件自動調(diào)用的效果。

      大家可以看到,通過這些簡單的操作,這個應(yīng)用就構(gòu)建完成了。目前已經(jīng)小規(guī)模測試上線,接入了查制度、查課程,充飯卡、借書籍等高頻場景,服務(wù)了學校廣大師生。后續(xù),我們將與華北電力大學一起,進一步深化應(yīng)用合作,提供更為豐富便捷的服務(wù)。

      百度在跨模態(tài)方面,也有著多年技術(shù)積累。在AppBuilder上面,我們也提供了一定的跨模態(tài)能力,你只需要給一段文字,或者幾句話,就可以快速創(chuàng)建繪畫類的應(yīng)用,像漫畫、兒童畫本等。

      過程也很簡單:打開AppBuilder,點擊進入“應(yīng)用創(chuàng)建”,輸入角色指令,選擇“添加文生圖”組件,再輸入三個推薦問題,就可以點擊發(fā)布了。應(yīng)用做好后,我們只需要輸入一個大概想要的角色或劇情,AppBuilder就可以自動生成故事、輸出圖畫。

      百度文庫最新推出的智能漫畫和畫本生成功能,就利用了AppBuilder上提供的這類組件。我們來看看,百度文庫的漫畫生成功能,是如何讓每一個有創(chuàng)想的人,都能做出好作品的。

      咱們以經(jīng)典的《周處除三害》為例。

      打開百度文庫,輸入主題《周處除三害》,這在《晉書》和《世說新語》里都有寫到,文庫搜索后,會根據(jù)原文生成故事,我們也可以再對故事內(nèi)容進行修改;然后點擊右側(cè)的AI工具欄,開始創(chuàng)建這篇漫畫。

      進入漫畫制作界面,文庫將根據(jù)故事情節(jié)為我們自動生成漫畫分鏡;然后從光影、寫實、卡通等多種風格中,選擇最貼合故事的漫畫風格;最后根據(jù)角色選擇不同的人物形象,這樣就完成了漫畫的生成。

      漫畫生成后,我們可以在百度文庫的智能漫畫編輯器里,瀏覽完整的漫畫。同時,文庫支持對每一個畫面進行編輯、修改和精調(diào),比如,在左側(cè)選中畫面“周處與白額虎”,點擊編輯,增加畫面描述“人物面容清晰,畫面明亮”,就能精調(diào)出更符合需求的漫畫。大家看到,百度文庫的漫畫功能在角色和場景的風格一致性方面,都做得非常出色。

      百度文庫的智能漫畫能力,極大地提高了創(chuàng)作漫畫的效率,降低了漫畫創(chuàng)作的成本和門檻,可以讓更多有想法、有創(chuàng)意的人實現(xiàn)自己的漫畫創(chuàng)作夢。

      不止生成漫畫,百度文庫現(xiàn)在還可以幫助用戶零門檻的創(chuàng)作畫本。大家可能不知道,中國小孩一年的人均繪本閱讀量只有10本,而歐美國家是50本左右。現(xiàn)在,AI能夠讓完全沒有繪畫能力的父母,也可以為自己的孩子創(chuàng)作一個專屬的兒童畫本了。下面我們就來看一下這個圖文并茂的有聲畫本吧!

      從去年開始,我們用AI重構(gòu)了百度文庫,使它成為用戶“內(nèi)容生產(chǎn)的起點”。如今,在AppBuilder的支持下,百度文庫新推出的智能漫畫和智能畫本功能,更是把場景延伸到了更加有趣的跨模態(tài)創(chuàng)作領(lǐng)域。

      剛才我用三個案例,展示了如何用百度的AppBuilder,做出AI原生應(yīng)用。大家應(yīng)該能夠感受到AppBuilder的兩個明顯優(yōu)勢:

      一是功能強大。依托文心4.0對指令的理解和遵循能力,我們的AppBuilder,能保證冷啟動就能達到一個不錯的水平,不會因為效果差,再花很長時間去調(diào)優(yōu),大大降低了開發(fā)門檻。依托檢索增強技術(shù)RAG,在知識問答等典型場景,我們的問答準確率和友好回復(fù)程度都達到了95%以上,大幅超越其他同類產(chǎn)品。AppBuilder還提供豐富完整的組件工具,包括百度搜索等基于百度多年技術(shù)積累的AI能力組件、大模型能力組件,還有百度獨家開放的業(yè)務(wù)組件等55個組件。以及一些主流場景的第三方API,比如航班查詢、論文查詢等。我們還剛剛支持了自定義組件,客戶可以直接對接自己專有的任何工具和數(shù)據(jù)。這些豐富的組件,共同支撐起了AI原生應(yīng)用的高效開發(fā)。

      二是簡單易用。使用AppBuilder,只需三步即可快速創(chuàng)建應(yīng)用、一鍵分發(fā)。我們也支持開源的SDK,方便大家進行二次開發(fā)。

      模型定制工具ModelBuilder:高效低價生產(chǎn)模型

      下面我再介紹一下更適合專業(yè)開發(fā)者使用的工具,那就是ModelBuilder,它可以根據(jù)開發(fā)者的需求定制任意尺寸的模型,并根據(jù)細分場景對模型進一步精調(diào)SFT,這樣就能達到更好的效果。對開發(fā)者來說,用好大模型很重要的一件事兒,就是掌握模型精調(diào)的方法。

      我們以教育行業(yè)的作文批改場景來舉例。因為作文批改有明確的評分標準,并且不同年級對作文的要求和打分標準,也是不同的。這就需要模型精調(diào),讓大模型輸出的結(jié)果,更符合特定的要求。

      我們就來看一下,ModelBuilder是如何實現(xiàn)作文批改的模型精調(diào)的。

      第一步:創(chuàng)建數(shù)據(jù)集。模型精調(diào)的效果很大程度依賴我們的數(shù)據(jù)質(zhì)量。在這個案例中,原始數(shù)據(jù)只有180條,質(zhì)量也不夠高。我們就需要用到三個功能:數(shù)據(jù)清洗、數(shù)據(jù)標注和數(shù)據(jù)增強。數(shù)據(jù)清洗,可以快速去除數(shù)據(jù)的空缺、亂碼等問題。數(shù)據(jù)標注方面,我們對作文增加了更多維度,比如內(nèi)容深度、寫作手法等評價。數(shù)據(jù)增強功能,可以生成同類但不重復(fù)的數(shù)據(jù),進行數(shù)據(jù)擴充。擴充后,ModelBuilder給我們生成了920條高質(zhì)量數(shù)據(jù)。

      第二步,就進入模型精調(diào)階段了。首先,我們需要選擇一個進行精調(diào)的基礎(chǔ)模型,這里我們選擇了ERNIE Speed作為基礎(chǔ)模型。然后,我們根據(jù)平臺推薦值來配置參數(shù),這次數(shù)據(jù)接近1000條,按照推薦的迭代輪次,配置為10輪,然后就可以讓模型開始訓練了。

      第三步:把模型部署在平臺上,這樣整個精調(diào)過程就完成了。

      我們來用一篇中學作文,測試下精調(diào)后的模型效果。作文題目是《期待長大》,題材不限,不少于800字。

      我們將一篇學生的作文及批改格式要求,輸入到精調(diào)前后的兩個模型里。來看下,兩個模型及老師點評三者的對比?梢钥吹,精調(diào)后的大模型擁有了更加專業(yè)的老師點評思維、更好地做了格式遵循。原本老師需要較長時間才能完成的作文批改任務(wù),現(xiàn)在借助大模型,幾秒鐘就可以快速完成,大大地提升了給學生反饋的速度和效率。目前,這一類精調(diào)后的模型,已經(jīng)在多個教育行業(yè)的頭部企業(yè)中應(yīng)用起來了。

      我前面談到大型AI原生應(yīng)用一般都是MoE。那么,該如何組合使用這些模型,獲得最好的性價比呢?下面,我就用小度來展示一個MoE模型路由的案例。我們首先來看看,有了大模型的加持,小度是不是變得更聰明了:

      Robin:小度小度

      小度:在呢

      Robin:今天有什么新聞?

      小度:小度播3-5條當日新聞快訊

      Robin:小度小度。聽說你最近長本事了?

      小度:我不單能陪你聊天,還能做你的AI日程助手

      Robin:那我要來考考你了。幫我安排一下日程,今天活動結(jié)束后,我會和張總一起用晚餐,之后在酒店有個管理層的會議,大概需要1個半小時,希望10點之前可以結(jié)束。明早我準備晨跑,看看天氣如何,然后上午8點有個早會,請幫我安排好日程。

      小度:根據(jù)您需求,小度給您制定最優(yōu)的日程安排如下

      您與張總晚餐安排在18:00-19:30,結(jié)束后,您將在20:00參加管理層會議,21:30左右結(jié)束

      明早6點鬧鐘將提醒您起床去晨跑,跑步時長控制在1個小時以內(nèi),確保明早8點早會不遲到

      明早天氣晴朗,氣溫25度,建議您穿短袖外出,做好防曬

      您看我能不能當你的秘書,我還有更多新技能呢

      Robin:挺好的,很棒(向小度豎起大拇指),把這些日程同步到我的手機上吧。

      剛剛,我向小度提出了好幾個問題,其中既有簡單的新聞問詢,也有復(fù)雜的日程安排需求?雌饋硎歉粋小度在交流,其實背后調(diào)用了不同的模型。

      當它接受到我的問題后,先是由小模型ERNIE Tiny執(zhí)行了“模型路由”的工作;對于天氣問題,它根據(jù)天氣查詢的結(jié)果,調(diào)用基于ERNIE Lite打造的精調(diào)模型,也是經(jīng)過SFT的ERNIE Lite,給出了穿衣建議;對于更復(fù)雜的日程安排,則調(diào)用了性能最好的大模型——文心4.0,來計算出從今晚到明早的各項事項安排。

      今天,我們提給小度的每個問題,都會這樣分配給不同模型來執(zhí)行,調(diào)用應(yīng)用的API接口時,會用ERNIE Functions模型,給孩子講題時,用文心大模型3.5或4.0,智能助理的打造則用了ERNIE Character模型,提高人設(shè)一致性、激發(fā)用戶聊天欲望。

      通過這種大小模型的組合調(diào)度方式,小度不僅順利完成了“換腦行動”,裝上了全新的AI原生操作系統(tǒng)DuerOS X,而且形成了效果、速度和成本的最優(yōu)組合,相比全部使用文心大模型的旗艦版,讓響應(yīng)速度提升2倍,成本下降了99%。剛才和我對話的這個小度添添AI平板機器人,昨天已經(jīng)在各大平臺全面開售,有興趣的朋友們可以即刻下單體驗了。

      這幾個關(guān)于ModelBuilder的例子,展示的是百度高效低價生產(chǎn)模型的能力。因為有了最強大的基礎(chǔ)模型文心4.0,我們可以根據(jù)需要,兼顧效果、響應(yīng)速度、推理成本等各種考慮,裁剪出適合各種場景的更小尺寸模型,并且支持精調(diào)和post pretrain。這樣通過降維裁剪出來的模型,比直接拿開源調(diào)出來的模型,同等尺寸下,效果明顯更好,同等效果下,成本明顯更低。大家以前用開源覺得開源便宜,其實在大模型場景下,開源是最貴的。所以開源模型會越來越落后。

      為了方便大家快速上手,ModelBuilder預(yù)置了最全面最豐富的大模型。包括了ERNIE3.5和ERNIE4.0,這是旗艦版的大模型,它適合通用的復(fù)雜場景,能力強大;還有三個輕量級的大模型, ERNIE Speed、Lite、Tiny;另外還有兩個垂直場景的模型,ERNIE Character適合角色扮演;ERNIE Functions適合對話或問答場景中的外部工具使用和業(yè)務(wù)函數(shù)調(diào)用。當然ModelBuilder也支持國內(nèi)外第三方主流模型,總數(shù)量達到77個,是國內(nèi)擁有大模型數(shù)量最多的開發(fā)平臺。

      第二屆“文心杯”創(chuàng)業(yè)大賽正式啟動:設(shè)5000萬元特別大獎

      對于開發(fā)者,我們除了提供這些開發(fā)工具,還提供資金和資源方面的支持。

      去年5月份,百度啟動了“文心杯”創(chuàng)業(yè)大賽,希望推動大模型生態(tài)繁榮,打造更有活力的生態(tài)系統(tǒng),幫助創(chuàng)業(yè)者、開發(fā)者開發(fā)各種AI原生應(yīng)用。第一屆“文心杯”創(chuàng)業(yè)大賽,我們收到了近1000支創(chuàng)業(yè)團隊報名,百度為其中的15支優(yōu)勝團隊,提供了近億元的投資支持,并且在技術(shù)、團隊和資源上持續(xù)提供全方位扶持。

      今天我宣布,第二屆“文心杯”創(chuàng)業(yè)大賽正式啟動。這次我們將擴大項目篩選范圍、設(shè)置分賽場,面向全球市場及高校學子,招募創(chuàng)業(yè)創(chuàng)新團隊,只要你的創(chuàng)業(yè)方向是AI原生應(yīng)用,都可以在大賽官網(wǎng)報名參賽。同時,我們也加大了對創(chuàng)業(yè)者的支持力度,提供更充足的投資資金、更豐富的業(yè)務(wù)資源,還首次設(shè)立了“特別大獎”,特別優(yōu)秀的項目將有機會獲得最高5000萬人民幣的現(xiàn)金和資源支持。

      中國的創(chuàng)業(yè)者和開發(fā)者,非常善于利用新技術(shù)來開發(fā)應(yīng)用。我相信,文心大模型將成為中國AI創(chuàng)業(yè)者和開發(fā)者的首選,越來越多的應(yīng)用會建立在文心大模型之上。我也期待,更多創(chuàng)業(yè)者和開發(fā)者加入我們,一起構(gòu)建繁榮的AI生態(tài)。

      視覺大模型最大的應(yīng)用場景是自動駕駛

      前面我們談到的這些工具和案例,大部分都是基于大語言模型的。面向未來,我認為多模態(tài)大模型,或者說文字、圖片、語音、視頻等多模態(tài)的融合,是基礎(chǔ)模型非常重要的長期發(fā)展方向,是通往AGI的必經(jīng)之路。百度在這些領(lǐng)域有著長期投入,并將及時更新技術(shù)進展。

      我有一個非常不一樣的判斷:視覺大模型最大的應(yīng)用場景是自動駕駛。百度在這個方向上是最好的,是自動駕駛的全球領(lǐng)導者,我們不只訓練AI如何生成視頻,更訓練AI理解真實世界發(fā)生的事情并預(yù)測未來。

      基于超過1億公里的、中國復(fù)雜城市道路測試里程數(shù)據(jù),百度訓練出來了Apollo視覺感知大模型。它具備檢測、跟蹤、理解、建圖四大基礎(chǔ)能力。這讓百度擁有了更智能、適應(yīng)性更強、更安全的自動駕駛方案。

      百度地圖也率先將視覺感知大模型應(yīng)用到了制圖領(lǐng)域,F(xiàn)在,全球最大規(guī)模的車道級地圖數(shù)據(jù),已經(jīng)上線全國360座城市。只要百度地圖導航能去的地方,智駕就都能開。

      今年春節(jié)后,百度的蘿卜快跑實現(xiàn)了萬里長江“第一跨”, 我們把服務(wù)從長江的北岸延伸到了南岸,在武漢的部分區(qū)域,我們已經(jīng)實現(xiàn)了7X24小時的全天候運營,還計劃年內(nèi)在武漢部署1000臺無人駕駛車輛。

      這是自動駕駛走向真正商業(yè)化的一個標志性事件,它不再僅僅是區(qū)域性的示范,而是進入到了城市級應(yīng)用示范的新階段。蘿卜快跑在武漢覆蓋了3000多平方公里、770萬人口,是全球范圍內(nèi)最大規(guī)模的自動駕駛運營區(qū)域。

      “打包帶走,隨取隨用”

      剛才,我給大家展示了百度文心大模型系列,以及三個開發(fā)工具——AgentBuilder、AppBuilder、ModelBuilder,他們組成了一個工具箱,你們可以馬上打包帶走,隨取隨用。

      此時此刻,我站在這里,其實也是一個開發(fā)者、一個創(chuàng)業(yè)者,跟大家一樣興奮。今天的中國,有10億互聯(lián)網(wǎng)用戶,有強大的基礎(chǔ)大模型,有足夠多的AI應(yīng)用場景,有全球最完備的產(chǎn)業(yè)體系,國家也在大力鼓勵和支持“人工智能+”行動,每一個人,每一家企業(yè),只需要充分利用這些工具,就可以釋放無限的創(chuàng)造力和生產(chǎn)力。

      今天,人人都可以成為開發(fā)者。而未來,也必將是一個由開發(fā)者一起創(chuàng)造出來的未來!

      謝謝大家!

      文章內(nèi)容僅供閱讀,不構(gòu)成投資建議,請謹慎對待。投資者據(jù)此操作,風險自擔。

    即時

    TCL實業(yè)榮獲IFA2024多項大獎,展示全球科技創(chuàng)新力量

    近日,德國柏林國際電子消費品展覽會(IFA2024)隆重舉辦。憑借在核心技術(shù)、產(chǎn)品設(shè)計及應(yīng)用方面的創(chuàng)新變革,全球領(lǐng)先的智能終端企業(yè)TCL實業(yè)成功斬獲兩項“IFA全球產(chǎn)品設(shè)計創(chuàng)新大獎”金獎,有力證明了其在全球市場的強大影響力。

    新聞

    敢闖技術(shù)無人區(qū) TCL實業(yè)斬獲多項AWE 2024艾普蘭獎

    近日,中國家電及消費電子博覽會(AWE 2024)隆重開幕。全球領(lǐng)先的智能終端企業(yè)TCL實業(yè)攜多款創(chuàng)新技術(shù)和新品亮相,以敢為精神勇闖技術(shù)無人區(qū),斬獲四項AWE 2024艾普蘭大獎。

    企業(yè)IT

    重慶創(chuàng)新公積金應(yīng)用,“區(qū)塊鏈+政務(wù)服務(wù)”顯成效

    “以前都要去窗口辦,一套流程下來都要半個月了,現(xiàn)在方便多了!”打開“重慶公積金”微信小程序,按照提示流程提交相關(guān)材料,僅幾秒鐘,重慶市民曾某的賬戶就打進了21600元。

    3C消費

    “純臻4K 視界煥新”——愛普生4K 3LCD 激光工程投影

    2024年3月12日,由愛普生舉辦的主題為“純臻4K 視界煥新”新品發(fā)布會在上海盛大舉行。

    研究

    2024全球開發(fā)者先鋒大會即將開幕

    由世界人工智能大會組委會、上海市經(jīng)信委、徐匯區(qū)政府、臨港新片區(qū)管委會共同指導,由上海市人工智能行業(yè)協(xié)會聯(lián)合上海人工智能實驗室、上海臨港經(jīng)濟發(fā)展(集團)有限公司、開放原子開源基金會主辦的“2024全球開發(fā)者先鋒大會”,將于2024年3月23日至24日舉辦。