1月13日京東3C數(shù)碼“瘋狂星期一”低價(jià)來襲 爆款低至5折Perplexity與旅游網(wǎng)站合作 帶來全新酒店信息搜索體驗(yàn)微軟聯(lián)合清北推rStar-Math技術(shù):小型模型逆襲數(shù)學(xué)問題,超越 OpenAI!xAI首款獨(dú)立應(yīng)用Grok上線,在蘋果應(yīng)用商店上架華碩CES 2025新品搶先在京東開啟預(yù)約 1元解鎖超值早鳥權(quán)益東哥同款年貨詞典筆備受關(guān)注 有道詞典筆流量環(huán)比增長超270%全球首列商業(yè)化運(yùn)營碳纖維地鐵列車“CETROVO 1.0 碳星快軌”在青島開啟載客運(yùn)營Linux 基金會(huì)提出“Chromium 瀏覽器支持者”計(jì)劃,谷歌、微軟、Meta、Opera 紛紛加入廣汽菲克長沙工廠第 5 次拍賣:起拍價(jià)降至 9.92 億元接近腰斬,前 4 次均因無人報(bào)名而流拍升起獨(dú)立大旗,英特爾旗下可編程芯片子公司 Altera 正式以獨(dú)立子公司身份運(yùn)營商湯科技發(fā)布 “日日新” 融合大模型,與DeepSeek V3不相上下海螺AI推出主體參考功能 一張圖片就能玩轉(zhuǎn)電影大片一加13系列北美歐洲首銷戰(zhàn)報(bào):首小時(shí)同比增長167%2024年國游銷量年榜出爐:《黑神話》銷量2800萬穩(wěn)居第一 賺了90億微信官網(wǎng)上線HarmonyOS標(biāo)識(shí)!華為鴻蒙已是全球第三大移動(dòng)操作系統(tǒng)儲(chǔ)能迎來“集裝箱時(shí)刻”:海辰儲(chǔ)能首發(fā)儲(chǔ)能“標(biāo)準(zhǔn)化”新解法,用Pack撬動(dòng)未來蔚來 firefly 螢火蟲部分配置公布,采用后五連桿獨(dú)立懸架CES 2025揭幕!CHERRY開啟客制化AI外設(shè)新紀(jì)元卡特彼勒開啟創(chuàng)新與行業(yè)領(lǐng)導(dǎo)力的下一個(gè)100年Linux基金會(huì) 谷歌 微軟 Meta Opera成立Chromium瀏覽器支持者聯(lián)盟 1月13日京東3C數(shù)碼“瘋狂星期一”低價(jià)來襲 爆款低至5折Perplexity與旅游網(wǎng)站合作 帶來全新酒店信息搜索體驗(yàn)微軟聯(lián)合清北推rStar-Math技術(shù):小型模型逆襲數(shù)學(xué)問題,超越 OpenAI!xAI首款獨(dú)立應(yīng)用Grok上線,在蘋果應(yīng)用商店上架華碩CES 2025新品搶先在京東開啟預(yù)約 1元解鎖超值早鳥權(quán)益東哥同款年貨詞典筆備受關(guān)注 有道詞典筆流量環(huán)比增長超270%全球首列商業(yè)化運(yùn)營碳纖維地鐵列車“CETROVO 1.0 碳星快軌”在青島開啟載客運(yùn)營Linux 基金會(huì)提出“Chromium 瀏覽器支持者”計(jì)劃,谷歌、微軟、Meta、Opera 紛紛加入廣汽菲克長沙工廠第 5 次拍賣:起拍價(jià)降至 9.92 億元接近腰斬,前 4 次均因無人報(bào)名而流拍升起獨(dú)立大旗,英特爾旗下可編程芯片子公司 Altera 正式以獨(dú)立子公司身份運(yùn)營商湯科技發(fā)布 “日日新” 融合大模型,與DeepSeek V3不相上下海螺AI推出主體參考功能 一張圖片就能玩轉(zhuǎn)電影大片一加13系列北美歐洲首銷戰(zhàn)報(bào):首小時(shí)同比增長167%2024年國游銷量年榜出爐:《黑神話》銷量2800萬穩(wěn)居第一 賺了90億微信官網(wǎng)上線HarmonyOS標(biāo)識(shí)!華為鴻蒙已是全球第三大移動(dòng)操作系統(tǒng)儲(chǔ)能迎來“集裝箱時(shí)刻”:海辰儲(chǔ)能首發(fā)儲(chǔ)能“標(biāo)準(zhǔn)化”新解法,用Pack撬動(dòng)未來蔚來 firefly 螢火蟲部分配置公布,采用后五連桿獨(dú)立懸架CES 2025揭幕!CHERRY開啟客制化AI外設(shè)新紀(jì)元卡特彼勒開啟創(chuàng)新與行業(yè)領(lǐng)導(dǎo)力的下一個(gè)100年Linux基金會(huì) 谷歌 微軟 Meta Opera成立Chromium瀏覽器支持者聯(lián)盟
  • 首頁 > 企業(yè)IT頻道 > 人工智能

    深入研究多模態(tài)生成式人工智能

    2023年11月29日 15:47:52   來源:千家網(wǎng)

      多模態(tài)生成人工智(GenAI)能被認(rèn)為是我們實(shí)現(xiàn)通用人工智能道路上的下一件大事。

      這是一個(gè)經(jīng)過設(shè)計(jì)、理論化和實(shí)施的概念,旨在提供多感官沉浸式體驗(yàn)。

      其從多種數(shù)據(jù)類型的組合中提取輸出,以提供見解、內(nèi)容等響應(yīng)。

      繼續(xù)閱讀,了解多模態(tài)生成式人工智能、其好處、潛力和采用以及相關(guān)問題。

      過去幾年推出的多種生成式人工智能工具證明了過去十年人工智能(AI)技術(shù)取得的突破。在相對較短的歷史中,GenAI已經(jīng)創(chuàng)造了一種緊迫感,將其引入任何組織的日常和利基操作元素。

      雖然OpenAI的首個(gè)文本到圖像生成器DALL-E的真實(shí)感對大多數(shù)組織來說作用有限,但ChatGPT的推出不到一年,已經(jīng)讓組織通過尋找各種途徑來獲得優(yōu)勢,其中生成人工智能可以積極影響運(yùn)營。

      根據(jù)McKinsey的《人工智能現(xiàn)狀》,到2023年,三分之一的組織將把GenAI納入至少一項(xiàng)業(yè)務(wù)功能。此外,在McKinsey的調(diào)查中,約75%的受訪者預(yù)計(jì)GenAI將給其行業(yè)帶來顛覆性的變化。

      人工智能功能主要用于產(chǎn)品開發(fā)、功能添加、客戶體驗(yàn)、營銷功能等。

      然而,GenAI現(xiàn)在采取了不同的形式,稱為多模態(tài),其接受多種感官輸入,以相似或不同的數(shù)據(jù)類型提供輸出。例如,ChatGPT的新更新賦予了其多模態(tài)的能力,其現(xiàn)在不僅可以生成故事、文章和其他文本,還可以閱讀。ChatGPT還可以通過語音提示執(zhí)行任務(wù)。其還可以讀取圖像來識(shí)別特定的物體。

      多模態(tài)GenAI被認(rèn)為是我們實(shí)現(xiàn)通用人工智能之路上的下一件大事。讓我們來看看它是什么。

      什么是多模態(tài)生成式人工智能?

      多模態(tài)GenAI是一個(gè)經(jīng)過設(shè)計(jì)、理論化并正在實(shí)施的概念,旨在提供多感官沉浸式體驗(yàn)。其從多種數(shù)據(jù)類型的組合中提取輸出,以提供見解、內(nèi)容等響應(yīng)。

      多模態(tài)生成式人工智能是一種人工智能,其結(jié)合了多種類型或模式的數(shù)據(jù),如文本、圖像、視頻、音頻、深度等,來創(chuàng)造更多對“現(xiàn)實(shí)世界”的設(shè)置、場景或問題做出準(zhǔn)確的判斷或更精確的預(yù)測。這些模型接受了它們需要解釋或響應(yīng)的多種模式/數(shù)據(jù)類型的數(shù)據(jù)集的訓(xùn)練。

      多模態(tài)GenAI與GenAI類似,不同之處在于其利用多維嵌入或索引,并且可以依賴向量數(shù)據(jù)庫進(jìn)行操作。這種差異的核心在于,多模態(tài)GenAI可以通過多維嵌入或索引來攝取、處理和輸出多種類型的數(shù)據(jù)。

      Meta今年早些時(shí)候發(fā)布的ImageBind多模態(tài)人工智能在ChatGPT的基礎(chǔ)上更進(jìn)一步,集成了六種模態(tài),即文本、圖像/視頻、音頻、深度、基于紅外的熱輻射和慣性測量單元(IMU)。該企業(yè)還將更多感官的整合,包括嗅覺和觸覺,以及大腦功能磁共振成像信號(hào)作為多模態(tài)研究的一部分。

      多模態(tài)生成式人工智能的好處

      組合和處理來自多個(gè)來源的信息可以潛在地將差異均質(zhì)化,以提供情境相關(guān)的結(jié)果。在企業(yè)環(huán)境中,這可以提高員工的工作效率。

      通過為機(jī)器交互創(chuàng)建新的途徑,多模態(tài)GenAI可以重塑終端用戶和業(yè)務(wù)用戶的用戶體驗(yàn)。

      鑒于其在物理科學(xué)、生命/生物科學(xué)和社會(huì)科學(xué)研究中的應(yīng)用潛力,其還具有一定的社會(huì)和科學(xué)效益。甚至在GenAI興起之前,即2021年6月,Google就能夠利用其基于強(qiáng)化學(xué)習(xí)算法的機(jī)器學(xué)習(xí)模型來執(zhí)行半導(dǎo)體布局規(guī)劃,這是芯片設(shè)計(jì)的關(guān)鍵步驟。

      最終,其可以基于跨多種模式的大量數(shù)據(jù)存儲(chǔ),在多感官/多模式空間中做出越來越準(zhǔn)確的確定和預(yù)測。其不僅可以比人類更快地接受數(shù)據(jù)訓(xùn)練,而且還可以更快地根據(jù)數(shù)據(jù)做出決策。

      多模態(tài)生成式人工智能的采用

      多模態(tài)GenAI已經(jīng)看到了GenAI的一些應(yīng)用,例如Adobe的Firefly–文本到圖像多模態(tài)和MidJourney。請注意,兩個(gè)GenAI的多模態(tài)使其能夠接受音頻和視覺輸入。

      多模態(tài)的另一個(gè)商業(yè)用例包括基于電話的自動(dòng)化支持系統(tǒng),該系統(tǒng)可能會(huì)將我們語氣中明顯的情緒轉(zhuǎn)化為企業(yè)可用于報(bào)告和分析的文本數(shù)據(jù)。

      另一方面,其也可能被用來損害用戶的利益。一些“企業(yè)”已經(jīng)開始使用文本到音頻多模態(tài)模型來生成更真實(shí)、更動(dòng)態(tài)的聲音,通過電話進(jìn)行詐騙。

      然而,就像以前的技術(shù)發(fā)明一樣,多模態(tài)和常規(guī)GenAI允許數(shù)十種職業(yè)發(fā)展。律師、作家、科學(xué)家、教師等可以優(yōu)化耗時(shí)的任務(wù),例如研究、戰(zhàn)略制定、文件起草和生成等,前提是這些任務(wù)屬于多模態(tài)GenAI工具所訓(xùn)練的基礎(chǔ)數(shù)據(jù)的范圍。

      簡而言之,如果可以獲得正確的數(shù)據(jù),知識(shí)經(jīng)濟(jì)可能會(huì)發(fā)生巨大轉(zhuǎn)變。

      這是一個(gè)很大的“如果”。

      這就是為什么我們距離主流應(yīng)用滲透到社會(huì)結(jié)構(gòu)還有數(shù)年的時(shí)間,主要是因?yàn)閯?chuàng)建多模態(tài)人工智能的技術(shù)困難,其次是由于當(dāng)前數(shù)據(jù)的限制。

      總而言之,以有意義的方式使用多模態(tài)GenAI的能力不僅會(huì)變得復(fù)雜,因?yàn)槟P捅旧砀鼜?fù)雜,制作成本更高,且因數(shù)據(jù)的敏感性,圍繞制作和使用其程序可能會(huì)更加棘手。所有這些都可能會(huì)減緩技術(shù)的廣泛采用。

      多模態(tài)生成人工智能可用于改善制造質(zhì)量控制、汽車預(yù)測性維護(hù)以及制造供應(yīng)鏈優(yōu)化。在醫(yī)療保健領(lǐng)域,其可以處理患者的生命體征、診斷數(shù)據(jù)、掃描圖像、外觀和其他文本/圖像/音頻/視頻記錄,以改進(jìn)診斷和治療計(jì)劃。在零售業(yè)中,其可以分析來自各種來源的數(shù)據(jù),包括傳感器、攝像頭和錄音,以識(shí)別模式并預(yù)測未來的客戶行為。還有更多。

      從廣義上講,多模態(tài)GenAI可以為開發(fā)帶來新的視覺元素。我們應(yīng)該看到某些類型的視覺和交互設(shè)計(jì)被顛覆,因?yàn)檫@很有可能能夠使用能夠接受文本輸入或視覺示例的模型來生成軟件前端和用戶體驗(yàn)的某些方面,并生成執(zhí)行其所需的設(shè)計(jì)資產(chǎn)和前端代碼。

      此外,通過促進(jìn)AR/VR的創(chuàng)造力,虛擬服務(wù)將出現(xiàn)在面向患者的醫(yī)療保健運(yùn)營和多個(gè)其他行業(yè)中。沉浸式技術(shù)的改進(jìn)在娛樂行業(yè)有明顯的應(yīng)用,但也可以在醫(yī)療技術(shù)/無障礙設(shè)備行業(yè)、制造業(yè),甚至是設(shè)計(jì)和建筑等知識(shí)工作行業(yè)中創(chuàng)造令人興奮的新事物。

      文章內(nèi)容僅供閱讀,不構(gòu)成投資建議,請謹(jǐn)慎對待。投資者據(jù)此操作,風(fēng)險(xiǎn)自擔(dān)。

    即時(shí)

    新聞

    明火炊具市場:三季度健康屬性貫穿全類目

    奧維云網(wǎng)(AVC)推總數(shù)據(jù)顯示,2024年1-9月明火炊具線上零售額94.2億元,同比增加3.1%,其中抖音渠道表現(xiàn)優(yōu)異,同比有14%的漲幅,傳統(tǒng)電商略有下滑,同比降低2.3%。

    企業(yè)IT

    重慶創(chuàng)新公積金應(yīng)用,“區(qū)塊鏈+政務(wù)服務(wù)”顯成效

    “以前都要去窗口辦,一套流程下來都要半個(gè)月了,現(xiàn)在方便多了!”打開“重慶公積金”微信小程序,按照提示流程提交相關(guān)材料,僅幾秒鐘,重慶市民曾某的賬戶就打進(jìn)了21600元。

    3C消費(fèi)

    華碩ProArt創(chuàng)藝27 Pro PA279CRV顯示器,高能實(shí)力,創(chuàng)

    華碩ProArt創(chuàng)藝27 Pro PA279CRV顯示器,憑借其優(yōu)秀的性能配置和精準(zhǔn)的色彩呈現(xiàn)能力,為您的創(chuàng)作工作帶來實(shí)質(zhì)性的幫助,雙十一期間低至2799元,性價(jià)比很高,簡直是創(chuàng)作者們的首選。

    研究

    中國信通院羅松:深度解讀《工業(yè)互聯(lián)網(wǎng)標(biāo)識(shí)解析體系

    9月14日,2024全球工業(yè)互聯(lián)網(wǎng)大會(huì)——工業(yè)互聯(lián)網(wǎng)標(biāo)識(shí)解析專題論壇在沈陽成功舉辦。