冰雪大世界盛大開園,美的空調橫跨50℃打造“東北夏威夷”臺灣小土豆勇闖冰雪大世界,美的空調真暖快車成為最熱打卡點京東iPhone 16系列年底大放價!至高補貼1200元價格低過11.11新一季圓滿假期結伴大使出發(fā)在即 LG電子十年相伴助力溫暖傳遞中國聯(lián)通組織“魅力亞冬,與智慧同行” 主題采訪活動“萬象分區(qū)”引領電視行業(yè)新潮流,TCL這步棋下得著實漂亮!百度職業(yè)院校專屬項目“大國智匠”引領職業(yè)教育新范式百度大模型助力2024年碼蹄杯程序設計大賽,全國高校學子展現(xiàn)卓越編程實力碼蹄杯人物特寫:四位編程少年的追夢之旅金倉數(shù)據(jù)庫四項成果入選2024星河案例亞信科技參加2024通信產(chǎn)業(yè)大會 CTO歐陽曄博士等做主題演講用專業(yè)贏得信賴 美好蘊育潤康引領孕產(chǎn)營養(yǎng)新風尚解鎖新成就!愛企查“度秘書”粉絲突破10萬!英特爾終止x86S架構計劃:純64位設計再度戛然而止豆包大模型全面升級,相關概念股瘋漲,字節(jié)發(fā)布緊急警示申通、圓通、韻達發(fā)布 11 月簡報:快遞業(yè)務量、收入均同比增長,單票收入均下降SensorTower發(fā)11月中國手游全球收入排行榜 庫洛入榜“YO!原”千里來相會 華為智能生活館·太原茂業(yè)重裝開業(yè)微軟承認并調查Microsoft 365 應用出現(xiàn)“產(chǎn)品已停用”錯誤SK 海力士被曝贏得博通HBM訂單,預計明年 1b DRAM 月產(chǎn)能將擴大到 16~17 萬片
  • 首頁 > 企業(yè)IT頻道 > 人工智能

    英偉達加入AI PC主戰(zhàn)場,如何變革端側AI?

    2024年01月22日 18:26:00   來源:Ai芯天下

      前言:

      去年,英偉達全年都在重點搞高端顯卡、AI大模型、超級計算等數(shù)據(jù)中心業(yè)務,讓市場都快忘了它在PC市場也是全球壟斷的硬件供應商。

      數(shù)據(jù)中心這個市場無論是規(guī)模、競爭格局,還是需求、發(fā)展趨勢,都比個人電腦業(yè)務更有搞頭,也更掙錢。

      作者 | 方文三

      圖片來源 |  網(wǎng) 絡

      英偉達在AI PC領域感受到壓力

      現(xiàn)如今,英偉達的主要收入依舊來自于個人電腦市場,特別是游戲和專業(yè)圖形處理領域。

      根據(jù)英偉達2024財年第三季度的業(yè)績,游戲業(yè)務的營收高達285.6億美元,同比增長超過80%。隨著游戲行業(yè)不斷壯大和虛擬現(xiàn)實技術逐步提升,個人電腦市場的增長空間仍然龐大。

      更為關鍵的是,英偉達擁有豐富的GPU產(chǎn)品線,能在PC市場上長期保持競爭優(yōu)勢。

      這些新產(chǎn)品對生成式AI進行了大量優(yōu)化,為GPU在未來的AIPC領域發(fā)力創(chuàng)造了條件。

      雖然PC端GPU在AI的幫助下有很大的發(fā)展機會,但在AIPC的大趨勢中,競爭也比高端GPU更殘酷。

      自去年底以來,各大市場參與者對端側AI充滿期待,眾多市場玩家試圖在端側AI市場占據(jù)一席之地。

      例如,英特爾在其新一代面向PC的Meteor Lake處理器中納入了專門的NPU加速單元;

      AMD Ryzen處理器設有Ryzen AI品牌以作宣傳;

      聯(lián)發(fā)科的天璣9300手機芯片內部的AI單元集成了所謂的[生成式AI加速引擎]。

      相應地,眾多OEM廠商紛紛響應,微軟也期望在此領域發(fā)揮標準制定者的作用。

      現(xiàn)在,英偉達不僅要面對AMD和Intel的競爭,還要應對蘋果M系列芯片的挑戰(zhàn)。

      目前,很多AI大模型開發(fā)者開始嘗試使用蘋果電腦來訓練大語言模型。

      最新款的Mac Studio頂配版已經(jīng)可以訓練擁有700億參數(shù)的LLaMA2模型。

      顯然,強調端側或本地AI推理的原因在于:

      一方面,優(yōu)良技術與熱點不應僅由英偉達獨占;另一方面,本地AI推理具有云計算無法比擬的優(yōu)勢。

      這些優(yōu)勢已廣為人知,包括數(shù)據(jù)安全與隱私、延遲需求以及無法確保實時云連接等。

      然而,對于AI而言,諸如ChatGPT、Midjourney等面向大眾的云AI相較于本地部署AI模型存在一個巨大劣勢,即無法根據(jù)個體需求進行定制。

      若將視野拓寬至消費市場以外,邊緣AI成為必然選擇。企業(yè)至少需要邊緣AI來提升生產(chǎn)力,這也是我們預測今年生成式AI發(fā)展模式的方向。

      對個人用戶而言,無論是開展科學研究還是提高具體生產(chǎn)力,端側本地AI具有可定制和更靈活的優(yōu)勢。

      例如,使用Stable Diffusion等復合式模型滿足個性化需求時,云服務或許會受限。

      最新AI PC消費級GPU發(fā)布

      在2024年CES特別活動中,英偉達正式發(fā)布了備受玩家期待的RTX40 Super系列產(chǎn)品。

      相較于英特爾和AMD的新一代芯片,RTX40 Super系列將在多個方面實現(xiàn)[數(shù)量級]的提升。

    圖片

     、貵eForce RTX4080 SUPER:支持4K全景光線追蹤游戲,在圖形密集度較高的游戲中,性能相較于不支持DLSS幀生成技術的RTX3080 Ti提升了1.4倍。

      憑借836 AI TOPS,DLSS幀生成技術為用戶帶來額外性能提升,使得RTX4080 SUPER的性能達到RTX3080 Ti的兩倍。

     、贕eForce RTX4070 Ti SUPER:擁有更多核心,顯存容量擴大至16GB,顯存位寬為256 bits。相較于RTX3070 Ti,性能提升1.6倍。

     、跥eForce RTX4070 SUPER:核心數(shù)量比RTX4070增加20%,使得其僅需RTX3090一小部分功耗即可實現(xiàn)超越RTX3090的性能。借助DLSS3的性能優(yōu)勢,領先幅度將進一步擴大至1.5倍。

      據(jù)悉,包括華碩、MSI、聯(lián)想、惠普、三星等在內的OEM終端廠商將提供基于RTX4080 SUPER的AI PC設備。

    圖片

      英偉達在端側已提前著手儲備

      從Turing架構開始,英偉達在GeForce RTX GPU中加入了Tensor Core,這是專為加速AI運算而設計的硬件單元。

      在PC端領域,與數(shù)據(jù)中心顯卡相同,均采用Ampere或Ada Lovelace架構,基于英偉達構建的軟件棧。

      因此,運用GeForce RTX顯卡進行AI推理顯得順理成章。

      英偉達在AI PC實現(xiàn)方面具備堅實基礎,其生態(tài)、軟件棧布局以及社區(qū)創(chuàng)新玩法相對較早。

      相較之下,英特爾在今年初才開始推廣AI PC概念,實際上已晚于英偉達。

      他們計劃在未來幾年推出的H200、B100和X100 GPU,以及每年更新AI GPU的策略。

      因為競爭對手如谷歌、亞馬遜、微軟、AMD和英特爾的壓力,英偉達加快了B100和X100的研發(fā)。

      為了加速研發(fā),AMD甚至可能取消了他們的MI350X計劃。

      英偉達的目標可不只是超越英特爾和AMD這些傳統(tǒng)對手,他們還想和谷歌、微軟、亞馬遜、Meta和蘋果這些科技巨頭并駕齊驅。

      他們充分利用了HGX板或服務器所需的眾多下游組件,如定時器、DSP、光學器件等。

      對于猶豫是否要供應英偉達的供應商,英偉達會采取又哄又壓的策略。

      一方面,供應商能從英偉達那接到大單;另一方面,他們也可能面臨被英偉達從現(xiàn)有供應鏈中踢出的風險。

      結尾:CUDA生態(tài)將在AIPC釋放更大能量

      如今,全球有超過1億臺搭載英偉達RTX GPU的Windows PC和工作站。

      作為AI大模型時代核心玩家,英偉達通過全棧生態(tài)賦能,讓這些[RTX PC]的AI性能實現(xiàn)翻倍增長。

      英偉達創(chuàng)始人黃仁勛認為,通過發(fā)明CUDA這種新編程工具和GPU處理器,推動加速計算。

      英偉達在技術生態(tài),特別是25年CUDA領域耕耘,為其在AI時代占據(jù)核心地位奠定基礎,這種生態(tài)布局在PC產(chǎn)業(yè)中釋放的能量日益顯現(xiàn)。

      今年四季度,英偉達發(fā)布TensorRT-LLM引擎優(yōu)化編譯器,旨在提升大語言模型AI推理性能。

      據(jù)官方數(shù)據(jù),TensorRT-LLM助力下,Lambda2大語言模型在H200上的推理能力達到H100的2倍,成本降低,且H200在GPT-3模型上的推理性能比H100提升18倍。

      TensorRT-LLM for Windows的推出,使AI大模型在端側RTX PC中應用更佳,滿足用戶各類AIGC需求,提升AI PC體驗。

      部分資料參考:虎嗅APP:《英偉達也在下一盤AIPC的大棋》,電子工程專輯:《明年的PC行業(yè),在AI里廝殺!》,鈦媒體:《英偉達發(fā)布最強消費級顯卡,AI PC性能提升60倍》,雷鋒網(wǎng):《性能是其它AI PC的60倍,英偉達如何變革端側AI?》

      文章內容僅供閱讀,不構成投資建議,請謹慎對待。投資者據(jù)此操作,風險自擔。

    即時

    新聞

    明火炊具市場:三季度健康屬性貫穿全類目

    奧維云網(wǎng)(AVC)推總數(shù)據(jù)顯示,2024年1-9月明火炊具線上零售額94.2億元,同比增加3.1%,其中抖音渠道表現(xiàn)優(yōu)異,同比有14%的漲幅,傳統(tǒng)電商略有下滑,同比降低2.3%。

    企業(yè)IT

    重慶創(chuàng)新公積金應用,“區(qū)塊鏈+政務服務”顯成效

    “以前都要去窗口辦,一套流程下來都要半個月了,現(xiàn)在方便多了!”打開“重慶公積金”微信小程序,按照提示流程提交相關材料,僅幾秒鐘,重慶市民曾某的賬戶就打進了21600元。

    3C消費

    華碩ProArt創(chuàng)藝27 Pro PA279CRV顯示器,高能實力,創(chuàng)

    華碩ProArt創(chuàng)藝27 Pro PA279CRV顯示器,憑借其優(yōu)秀的性能配置和精準的色彩呈現(xiàn)能力,為您的創(chuàng)作工作帶來實質性的幫助,雙十一期間低至2799元,性價比很高,簡直是創(chuàng)作者們的首選。

    研究

    中國信通院羅松:深度解讀《工業(yè)互聯(lián)網(wǎng)標識解析體系

    9月14日,2024全球工業(yè)互聯(lián)網(wǎng)大會——工業(yè)互聯(lián)網(wǎng)標識解析專題論壇在沈陽成功舉辦。