如果有關(guān)注與VR相關(guān)的技術(shù)文章,你可能曾多次見過“二次投影(reprojection)”這個術(shù)語,如交錯二次投影或異步二次投影。二次投影是為了解決VR游戲的苛刻性能要求,旨在填補無法及時渲染的幀。比方說一款游戲不能達到標(biāo)準(zhǔn)的90fps,這時交錯二次投影將“強迫”其降至45fps,并在這基礎(chǔ)下每隔一幀進行一次重新投影,從而實現(xiàn)90fps的幀率。作為交錯二次投影的升級版,異步二次投影則是智能地插入一幀,從而有效減少畫面抖動并使得體驗更為流暢自然。
現(xiàn)根據(jù)微軟的一份最新專利,這家科技巨頭似乎有意為全息視頻采用類似的二次投影技術(shù),以改善流式傳輸?shù)膸?質(zhì)量。
發(fā)明文件顯示,諸如HoloLens這樣的MR頭顯在視頻壓縮和傳輸實況視頻方面存在一定的挑戰(zhàn),如帶寬。另外,一系列現(xiàn)有的視頻壓縮技術(shù)都依賴于這樣一個概念:連續(xù)視頻幀的大部分背景從一個視頻幀到下一個視頻幀時保持相對靜態(tài),因此只有實際變化的像素需要傳輸。但對于頭戴式顯示器,頭部移動可導(dǎo)致圖像數(shù)據(jù)(包括背景)中更頻繁和更大幅度的變化,這降低了已知視頻壓縮技術(shù)的有效性。
因此,MR頭顯需要一種可以減少帶寬要求和/或提升分辨率的技術(shù),亦即微軟在名為“Reprojecting Holographic Video To Enhance Streaming Bandwidth/Quality(二次投影全息視頻以改善流式傳輸帶寬/質(zhì)量)”的發(fā)明文件中所描述的技術(shù)。
具體來說,微軟描述的技術(shù)適用于具有攝像頭和深度傳感器的全息設(shè)備。在將數(shù)據(jù)傳遞到計算P幀(或B幀)的視頻壓縮器之前,流式傳輸應(yīng)用程序執(zhí)行應(yīng)用于先前幀的圖像扭曲3D變換。系統(tǒng)將利用camera的已知3D位置和camera前面的3D幾何形狀,并基于camera的當(dāng)前位置重新投影前一幀,而不是花費時間和資源來完全重新渲染一幀,從而減少發(fā)送流式視頻的數(shù)據(jù)帶寬。
相關(guān)專利:Reprojecting Holographic Video To Enhance Streaming Bandwidth/Quality
盡管這只是一份專利,但考慮到“Reprojecting Holographic Video To Enhance Streaming Bandwidth/Quality(二次投影全息視頻以改善流式傳輸帶寬/質(zhì)量)”是于2017年1月提交,所以如果馬上就要在MWC大會亮相的HoloLens 2搭載了這項技術(shù),我們將不會感到驚訝。
文章內(nèi)容僅供閱讀,不構(gòu)成投資建議,請謹(jǐn)慎對待。投資者據(jù)此操作,風(fēng)險自擔(dān)。
近日,德國柏林國際電子消費品展覽會(IFA2024)隆重舉辦。憑借在核心技術(shù)、產(chǎn)品設(shè)計及應(yīng)用方面的創(chuàng)新變革,全球領(lǐng)先的智能終端企業(yè)TCL實業(yè)成功斬獲兩項“IFA全球產(chǎn)品設(shè)計創(chuàng)新大獎”金獎,有力證明了其在全球市場的強大影響力。
近日,中國家電及消費電子博覽會(AWE 2024)隆重開幕。全球領(lǐng)先的智能終端企業(yè)TCL實業(yè)攜多款創(chuàng)新技術(shù)和新品亮相,以敢為精神勇闖技術(shù)無人區(qū),斬獲四項AWE 2024艾普蘭大獎。
“以前都要去窗口辦,一套流程下來都要半個月了,現(xiàn)在方便多了!”打開“重慶公積金”微信小程序,按照提示流程提交相關(guān)材料,僅幾秒鐘,重慶市民曾某的賬戶就打進了21600元。
由世界人工智能大會組委會、上海市經(jīng)信委、徐匯區(qū)政府、臨港新片區(qū)管委會共同指導(dǎo),由上海市人工智能行業(yè)協(xié)會聯(lián)合上海人工智能實驗室、上海臨港經(jīng)濟發(fā)展(集團)有限公司、開放原子開源基金會主辦的“2024全球開發(fā)者先鋒大會”,將于2024年3月23日至24日舉辦。