Lytro計劃用光場技術(shù)打造完整VR捕捉 渲染工具集

　　2017年12月18日，光場技術(shù)開發(fā)商Lytro認為光場捕捉和播放技術(shù)是沉浸式內(nèi)容的理想格式。這家公司正在為捕捉，渲染，以及合成數(shù)字與真人實景光場體驗構(gòu)建工具集，然后以最高播放質(zhì)量提供至各個平臺。

　　Lytro執(zhí)行總監(jiān)Jason Rosenthal日前介紹了他們是如何部署工具集，以創(chuàng)建所謂的Lytro Reality Experience。然后從高端VR頭顯到移動360，他們將根據(jù)各個平臺的具體質(zhì)量和性能來提供高質(zhì)量的光場沉浸式體驗。

　　光場是預(yù)先計算的場景，可以從捕獲或渲染體積內(nèi)的任意一點來重新創(chuàng)建視圖。簡而言之，這意味著光場可以作為實時渲染進行播放，同時維持身臨其境的6自由度定位追蹤和(一定的)交互性。光場技術(shù)的目標是，將最佳的實時沉浸式和預(yù)渲染VR體驗的視覺質(zhì)量結(jié)合在一起。

　　Rosenthal指出，媒介的分辨率需要新的內(nèi)容格式。他將PDF，OpenGL，http和MPED作為例子，并指出這一系列的媒介都極大改變了我們制作和消費信息的方式。他說，沉浸式媒介需要一種體積式格式。

　　為實現(xiàn)這一點，Lytro一直在為光場制作完整的制作管道，包括光場內(nèi)容的捕捉/渲染，處理，交付和播放。這種方法的優(yōu)點是，初創(chuàng)者可以一次性捕捉/渲染和處理他們的內(nèi)容，然后將其交付至各個不同的頭顯和平臺，無需為每個單獨的平臺重新捕捉，重新制作，或重新處理。

　　Lytro的工具集主要包括三個組成部分。首先是能夠?qū)崿F(xiàn)高質(zhì)量光場捕捉的光場相機Immerge;然后是可以根據(jù)CG內(nèi)容渲染合成光場的Volume Tracer軟件;最后是Lytro研發(fā)的播放軟件，其能夠在每臺設(shè)備上實現(xiàn)最高保真度的播放體驗。

　　例如，創(chuàng)作者可以通過行業(yè)標準的渲染和動畫工具來創(chuàng)建一個高保真的CGI場景(比如Lytro日前展示的Lytro Reality Experience“One Morning”)，然后將其作為Lytro Reality Experience進行輸出，這樣體驗就可以部署至高端，低端甚至360度平臺，而創(chuàng)作者無需根據(jù)每一臺設(shè)備修改源內(nèi)容，同時無需放棄光線追蹤和預(yù)渲染內(nèi)容的圖形質(zhì)量。

　　Lytro暫時沒有對外開放他們的工具，而他們正在與特定的客戶進行一對一的合作，共同推出更多的Lytro Reality Experience。另外，這家公司鼓勵任何有興趣的合作商聯(lián)系他們。

　　上圖是Lytro Reality Experience的一個示例。Lytro表示，這種高保真光場場景能夠與實時交互式內(nèi)容無縫融合。

　　從僅適用于線下VR街機店的高端VR系統(tǒng)到iPad的360度播放，我們已經(jīng)通過一系列的設(shè)備體驗過他們的Lytro Reality Experience(如“Hallelujah”)。他們希望可以最大限度地提高每臺設(shè)備能夠支持的保真度和體驗質(zhì)量。在高端PC VR系統(tǒng)中，這意味著光場數(shù)據(jù)集能夠即時生成最高質(zhì)量的圖像，并提供6自由度追蹤;對于性能相對較低的PC VR系統(tǒng)或移動頭顯，相同的場景將以烘焙3D幾何進行呈現(xiàn);而移動設(shè)備將能夠以高達10K的分辨率來渲染出高質(zhì)量360視頻。這一切都是基于相同的預(yù)渲染源asset。

　　顯然，光場技術(shù)的吸引力十分突出，尤其是對于那些希望在實時渲染中發(fā)揮出敘述性體驗最大潛能的創(chuàng)作者而言。

　　但由于光場涉及預(yù)渲染，光場場景的交互程度比不上傳統(tǒng)的實時渲染。Rosenthal坦誠了這一限制，并表示Lytro即將推出支持主流游戲引擎的集成，而這將使得創(chuàng)作者在單個體驗中輕松混合和匹配光場與實時內(nèi)容成為可能，從而為挖掘未來VR內(nèi)容的有趣可能性上打開了大門。

　　盡管光場技術(shù)的潛力十分有趣，但它們在普及上正面臨著一個障礙：文件大小。即使是小型的光場場景也可能產(chǎn)生大量的數(shù)據(jù)，所以如果不采取大規(guī)模靜態(tài)文件下載的方式，向消費者提供體驗就會變得非常具有挑戰(zhàn)性。Lytro非常了解這一挑戰(zhàn)，并且一直在積極地尋找減少數(shù)據(jù)大小的解決方案。Rosenthal指出，他們正在努力控制光場文件的大小，并且提供了當(dāng)前針對各個消費終端的數(shù)據(jù)傳輸速率：

　　6自由度線下VR：0.5TB/minute

　　家庭PC VR系統(tǒng)：2.7GB/minute

　　移動設(shè)備：2.5GB/minute

　　360度全景：9.8MB/munite

　　以上都是Lytro“Hallelujah”體驗為每個消費終端進行優(yōu)化后所得出的數(shù)據(jù)。你認為這一系列的數(shù)字很嚇人嗎?在不久前，相關(guān)的數(shù)字還要高出很多。Lytro同時展示了仍然在開發(fā)中的“interesting work”，并聲稱其能夠?qū)⒁陨蠑?shù)字減少75%。

　　盡管Lytro的愿景，日益發(fā)展的工具集，以及致力于減少文件大小的努力令人看到了希望，但他們尚未公開提供可用的技術(shù)演示作品。不過，Lytro表示他們的一位合作伙伴將于2018年Q1季度首次公開一款Lytro Reality Experience。