智東西6月24日消息，近日，谷歌發(fā)布了一項新的球形“光場視頻”捕捉方案，以提升沉浸式媒體技術(shù)。它將傳統(tǒng)的攝影和視頻以更加身臨其境的3D方式呈現(xiàn)，可以使用戶隨時改變觀看視角，甚至可以觀察到畫面內(nèi)物體的細(xì)節(jié)。

這項新技術(shù)將會在今年8月舉行的SIGGRAPH上展出。從1974年開始，SIGGRAPH每年都會舉辦一次年會，絕大部分計算機(jī)圖技術(shù)軟硬件廠商每年都會將最新研究成果拿到SIGGRAPH年會上發(fā)布，大部分游戲的電腦動畫創(chuàng)作者也將他們本年度最杰出的藝術(shù)作品集中在SIGGRAPH上展示。

一、46個攝像頭擰成一個球，多視角3D成像

據(jù)悉，谷歌的這項光場捕捉方案是一個球型結(jié)構(gòu)，這一92厘米直徑大的球由46個攝像頭組成。這個方案的原理類似于蒼蠅的復(fù)眼，每一個攝像頭可以從不同的角度捕捉周圍的場景，將多方向的視角合并為一個視角。

▲相機(jī)的視圖

相比于現(xiàn)有VR視頻中采用的普通3D立體效果，光場攝影具備更多視角，空間立體感更強(qiáng)。

在谷歌呈現(xiàn)出的視頻中，畫面可以隨著用戶的視角進(jìn)行轉(zhuǎn)變，用戶可以看到不同角度的圖像，這樣的圖像看起來更真實，并且具有動態(tài)效果。

▲谷歌的光場捕捉方案捕捉和分割視圖的步驟

二、 瀏覽超180°場景，使用DeepView拼接算法

在細(xì)節(jié)方面，這項方案捕捉的光場視頻可實現(xiàn)10ppd（角分辨率）、220°以上的視場角、30fps刷新率。

盡管每一個攝像頭模組之間的平均距離為18厘米，但是其使用的DeepView拼接算法，可通過替代數(shù)據(jù)中包含的多層球形圖像，重建距離攝像頭20厘米處的物體。

▲攝像機(jī)放置在一個92厘米直徑大的球上

谷歌研究人員曾在SIGGRAPH 2018大會展示過類似的研究，當(dāng)時他們在沉浸式VR中引入了具有圖片真實感的光場靜止圖像。而今年推出的全新系統(tǒng)增加了視頻要素，為用戶提供了一個更為動態(tài)的虛擬環(huán)境，使用戶可以瀏覽跨度超過180°的場景。

▲谷歌光場視頻捕捉畫面呈現(xiàn)

據(jù)悉，該方案可拍攝6DoF場景視頻，經(jīng)過壓縮后可在AR/VR頭顯或網(wǎng)頁端播放。此外，光場視頻的體積之小足以通過常規(guī)Wi-Fi傳輸，從而大大促進(jìn)了沉浸式AR和VR領(lǐng)域的進(jìn)步。

結(jié)語：谷歌沉浸式體驗升級，虛擬體驗更加真實

谷歌這項在光領(lǐng)域研究的新成果，為消費者提供了一種真正的沉浸式體驗。在疫情期間，大多數(shù)人不得已居家辦公，因此移動設(shè)備中的圖片和視頻的利用率越來越高。

這一成果的研究人員希望沉浸式光場圖像和視頻能夠在未來的AR和VR平臺中，能夠像移動設(shè)備的圖像視頻那樣在人們的生活中發(fā)揮重要作用。