來源:映維網(wǎng)?作者?廣州客
今天的虛擬現(xiàn)實允許我們探索數(shù)字化的世界并在其中與朋友互動,而當(dāng)前的增強現(xiàn)實則支持我們通過智能 創(chuàng)建和共享全新的體驗。Facebook?Reality Labs (FRL)的研究人員正在推動 和AR領(lǐng)域的發(fā)展,而這項工作最終將能幫助我們把虛擬對象無縫疊加在現(xiàn)實世界之上,并增強我們的日常生活體驗。這家公司表示:“我們相信,未來將能以輕便的全天佩戴型AR眼鏡形式實現(xiàn)。”
在今天的OC6大會中,F(xiàn)acebook介紹了FRL的新一波創(chuàng)新,如映射技術(shù)和全身虛擬化身。這一系列的進步將能令由AR驅(qū)動的未來更加接近于成為現(xiàn)實。
1. 在VR中實現(xiàn)真正的 臨場感
首先,F(xiàn)RL正致力于在VR中實現(xiàn)比當(dāng)今2D技術(shù)更深的聯(lián)結(jié)感。他們指出:“我們的目標是令虛擬交互與面對面交互一樣自然。我們將其稱之為‘社交臨場感’。這是一種基于3D的感覺,即使彼此之間相距遙遠,但雙方依然感覺大家共存于同一個空間,并且能夠無縫,輕松地交流各自的想法和情感。”為了在VR中實現(xiàn)這一目標,我們需要可以忠實地再現(xiàn)面部表情,手勢和聲音的逼真虛擬化身。
2. 全身式Codec Avatars
Facebook于今年年初分享了關(guān)于Codec Avatars的研究。這種栩栩如生的虛擬化身可以實時進行動畫制作,從而為VR帶來了輕松,實時的無腳本交互。兩人能夠仿佛身處于同一個物理房間中,并且自然地通過逼真虛擬化身進行交流只是第一步。
延伸閱讀:Facebook 50年征途:Codec Avatars,創(chuàng)造逼真虛擬化身
在這個視頻中,頭顯中的傳感器可以測量技術(shù)項目經(jīng)理丹妮爾·貝爾科(Danielle Belko)和研究科學(xué)總監(jiān)亞瑟·謝赫(Yaser Sheikh)的面部表情。然后,相關(guān)測量值會實時轉(zhuǎn)換為音頻和視覺信號,并且完美地映射出對方的形象,動作和聲音。
但是,實現(xiàn)真正的社交臨場感不僅僅需要面容表情。肢體語言對于我們的溝通同樣重要。所以,今天FRL團隊證實介紹了全身式Codec Avatars。盡管短期內(nèi)你無法在消費類產(chǎn)品中看到這項技術(shù),但我們可以想象這樣一個未來:你我將能夠通過數(shù)個自拍來創(chuàng)建自己的超現(xiàn)實虛擬化身,然后頭顯能夠?qū)崟r制作動畫。顯然,未來將迎來全新的全身沉浸式VR浪潮。
3. VR中的共享空間
諸如客廳或辦公室環(huán)境的空間對我們的生活至關(guān)重要。Facebook希望將其帶到虛擬現(xiàn)實,從而允許用戶在自己所關(guān)心的地方度過時光。所以,這家公司正在大力創(chuàng)建盡可能逼真的現(xiàn)實世界3D模型。
FRL在今年六月展示了最新的現(xiàn)實環(huán)境3D模型,并向研究社區(qū)發(fā)布了18個空間的數(shù)據(jù)集。這種模擬環(huán)境捕獲了房間的細微細節(jié),如鏡面反射和地毯紋理,而這是令它們與真實物體幾乎無法區(qū)分的必要條件。Facebook指出:“通過將高精度的深度捕獲系統(tǒng),最新的即時定位和地圖構(gòu)建(SLAM)技術(shù),先進的攝影頭,以及密集的重建系統(tǒng)相結(jié)合,我們能夠在VR中達到前所未有的保真度。”
延伸閱讀:Facebook用逼真物理建模構(gòu)建智能具身化AR
在今年的OC6大會中,F(xiàn)RL演示了相關(guān)的3D建模技術(shù)。其中,兩人可以使用Oculus?Avatars共同出現(xiàn)在3D重建空間中,并且一起看欣賞視頻或開玩 。他們指出:“這是人們第一次在個性化3D環(huán)境中共享體驗,而這是激動人心的未來一瞥。”
在這個視頻中,F(xiàn)acebook AR/VR副總裁安德魯·博斯沃斯及其父親正在后者的公寓3D模型中一起觀看勇士隊的比賽。
Facebook展示的重建是用3D定位算法和特殊的深度感應(yīng)攝像頭所創(chuàng)建,同時屬于研究階段的概念證明。盡管這項技術(shù)尚不完善,但團隊正在探索如何支持用戶在將來重新創(chuàng)建自己的個人空間。
4. 將技術(shù)整合在一起,將你我聚集在一起
在上面的空間共享視頻中,逼真的空間中出現(xiàn)了卡通畫的Oculus Avatar。但是,當(dāng)將超逼真的全身式Codec Avatar置于超逼真的環(huán)境中,甚至是未來的個性化環(huán)境中時,事情就會變得令人興奮起來。這能夠?qū)崿F(xiàn)真正意義上的傳送,任何人都可以與自己珍視的人共聚在一起。想象一下,你可以加入地球另一端的家庭聚會。VR同時具有實現(xiàn)遠程工作的潛力,它可以為你提供協(xié)作工具:PC顯示器質(zhì)量的虛擬屏幕,全息圖和白板。你同時可以自由進行配置,而這在現(xiàn)實世界中所不可能實現(xiàn)的事情。這將會對我們的生活產(chǎn)生巨大的積極影響:消除通勤需要,并且改變我們的協(xié)作和創(chuàng)造方式。
這項研究同時可對AR眼鏡產(chǎn)生影響。在未來,AR眼鏡將為你帶來無數(shù)的可能性,包括在旅途中隨時隨地進行傳送。這樣一來,這將允許你與任何位置的任何人保持聯(lián)系并建立深入的關(guān)系。實際上,利用自己的虛擬化身,你可以傳送至世界任何一個角落。當(dāng)然,這將需要更大規(guī)模地虛擬化不同的空間,而FRL的研究團隊已經(jīng)開始著手應(yīng)對這一挑戰(zhàn)。
5. LiveMaps
FRL研究團隊正在開始構(gòu)建將為明天的AR體驗奠定基礎(chǔ)的核心基礎(chǔ)架構(gòu)。
如何實現(xiàn)呢?請聯(lián)想前面所說的3D空間,并想想未來它將能夠在整個地球中實現(xiàn)。利用機器視覺和SLAM技術(shù),LiveMaps可以創(chuàng)建共享的虛擬映射。為了實現(xiàn)這種規(guī)模的技術(shù),F(xiàn)RL團隊設(shè)想LiveMaps將依靠未來智能設(shè)備捕獲的眾包信息。為了填充第一代映射,研究人員正在探索對Facebook的園區(qū)進行映射繪制,以及采用包含地理標簽的公共圖像來生成點云(這是當(dāng)今導(dǎo)航地圖中常用的技術(shù))。
AR眼鏡未來將能利用這種3D映射,無需實時重建周圍環(huán)境。這意味著你的眼鏡將能大幅降低計算功耗,亦即移動芯片組足以支持其運行。有了這種3D空間,你的虛擬化身就可以傳送到世界任何地方。
除傳送之外,LiveMaps未來將能支持你搜索和共享有關(guān)物理世界的實時信息。屆時,強大的人工助手將能夠立即為你帶來與位置相關(guān)的個性化信息。它同時將為你提供一個疊加圖,允許你將虛擬內(nèi)容錨定在現(xiàn)實世界中。
這支團隊指出:“我們依然處于研究階段,但的我們愿意公開這項研究,并且分享我們在AR眼鏡開發(fā)過程中取得的進展。我們同時會考慮如何在保護隱私的情況下繼續(xù)推進這項研究,并邀請全球?qū)<姨峁╆P(guān)于最佳時間,以及人們?nèi)绾伪A糇约簩π畔⒌目刂频姆答仭_@項技術(shù)可能會從根本上改變?nèi)祟愇磥淼穆?lián)結(jié)方式,而我們很高興看到它給我們指明的發(fā)展方向。”
6. 從VR頭顯到AR眼鏡
Facebook最后指出:“我們經(jīng)常將VR和AR看作是兩個不同的計算平臺,但它們實際上只是硬幣的兩面。虛擬現(xiàn)實將我們沉浸在一個數(shù)字世界中,允許我們忽略地理的界限,同時發(fā)明一個個新世界。增強現(xiàn)實則將虛擬對象添加至我們對真實世界的感知之中,從而提升我們的日常體驗。當(dāng)結(jié)合起來時,它們正在重新發(fā)明我們與世界交互,與彼此聯(lián)結(jié)的方式。”
原文鏈接:https://yivian.com/news/66797.html