在年度計算機視覺會議CVPR上,Facebook展示了一種全新算法“PIFuHD”,該算法僅通過一個攝像頭就可以生成人體超高清3D模型。
Facebook是VR頭顯廠商Oculus的母公司,這家全球聞名的科技巨頭同樣也是公認的機器學習領域領軍企業。機器學習技術是應用于Oculus Quest和Rift S的核心技術,這兩款頭顯都具有“Inside-Out”定位追蹤功能,從而無需外部基站即可達到亞毫米級的定位精度。而隨著Quest手勢追蹤功能正式版本的發布,用戶無需手柄即能精準定位手部動作。
此前,在由三名Facebook員工和一位南加州大學的研究人員聯名發表的一篇名為《PIFuHD》的論文中,他們闡述了一種全新的機器學習系統,該系統可以從一張1K大小的圖像中生成人體及其衣服的超高清3D模型,而這個過程無需采用深度傳感器或運動捕捉裝備。
基于當今的硬件水平,像PIFu這樣的系統只能處理相對低分辨率的輸入圖像,這嚴重影響了輸出模型的準確性和細節展示。而PIFuHD則采用了一種全新的算法,對輸入圖像進行降采樣,并將其輸入到PIFu的低細節“course”基礎層,然后通過一個全新的獨立網絡,使用全分辨率來展示超高清的細節內容。
早在2019年3月,Facebook就展示了VR化身項目“Codec Avatars”,但該項目僅支持還原用戶頭部和面部表情,特別是要生成用戶化身,還需要使用132個攝像頭對準用戶的頭部進行費時且成本昂貴的掃描成像。
在2019年5月召開的F8年度會議上,Facebook展示了一種考慮了人體肌肉和骨骼機能的全新VR化身模型,以前所未有的逼真還原度向我們展示了實時無標記人體追蹤技術。
多年以來,Facebook一直都在潛心研究VR化身技術,其最終目標是讓用戶真實存在VR環境之中并以真實面貌與他人進行互動。雖然“PIFuHD”算法離應用于消費端產品還有很長一段路要走,但我們依然看到了該技術的遠大前景,值得期待。
電科技專注于TMT領域報道,青云計劃、百+計劃獲得者。榮獲2013搜狐最佳行業自媒體人稱號、2015中國新媒體創業大賽總決賽季軍、2018百度動態年度實力紅人等諸多大獎。
投稿請登錄:http://www.diankeji.com/member 商務合作請洽:marketing#diankeji.com
聲明:本站原創文章文字版權歸電科技所有,轉載務必注明作者和出處;本站轉載文章僅僅代表原作者觀點,不代表電科技立場,圖文版權歸原作者所有。如有侵權,請聯系我們刪除。
2021-12-16 電科技發布了 《羅永浩劃定重返科技界目標:AR/VR/MR,下一站元宇宙?》的文章
2021-11-17 電科技發布了 《愛奇藝2021Q3財報發布:總收入76億元 會員營收43億元》的文章
2021-11-05 電科技發布了 《將3A大作帶入大屏場景,樂播攜手天翼推出云游戲主機》的文章
2020-03-23 電科技獲得了沐晨的關注