Facebook宣布開源DeepFocus VR研究
外媒UploadVR報導稱,Facebook正在發佈公共代碼、以開源自家的DeepFocus研究,旨在為VR頭戴式裝置帶來超逼真的視覺效果。該公司表示,DeepFocus可以藉助神經網絡架構,產生“自然模糊”的視覺渲染效果,其架構能夠維持高品質VR所需的超清晰圖像分辨率。原先的Oculus研究團隊,已更名為FB旗下的“現實實驗室”(Facebook Reality Lab)。
Facebook Reality Lab 將致力於可能需要數年才能實現商業化的VR 和AR 概念
今年早些時候,其發布了與DeepFocus 相關的一個項目—— Half Dome 變焦硬件原型,它可以動態移動VR 頭顯的面板,提供了困擾當前設計的“朝向-適應衝突”的潛在解決方案。
這種’衝突’介於眼睛所在的位置、和眼球的鏡片焦點之間,導致一些人在無法舒適地佩戴VR 頭顯。
針對這些研究工作,Facebook Reality Labs首席科學家Michael Abrash,在9月舉辦的Oculus 者大會上進行了一些討論。
DeepFocus Random Scene Generator(via)
本月在SIGGRAPH Asia 上發表的一篇研究論文,詳細介紹了DeepFocus 方法,解釋其如何應用於Half Dome 等變焦結構、還支持多焦點和光場顯示等高質量圖像合成。
今日的Oculus 博客文章中寫到—— 雖然我們當前正在使用DeepFocus 和Half Dome,但基於深度學習的散焦機制,是與硬件無關的。
Oculus 研究報告顯示,除了在變焦顯示屏上進行實時的模糊渲染,DeepFocus 還能使系統適用於所有下一代頭戴式顯示技術。
Half Dome 是Facebook 研究團隊公開發布的最有趣的硬件項目之一。遺憾的是,它最終並未在九月的Oculus Connect 5 大會上亮相,聯合創始人 Brendan Iribe 也在幾週後從該公司離職。
一份報告指出,他的離職與未來基於PC 的頭顯發展方向有關。我們想知道這個相關項目的開源,是否可能表明Facebook 已經停止了對Half Dome 的後續研究。
不過Facebook 發言人表示,Half Dome 和DeepFocus 的研究仍在繼續,本次開源旨在加速該領域的發展,讓全行業都受益。
DeepFocus Example Results – Facebook Reality Labs(via)
根據Oculus 博客今日發布的消息,研究人員Salah Nouri 參與了該項目,以幫助證明DeepFocus 確實可在Half Dome 上運行,能夠對適當的VR 分辨率進行實時模糊處理。
Nouri 能夠在一套四路GPU 平台上演示DeepFocus和Half Dome,與消費者當前所擁有的配置相比,其性能明顯強大得多,但它仍是一項重大的科技成就。
我們需要非常謹慎地優化四路GPU 之間的並行工作,以便它們之間的內存傳輸可以流水線化,從而不引入任何額外的延遲、以及近於零的成本代價。
這項技術對GPU 的極端要求,意味著它的成本可能相當高昂,一時間難以轉入廣闊的消費級市場,然而神經網絡可以針對低端硬件進行優化。
我們注意到,Facebook 一直在招聘更多的人,來研究定制的矽芯片,該系統有望最終降低終端用戶的整體系統成本。
[編譯自:UploadVR ]