元宇宙之眼：Meta機械仿生眼專利曝光還要裝在仿生人體內
機器人皮膚、氣動觸覺手套… Meta讓未來的元宇宙有了更真實的觸覺交互。若想看到元宇宙中高保真的虛擬世界，視覺交互也不能忽視。這不，Meta要研發機械仿生眼了。
給人裝的嗎？不是…
Meta稱未來要把它放在仿生人的身體裡，看來這是打算要造MetaHumans了？
近日，這家公司申請到了一種機械仿生眼的專利，名為Two-axis rotatable mechanical eyeball。
據稱，這項專利中的技術可以被用於構建Facebook的AR/VR應用程序，為了在元宇宙中更快地呈現3D圖像和體驗。
總之，這一專利可以稱得上是Meta在元宇宙中的又一進展。
Meta下一步，元宇宙之眼？
一項2021年12月批准的“機械眼球100”（mechanical eyeball 100）文件稱，這個金屬球體是一個類似於人眼的機器眼，有兩個相交於中心點的旋轉軸。
從專利提交時間可以看，這項仿生眼專利是在2019年6月11日提交，2021年12月7日得到審批。
這項專利詳細介紹了一種高性能和逼真機械仿生眼的設計。
該機械眼未來將用作電子動畫設備的一部分，以便更精準地追踪人類眼球的運動。
專利中，關於這項仿生眼設計的描述似乎也相當複雜，部分設計意在模仿人類眼睛的鞏膜、視網膜和角膜，以及瞳孔和虹膜。
Meta為什麼要單獨設計一個仿生眼呢？
難道是給《西部世界》擁有人工智能的仿生人使用嗎？
Meta稱，設計機械仿生眼是為了與機器人頭部進行匹配，為了讓眼睛顯得更加真實。
這只仿生眼將配備傳感器，以幫牠“看見”真實的世界，並且可以通過機器學習進行訓練和改進。
機器學習可能基於人類眼球運動數據，然後將這種能力映射到機械眼上。
專利中還提到了，眼球將被放在類似於人類皮膚的模具中。這一模具可能包括頭部和身體。
有網友表示，“那麼，他們是MetaHumans嗎？”
但這項設計究竟用於何處，一位Meta發言人稱，“該公司不對其專利的具體覆蓋範圍或申請專利的原因發表評論。一般來說，專利並不一定涵蓋我們產品和服務中使用的技術。”
要知道，Meta這只仿生眼也可以提供更多的實際應用。
仿生眼可以被用作更精確地追踪人眼運動的工具，來觀測它在屏幕上以及圖像上停留的時間。
比如，廣告中經常會用眼動追踪技術觀察用戶對廣告的喜愛程度。
另外，眼動追踪技術也可以被用於構建Facebook的AR/VR應用程序。
就比如一直爆火的Oculus頭顯，如果未來有了這項技術的加持，簡直如虎添翼。
正如知情人士所指出，這種技術可能會加速公司的增強現實和虛擬現實應用的發展，這些應用嚴重依賴於眼球追踪。
不管怎麼說，這項機械仿生眼技術更加堅定了Meta進軍元宇宙的決心。
一舉打通元宇宙“視觸聽”
這已經不是Meta第一次考慮給機器人加入人類感官特徵了。
早在去年11月，Meta與卡內基梅隆大學（CMU）合作開發了一款輕量級，觸覺傳感機器人“皮膚”，可以給機器人賦予觸覺。
據稱，機械仿生眼和人造皮膚的探索是Meta人工智能部門在2019年進行更廣泛的機器人實驗的一部分。
這款皮膚名叫ReSkin，厚度只有2-3mm，表麵類似橡膠具有彈性。
仔細看圖，可以發現其內部嵌入了磁性顆粒。當按壓/觸摸產生時，皮膚表面產生形變帶動內部粒子的磁場變化。這些變化會被磁力計監測收集，並反饋給通過自監督學習訓練過的AI模型。
扎克伯格表示，可以用於元宇宙中的虛擬對象，使我們與之交互時獲得觸覺感受。
Meta首席人工智能科學家Yann LeCun認為機器人技術成為了研究人工智能的方式，他曾表示，機器人技術是紮克伯格抵制的一個領域。
LeCun曾表示，“這是人工智能研究人員試圖到達的地方。感知、推理、計劃和行動的形成一個不斷循環的完整閉環，最後能夠從環境中獲得反饋。”
仿生眼主視覺，ReSkin電子皮膚主觸覺，還有Meta最具代表性的Oculus頭顯融合了視覺和聽覺效果。
可以看出，Meta在進軍元宇宙這條路上已經打通了視覺、聽覺、觸覺這人類三大感官體驗。
其實，在觸覺方面，前段時間，Meta還揭秘了其秘密研發七年的項目“氣動觸覺手套”。
這種觸覺手套可以通過氣囊讓你體驗到抓取虛擬物體時的真實觸感。對於Meta來說，這款手套和其他可穿戴技術，都將讓我們通往在VR和AR中實現互動的未來。
但是，真正元宇宙中的體驗不僅僅包括“視觸聽”這三種感官特徵，還要能夠聞到不同氣味，嚐到不同的味道。
目前來說，在Meta元宇宙技術體系中，沒有提到的感覺便是氣味和味道，這對攻克技術難題有了更高的要求。
不過，未來沒有什麼不可能。
誰說Meta元宇宙是PPT？
2021年11月，Facebook在Connect大會上改名Meta，計劃投入千億美元，要大舉進軍元宇宙。
Meta這一舉動將所有人的視線轉移到其創造的虛擬世界中。
其實，Meta在元宇宙的佈局不僅僅是上面所提到的項目，還有關於Avatar的研發等。
元宇宙是一個具有沉浸式空間感的3D數字化世界。
在這個世界中，人們通過穿戴VR設備或是芯片植入的方式，創造出人類的化身(Avatar) ，融入其中。
在元宇宙中不只有人，還有虛擬物品，更重要的是還有機器人。
除了人-人、人-物交互以外，人-機、機-機、機-物交互也十分重要。
與機器人相關的，叫做機器人元宇宙。機器人元宇宙是機器人理解物理世界的基礎。上述提到的仿生眼、人造皮膚等技術，都是為了讓機器人更加的類人、逼真。
Meta在提升人類在元宇宙中的體驗也做了很多的嘗試，有相當多的突破。
比如，Codec Avatar這個項目就是一個利用3D捕捉和AI技術，創造逼真人物頭像的系統。這個項目從最初的高清頭像開始，一步步發展到全身的虛擬化身。
在這個過程中，全身視頻編解碼器被研發出來，使得元宇宙中的人類avatars可以支持更複雜的眼部、面部、四肢、軀乾等部位的運動。舉例來說，項目團隊通過EMG腕帶進行XR輸入，對人的手部動作的方式做了精準的測量。
人類化身都取得了很多突破，那麼通過物理手段對現實世界中的物品在元宇宙中進行映射也不在話下。
比如，衣服在元宇宙中的真實模擬就十分逼真。不光完美復刻了衣服面料的彈性，如果抖動衣服，衣服表面的褶皺也栩栩如生。
Meta所有項目的研發都是為了讓人能夠在元宇宙中有更好的體驗。這也更加印證了，小扎的進軍元宇宙的宣言不是紙上談兵。
Meta拓展元宇宙的下一步，你期待嗎？
參考資料：