Meta的Flamera頭顯降低準確直通AR所需的原始計算能力

Meta的最新原型頭顯Flamera像是直接從科幻動作片中來的一樣，它在Siggraph 2023上引起了人們的注意 —— Flamera在那里獲得了令人垂涎的Best in Show獎。

據悉，Flamera原型頭顯展示了接近人眼分辨率和全新的"透視"真實世界的技術。該原型或許為VR、MR和AR的未來鋪平了道路。頭顯原型展示的技術突破引發了人們的興趣和關注。

Moor Insights&Strategy副總裁兼首席分析師Ansel Sag表示：“這絕對是我見過的質量最好的（增強現實）實現透視真實世界的全新方法?！?/p>

出于顯而易見的原因，在物理上不可能將頭顯的攝像頭與用戶的眼睛完全放置在同一位置。這種位移導致了我（作者，以下簡稱我）個人經歷的視角的轉變：我在使用AR/VR頭顯時撞到了墻上，或者被被椅子絆倒了。像Meta Quest Pro這樣的尖端頭顯，通過從正確的角度重新投射周圍環境的視圖，跨越了這一障礙，但解決方案可能會導致視覺失真。

Meta的蟲眼Flamera提出了一個新穎的解決方案。它摒棄了當前頭顯青睞的外部攝像頭陣列，采用了獨特的“光場穿透”設計，將圖像傳感器與物理控制到達傳感器的光的孔徑配對。會導致不正確視角的光被阻擋，而提供準確視角的光則被允許到達傳感器。

當直接通過鏡頭觀看時，結果很奇怪：這有點像透過紙上的洞看世界。頭顯重新排列原始圖像以消除間隙并重新定位傳感器數據。一旦這個過程完成，耳機就會為用戶提供準確的世界視圖。

Sag說：“這絕對是一個原型，但它的圖像質量和分辨率給我留下了深刻印象?！?“幀速率很好，”ModiFace的軟件開發總監Edgar Maucourant也演示了這款頭顯，并對此印象深刻，“我的眼睛所看到的東西和我的手的位置與我的手真正的位置之間沒有延遲，也沒有差異?！?/p>

Maucourant認為Flamera的準確性可能會為用戶直接與周圍世界互動的AR應用程序帶來福音?！袄?，如果我們考慮遠程輔助，人們必須操縱物體，那么今天它是用HoloLens和Magic Leap等AR眼鏡來實現的……我們可以想象使用AR穿透來實現這一點?！?/p>

與微軟的HoloLens和Magic Leap進行比較很重要。它們通過透明顯示器繞過了透視問題，讓用戶的視覺暢通無阻。當HoloLens于2016年發布時，這種方法感覺像是未來的趨勢，但其顯示質量、視野和亮度仍然存在問題。

Meta的Quest Pro和蘋果即將推出的Vision Pro強調了這一方向的轉變。盡管以AR/VR頭顯（或者，蘋果方以“空間計算機”）的形式進行營銷，但它們顯然是虛擬現實家族的一個分支。它們通過不透明的顯示器完全遮擋了用戶的視野。增強現實是通過視頻饋送提供的，該視頻饋送將外部世界投射到顯示器。

Vision Pro解決直通問題的方法更注重肌肉而非大腦。它使用了一系列與其他AR/VR頭顯類似的外部攝像頭，但將其與蘋果定制的R1芯片配對，該芯片與蘋果M2芯片協同工作（就像該公司筆記本電腦中的芯片一樣）。R1是一個“視覺處理器”，可以幫助vision Pro的12臺相機通過計算校正視角（以及其他任務）。這很像Meta在Quest Pro上嘗試的方法，但蘋果將功率提高到了11。

META

Meta的Flamera取而代之的是用鏡頭校正視角。這大大降低了準確直通AR所需的原始計算能力。

但這并不是說Meta已經完全打開了AR。Flamera的技術距離可供購買的頭顯還有很長的路要走，目前與傳統的直通AR相比存在一些缺點。Sag表示，該頭顯“視野相當有限”，并注意到其景深“不連續”，這意味著遠處的物體看起來比實際更近。Maucourant警告說“顏色不太好”，并認為頭顯的分辨率很低。

盡管如此，Flamera或展示了Meta、蘋果和其他希望進入AR領域的公司之間即將發生的爭論方向。科技界的大腕們似乎確信，明天最好的AR/VR頭顯看起來更像最初的Oculus Rift，而不是微軟的HoloLens。然而，目前這些原型更多還是在研究階段，離成為消費級產品還有一段距離。未來，頭顯技術的發展還需要在各個方面進行突破和創新，以實現更高的分辨率、更低的延遲、更舒適的使用體驗等。只有解決了這些問題，才能讓用戶真正感受到頭顯帶來的沉浸式體驗，進一步推動VR、MR和AR技術的廣泛應用。

審核編輯：彭菁