Vision Pro每臺23個傳感器！蘋果首款頭顯帶動這些傳感器迎來新機遇

或許大家都被蘋果的WWDC23新品發布會刷屏，除了例行的iOS 17系統和Macbook電腦更新外，最令人期待的“One more thing”當屬蘋果的首款頭顯Vision Pro。

秘密研發七年、“延期發布”三次、庫克時代最重磅的創新產品、傳奇設計師Ive主導的最后一款蘋果硬件......層層buff讓蘋果首款MR頭顯的發布更添幾分傳奇色彩。 蘋果首款頭顯的介紹已經很多，本文主要著眼于蘋果Vision Pro的新型人機交互，以及背后多達23個的感知傳感器。

在蘋果首款頭顯上，我們可以看到這樣一個趨勢：在新的消費電子設備中，傳感器所占的比例越來越重，顛覆性的人機交互依賴于傳感器的實現。

23個傳感器！眼動跟蹤+面部跟蹤+虹膜識別+手勢控制，蘋果首款頭顯Vision Pro將帶動這些賽道！ 北京時間6月6日凌晨1點的WWDC23蘋果新品發布會，成為今日早上的熱搜事件，相信大家已經被蘋果新品相關信息刷屏了。 在本次新品發布會中，最令人矚目的“One more thing”當屬蘋果的首款頭顯Vision Pro。

這款AR設備被業界寄予厚望，蘋果曾引爆了智能手機、平板、TWS無線耳機、智能手表等眾多萬億級消費電子新市場，引領了一個又一個浪潮，多年來AR/VR產業不溫不火，大家都在期待蘋果的入場來引爆市場。

在發布前，彭博社曾表示，Vision Pro是蘋果近10年最重要的新品。還有人認為，這款產品將拳打手機，腳踢筆記本，進而顛覆整個消費電子市場。

秘密研發七年、“延期發布”三次、庫克時代最重磅的創新產品、傳奇設計師Ive主導的最后一款蘋果硬件......層層buff讓蘋果首款MR頭顯的發布更添幾分傳奇色彩。

在現場的Vision Pro展示區人滿為患，據悉蘋果不允許媒體上手體驗，只能外觀拍攝。從外觀上來看，跟此前爆料的“類似滑雪護目鏡”的設計類似。

雖然被定位為AR設備，但在蘋果看來，Vision Pro完全可以看作一個無縫融合現實世界和電子世界的新型計算機。庫克直接放話：正如iPhone帶我們進入移動計算時代，Apple Vision Pro將帶我們進入空間計算時代。 在蘋果官網上，對Vision Pro的定義是——Apple的首個空間計算設備。

具體硬件配置上，它的屏幕包括兩塊微型OLED顯示屏，像素2300萬，每只眼睛的分辨率高達4k。芯片則配備了兩塊：一塊M2和一塊R1，后者負責處理來自12個攝像頭、5個傳感器和6個麥克風的輸入，確保內容實時呈現在用戶眼前 正如之前外界預測，設備上類似“表冠”的按鈕可進行AR/VR模式切換。外框由特質的鋁合金制成。其中囊括了包括顯示屏、攝像頭、傳感器、高性能計算機、高效散熱設計等組成部分。

眼罩有一系列不同的形狀和尺寸選擇，還打造了能夠通過磁力吸附的定制光學插片。插電時能全天候使用，接到外置高性能電池最長可用兩個小時，分離式電池設計。
售價方面Vision Pro定價3499美元，約24850人民幣。售價及配置與同期其他AR設備對比如下圖：

23個傳感器帶來的革命性操作系統和用戶交互介面 作為一款AR設備，除了顯示之外，最重要的一點就是人機交互的便捷混和高效。對于Vision Pro的人機交互特性，蘋果在發布會及官網介紹上，也好不吝嗇詞語。

Apple 今日發布Apple Vision Pro，一臺革命性的空間計算設備，將數字內容無縫融入真實世界，讓用戶處在當下并與他人保持連接。Vision Pro打造無邊際畫布，讓app突破傳統顯示屏的限制，為用戶帶來全新的3D交互體驗，以最自然、最直觀的輸入方式來控制——眼睛、雙手與語音。Vision Pro搭載全球首創的空間操作系統 visionOS，通過用戶與數字內容互動的模式，讓數字內容如同存在于真實世界。Vision Pro的突破性設計，搭載超高分辨率顯示系統，將 2300 萬像素置于兩個顯示屏中，定制的 Apple芯片為獨特的雙芯片設計，確保用戶每次的體驗如同在眼前即時發生。

從介紹中，我們看到蘋果希望人們以最自然、最直觀的輸入方式來控制Vision Pro，并為此開發了全球首創的空間操作系統 visionOS。

那么，我們怎么通過眼睛、雙手與語音來控制Vision Pro？答案就藏在Vision Pro配置的23顆傳感器中。 據官網介紹，Vision Pro至少配置了12個攝像頭、5個傳感器和6個麥克風等共計23個傳感器——這甚至比此前分析師們預測的都要多。 這些傳感器分布在整個設備的外側、四周以及內框處，這樣就可以監測手勢、眼球、聲音等各種信息。

▲Vision Pro傳感器布局

人類生物研究表明，人類頭部運動和視野回傳的延遲須低于20ms，否則將產生視覺拖影感從而導致強烈眩暈。為了處理這些傳感器帶來的龐大數據，快速輸出圖像反饋，Vision Pro采用了雙芯片設計——M2主芯片負責計算，此外R1芯片則專門用來處理來自這些23個傳感器輸入的數據，據蘋果介紹，R1可在12 毫秒內將新影像串流至顯示器，比眨眼還要快 8 倍，從而避免眩暈的發生。

Vision Pro的手勢識別 因為手部在于眼睛下方，因此Vision Pro的手勢識別通過位于設備下方的兩個高分辨率圖像傳感器來識別。 據悉，該圖像傳感器可以每秒向設備傳輸超過10 億像素，提供精確的頭部和手部跟蹤以及實時3D映射，之后通過算法分析，讓Vision Pro從各種位置理解用戶的手勢控制指令。

Vision Pro的眼動識別 由LED和紅外攝像頭組成的眼動追蹤系統，可以將不可見光圖案投射到每只眼睛上，能夠判斷用戶當前注視的位置。這使得用戶無需使用手柄控制，只需通過注視來瀏覽應用圖標，輕點選擇，輕掃滾動，或者發出語音指令即可操控。

▲眼動識別原理

蘋果強調，用戶在顯示屏上觀看的區域和眼球追蹤數據不會與蘋果或網站共享。相反，來自傳感器和攝像頭的數據在系統級別進行處理，因此應用程序也不一定需要“看到”用戶或他們的周圍環境來提供空間體驗。

此外，Vision Pro的語音識別，通過內置于設備的MEMS麥克風監測用戶語音指令進行控制，這點與智能手機語音助手等類似，相信大家也或多或少體驗過了。 Vision Pro的虹膜識別與蘋果的第一款 3D 相機 作為一款私人設備，如iPhone一樣，蘋果也為Vision Pro添加了安全識別功能——Optic ID，Optic ID是一款虹膜識別系統。 據蘋果介紹，Optic ID使用不可見的LED光源傳感器來分析虹膜，然后將其與存儲在Secure Enclave上的注冊數據進行比較，這與Face ID和觸控ID使用的過程類似。并且光學ID數據是完全加密的，不會提供給其他應用程序，也不會離開設備本身，用戶不必擔心生物信息被泄露到網上。

此外，Vision Pro 也是“蘋果的第一款 3D 相機”，通過配備的LiDAR激光雷達傳感器和深感傳感器，可以感知深度信息，配合全新的具有三維界面的操作系統 visionOS，能夠創建用戶周圍環境的融合 3D 地圖，使它能夠在空間中準確呈現數字內容。

用戶可以將常用、熟悉的App放置在空間中的任何位置，也可以將它們放大、縮小到適合的尺寸，包括從消息線程中把物體拉出來放到真實世界中。比如，Vision Pro 上的 FaceTime 可以在視頻通話時顯示真人大小的人物，還優化了查看照片和視頻的體驗。

Vision Pro的Eyesight功能 為了讓你戴上眼鏡后不與現實徹底脫節，當有人進入視野范圍時，Vision Pro屏幕的透明度會隨時變化。如果用戶處于全 VR 模式，一個發光的屏幕會遮擋住他們的眼睛，以示他們不想被打擾。 而監測是否有人在附近的功能，則來自于設備前面的圖像傳感器。

中國第一MEMS企業歌爾股份不是麥克風供應商？Vision Pro供應鏈曝光 此前，中金公司、民生證券等多家分析機構，貼出了Vision Pro的供應鏈和BOM零部件成本價格，合計成本大概在1200~1500美金左右。

其中，Vision Pro使用的圖像傳感器來自索尼，傳感器由我國臺灣企業、全球最大砷化鎵晶圓代工服務公司穩懋半導體制造，此前穩懋半導體一位蘋果iPhone 手機生產ToF 傳感器、LiDAR（激光雷達）等傳感器。聲學部件由歌爾股份提供，值得注意的是，據證券商提供的BOM清單顯示，MEMS麥克風由美特聲學供應，美特科技隸屬于臺灣美律實業，2016年立訊精密通過入股取得蘇州美特 51%股權，從而進入聲學領域。 當然，本清單由證券商根據渠道信息匯總，Vision Pro的具體零部件可能需要半年后正式上市后拆解才可得知。

結語 從以上Vision Pro的各種人機交互中，使用到了圖像傳感器（可見光/紅外線）、MEMS麥克風、3D飛行時間(ToF)傳感器、激光雷達，以及用于姿態檢測的慣性傳感器（陀螺儀、加速度計、IMU)等各種傳感器。

同時，我們可以看到這樣一個趨勢：在新的消費電子設備中，傳感器所占的比例越來越重，顛覆性的人機交互模式，往往通過新的傳感器來實現。譬如，大家都在期待的柔性傳感器，將為未來帶來更多的人機交互體驗。 隨著蘋果進入AR/VR賽道，后期憑借其強大的開發能力以及原蘋果軟件生態數以千萬級的開發者，是否會給AR/VR賽道帶來爆炸性的發展？我們拭目以待。