前員工披露Apple Vision Pro 開發細節：不只是眼鏡，更像是有「讀心術」的腦機介面

根據最新爆料，蘋果Vision Pro預計將於1月27日在美國上市。Vision Pro是蘋果內部目前最重要的產品線，甚至定位遠超iPhone，是作為下一代革命性裝置培養，就像當年的iPhone初代一樣，將會改變個人智慧裝置的市場。

一位曾負責開發 Vision Pro 蘋果前員工 Sterling Crispin 先前在推特上對外表示，Vision Pro 使用了大量神經科學來開發其一些關鍵功能。

Crispin 表示，「我在蘋果公司的技術開發組擔任神經技術原型研究員期間，用了我生命中的 10％時間來為 VisionPro 的開發做出貢獻。這是我做過的單一項目中歷時最長的一次。我為它的最終揭曉感到自豪和寬慰。我已經從事 AR 和 VR 的研究十年之久，從很多方面來說，這是整個行業的一個結晶。」

由於保密協議的限制，Crispin 不能透露太多細節，但有些內容已經通過專利公開。他介紹說，他在蘋果的工作主要涉及到根據使用者身體和大腦的資料，判斷他們在沉浸式模式下的心理狀態。

「也就是說，當使用者處於混合現實或虛擬現實的體驗中，AI模型會嘗試預測你是感到好奇、走神、害怕、專注、回憶過去的經歷，還是其他一些認知狀態。而這些狀態可能通過眼動追蹤、大腦電活動、心跳和節律、肌肉活動、大腦血液密度、血壓、皮膚電導等測量得到。」他解釋說。

不只是眼鏡，更像是有讀心術的「腦機介面」

為了實現這些具體的預測，他們使用了很多技巧，這些技巧都在幾項提到他的專利中有所描述。

例如，最酷的成果之一就是在使用者點選某個東西之前就能預測出來，「你的瞳孔在你點選之前就會有反應，部分原因是你預期點選後會發生什麼事情。所以你可以通過監測使用者的眼睛行為，和即時調整使用者介面，來創造更多這種預期性的瞳孔反應，從而通過眼睛建立一個粗略的腦機介面。這很酷，我寧願選擇這種方式，而不是進行侵入性的腦部手術。」

他將這個技術比作“讀心術”。

此外，為了確定使用者認知狀態，系統還會向使用者快速展示一些他們無法感知的視覺或聲音訊號。

「另一項專利詳細介紹了如何使用機器學習和身體和大腦的訊號來預測你有多專注、放鬆或學習效果如何。然後根據這些狀態更新虛擬環境。所以，想像一下一個能夠根據你看到和聽到的背景變化來幫助你學習、工作或放鬆的自適應沉浸式環境。」Sterling Crispin 說。

蘋果先前表示，在開發這款頭戴裝置的過程中，創造了 5000 項新專利。蘋果的主要目標不是讓使用者完全沉浸在虛擬現實中，而是通過將真實世界和數字世界結合起來擴展使用者的可能性。