您的位置:首頁 > 資訊 >

蘋果前員工披露 Vision Pro 頭顯開發(fā)細節(jié):它像“讀心術”會預測你的行為|當前快報


(資料圖)

IT之家 6 月 7 日消息,昨日蘋果在 WWDC2023 上發(fā)布了全新頭顯 Vision Pro,一位曾負責開發(fā) Vision Pro 蘋果前員工 Sterling Crispin 昨日在推特上對外表示,Vision Pro 使用了大量神經(jīng)科學來開發(fā)其一些關鍵功能。

Crispin 表示,“我在蘋果公司的技術開發(fā)組擔任神經(jīng)技術原型研究員期間,用了我生命中的 10%時間來為 VisionPro 的開發(fā)做出貢獻。這是我做過的單一項目中歷時最長的一次。我為它的最終揭曉感到自豪和寬慰。我已經(jīng)從事 AR 和 VR 的研究十年之久,從很多方面來說,這是整個行業(yè)的一個結晶?!?/p>

由于保密協(xié)議的限制,Crispin 不能透露太多細節(jié),但有些內(nèi)容已經(jīng)通過專利公開。他介紹說,他在蘋果的工作主要涉及到根據(jù)用戶身體和大腦的數(shù)據(jù),判斷他們在沉浸式模式下的心理狀態(tài)?!耙簿褪钦f,當用戶處于混合現(xiàn)實或虛擬現(xiàn)實的體驗中,人工智能模型會嘗試預測你是感到好奇、走神、害怕、專注、回憶過去的經(jīng)歷,還是其他一些認知狀態(tài)。而這些狀態(tài)可能通過眼動追蹤、大腦電活動、心跳和節(jié)律、肌肉活動、大腦血液密度、血壓、皮膚電導等測量得到?!彼忉屨f。

為了實現(xiàn)這些具體的預測,他們使用了很多技巧,這些技巧都在幾項提到他的專利中有所描述。例如他說,最酷的成果之一就是在用戶點擊某個東西之前就能預測出來,“你的瞳孔在你點擊之前就會有反應,部分原因是你預期點擊后會發(fā)生什么事情。所以你可以通過監(jiān)測用戶的眼睛行為,和實時調(diào)整用戶界面,來創(chuàng)造更多這種預期性的瞳孔反應,從而通過眼睛創(chuàng)建一個粗略的腦機接口。這很酷,我寧愿選擇這種方式,而不是進行侵入性的腦部手術?!彼€將這個技術比作“讀心術”。

此外,為了確定用戶認知狀態(tài),系統(tǒng)還會向用戶快速展示一些他們無法感知的視覺或聲音信號?!傲硪豁棇@敿毥榻B了如何使用機器學習和身體和大腦的信號來預測你有多專注、放松或?qū)W習效果如何。然后根據(jù)這些狀態(tài)更新虛擬環(huán)境。所以,想象一下一個能夠根據(jù)你看到和聽到的背景變化來幫助你學習、工作或放松的自適應沉浸式環(huán)境?!盨terling Crispin 說。

IT之家注意到,蘋果稱在開發(fā)這款頭戴設備的過程中,創(chuàng)造了 5000 項新專利。蘋果 Vision Pro 的主要目標不是讓用戶完全沉浸在虛擬現(xiàn)實中,而是通過將真實世界和數(shù)字世界結合起來擴展用戶的可能性。

標簽:

相關閱讀