蘋果前員工披露 Vision Pro 頭顯開發(fā)細(xì)節(jié):它像“讀心術(shù)”會預(yù)測你的行為|當(dāng)前快報
(資料圖)
IT之家 6 月 7 日消息,昨日蘋果在 WWDC2023 上發(fā)布了全新頭顯 Vision Pro,一位曾負(fù)責(zé)開發(fā) Vision Pro 蘋果前員工 Sterling Crispin 昨日在推特上對外表示,Vision Pro 使用了大量神經(jīng)科學(xué)來開發(fā)其一些關(guān)鍵功能。
Crispin 表示,“我在蘋果公司的技術(shù)開發(fā)組擔(dān)任神經(jīng)技術(shù)原型研究員期間,用了我生命中的 10%時間來為 VisionPro 的開發(fā)做出貢獻(xiàn)。這是我做過的單一項目中歷時最長的一次。我為它的最終揭曉感到自豪和寬慰。我已經(jīng)從事 AR 和 VR 的研究十年之久,從很多方面來說,這是整個行業(yè)的一個結(jié)晶?!?/p>
由于保密協(xié)議的限制,Crispin 不能透露太多細(xì)節(jié),但有些內(nèi)容已經(jīng)通過專利公開。他介紹說,他在蘋果的工作主要涉及到根據(jù)用戶身體和大腦的數(shù)據(jù),判斷他們在沉浸式模式下的心理狀態(tài)?!耙簿褪钦f,當(dāng)用戶處于混合現(xiàn)實(shí)或虛擬現(xiàn)實(shí)的體驗中,人工智能模型會嘗試預(yù)測你是感到好奇、走神、害怕、專注、回憶過去的經(jīng)歷,還是其他一些認(rèn)知狀態(tài)。而這些狀態(tài)可能通過眼動追蹤、大腦電活動、心跳和節(jié)律、肌肉活動、大腦血液密度、血壓、皮膚電導(dǎo)等測量得到?!彼忉屨f。
為了實(shí)現(xiàn)這些具體的預(yù)測,他們使用了很多技巧,這些技巧都在幾項提到他的專利中有所描述。例如他說,最酷的成果之一就是在用戶點(diǎn)擊某個東西之前就能預(yù)測出來,“你的瞳孔在你點(diǎn)擊之前就會有反應(yīng),部分原因是你預(yù)期點(diǎn)擊后會發(fā)生什么事情。所以你可以通過監(jiān)測用戶的眼睛行為,和實(shí)時調(diào)整用戶界面,來創(chuàng)造更多這種預(yù)期性的瞳孔反應(yīng),從而通過眼睛創(chuàng)建一個粗略的腦機(jī)接口。這很酷,我寧愿選擇這種方式,而不是進(jìn)行侵入性的腦部手術(shù)?!彼€將這個技術(shù)比作“讀心術(shù)”。
此外,為了確定用戶認(rèn)知狀態(tài),系統(tǒng)還會向用戶快速展示一些他們無法感知的視覺或聲音信號?!傲硪豁棇@敿?xì)介紹了如何使用機(jī)器學(xué)習(xí)和身體和大腦的信號來預(yù)測你有多專注、放松或?qū)W習(xí)效果如何。然后根據(jù)這些狀態(tài)更新虛擬環(huán)境。所以,想象一下一個能夠根據(jù)你看到和聽到的背景變化來幫助你學(xué)習(xí)、工作或放松的自適應(yīng)沉浸式環(huán)境?!盨terling Crispin 說。
IT之家注意到,蘋果稱在開發(fā)這款頭戴設(shè)備的過程中,創(chuàng)造了 5000 項新專利。蘋果 Vision Pro 的主要目標(biāo)不是讓用戶完全沉浸在虛擬現(xiàn)實(shí)中,而是通過將真實(shí)世界和數(shù)字世界結(jié)合起來擴(kuò)展用戶的可能性。
標(biāo)簽: