蘋果前員工披露 Vision Pro 頭顯開發(fā)細(xì)節(jié):它像“讀心術(shù)”會(huì)預(yù)測(cè)你的行為|當(dāng)前快報(bào)
(資料圖)
IT之家 6 月 7 日消息,昨日蘋果在 WWDC2023 上發(fā)布了全新頭顯 Vision Pro,一位曾負(fù)責(zé)開發(fā) Vision Pro 蘋果前員工 Sterling Crispin 昨日在推特上對(duì)外表示,Vision Pro 使用了大量神經(jīng)科學(xué)來(lái)開發(fā)其一些關(guān)鍵功能。
Crispin 表示,“我在蘋果公司的技術(shù)開發(fā)組擔(dān)任神經(jīng)技術(shù)原型研究員期間,用了我生命中的 10%時(shí)間來(lái)為 VisionPro 的開發(fā)做出貢獻(xiàn)。這是我做過(guò)的單一項(xiàng)目中歷時(shí)最長(zhǎng)的一次。我為它的最終揭曉感到自豪和寬慰。我已經(jīng)從事 AR 和 VR 的研究十年之久,從很多方面來(lái)說(shuō),這是整個(gè)行業(yè)的一個(gè)結(jié)晶?!?/p>
由于保密協(xié)議的限制,Crispin 不能透露太多細(xì)節(jié),但有些內(nèi)容已經(jīng)通過(guò)專利公開。他介紹說(shuō),他在蘋果的工作主要涉及到根據(jù)用戶身體和大腦的數(shù)據(jù),判斷他們?cè)诔两侥J较碌男睦頎顟B(tài)?!耙簿褪钦f(shuō),當(dāng)用戶處于混合現(xiàn)實(shí)或虛擬現(xiàn)實(shí)的體驗(yàn)中,人工智能模型會(huì)嘗試預(yù)測(cè)你是感到好奇、走神、害怕、專注、回憶過(guò)去的經(jīng)歷,還是其他一些認(rèn)知狀態(tài)。而這些狀態(tài)可能通過(guò)眼動(dòng)追蹤、大腦電活動(dòng)、心跳和節(jié)律、肌肉活動(dòng)、大腦血液密度、血壓、皮膚電導(dǎo)等測(cè)量得到?!彼忉屨f(shuō)。
為了實(shí)現(xiàn)這些具體的預(yù)測(cè),他們使用了很多技巧,這些技巧都在幾項(xiàng)提到他的專利中有所描述。例如他說(shuō),最酷的成果之一就是在用戶點(diǎn)擊某個(gè)東西之前就能預(yù)測(cè)出來(lái),“你的瞳孔在你點(diǎn)擊之前就會(huì)有反應(yīng),部分原因是你預(yù)期點(diǎn)擊后會(huì)發(fā)生什么事情。所以你可以通過(guò)監(jiān)測(cè)用戶的眼睛行為,和實(shí)時(shí)調(diào)整用戶界面,來(lái)創(chuàng)造更多這種預(yù)期性的瞳孔反應(yīng),從而通過(guò)眼睛創(chuàng)建一個(gè)粗略的腦機(jī)接口。這很酷,我寧愿選擇這種方式,而不是進(jìn)行侵入性的腦部手術(shù)?!彼€將這個(gè)技術(shù)比作“讀心術(shù)”。
此外,為了確定用戶認(rèn)知狀態(tài),系統(tǒng)還會(huì)向用戶快速展示一些他們無(wú)法感知的視覺(jué)或聲音信號(hào)?!傲硪豁?xiàng)專利詳細(xì)介紹了如何使用機(jī)器學(xué)習(xí)和身體和大腦的信號(hào)來(lái)預(yù)測(cè)你有多專注、放松或?qū)W習(xí)效果如何。然后根據(jù)這些狀態(tài)更新虛擬環(huán)境。所以,想象一下一個(gè)能夠根據(jù)你看到和聽到的背景變化來(lái)幫助你學(xué)習(xí)、工作或放松的自適應(yīng)沉浸式環(huán)境。”Sterling Crispin 說(shuō)。
IT之家注意到,蘋果稱在開發(fā)這款頭戴設(shè)備的過(guò)程中,創(chuàng)造了 5000 項(xiàng)新專利。蘋果 Vision Pro 的主要目標(biāo)不是讓用戶完全沉浸在虛擬現(xiàn)實(shí)中,而是通過(guò)將真實(shí)世界和數(shù)字世界結(jié)合起來(lái)擴(kuò)展用戶的可能性。
標(biāo)簽: