一位前蘋果員工深入剖析了Apple Vision Pro的開發(fā)，談及了基于AI進行的“讀心術(shù)”。

Sterling Crispin表示，他曾是Apple技術(shù)開發(fā)組的神經(jīng)技術(shù)原型研究員，神經(jīng)技術(shù)在最近公布的Apple Vision Pro開發(fā)中發(fā)揮了重要作用。除此之外，他還致力于采用人工智能技術(shù)來預(yù)測用戶行為。

Crispin稱，他在蘋果工作期間開發(fā)的大部分技術(shù)都是保密的。不過，他表示，由于工作的某些內(nèi)容通過專利而公開，因此他現(xiàn)在可以談?wù)撨@些內(nèi)容。Crispin寫道：“總的來說，我所做的很多工作都涉及根據(jù)處于沉浸式體驗中的用戶身體和大腦數(shù)據(jù)以檢測用戶的精神狀態(tài)?！?/p>

Vision Pro開發(fā)：可通過AI進行讀心術(shù)？

這些狀態(tài)將通過眼球運動、大腦電活動、心跳和節(jié)律、肌肉活動、大腦血液密度、血壓、皮膚電導(dǎo)率等來衡量。使用這些數(shù)據(jù)，“人工智能模型將預(yù)測你是否感到好奇、走神、害怕、注意力集中、回憶過去的經(jīng)歷或其他一些認知狀態(tài)。”Crispin說。

這種對混合現(xiàn)實或虛擬現(xiàn)實應(yīng)用用戶的AI分析，除了情感狀態(tài)，還應(yīng)檢測認知意圖。Crispin透露，他已參與了用戶決策預(yù)測等技術(shù)——一種人工智能讀心術(shù)。

“你的瞳孔會在你點擊之前做出反應(yīng)，部分原因是你預(yù)計點擊后會發(fā)生什么。因此，你可以通過監(jiān)視用戶的眼球運動來創(chuàng)建用戶大腦生物反饋，并實時重新設(shè)計UI以創(chuàng)建更多這種預(yù)期的瞳孔反應(yīng)，這便是一個基于眼動追蹤機制的粗糙腦機接口。”Crispin描述道。

Crispin還致力于預(yù)測用戶的注意力或放松狀態(tài)。Crispin描述，機器學(xué)習(xí)以及對身體和大腦信號的分析可以預(yù)測一個人的注意力或放松程度，或者他或她的學(xué)習(xí)強度，這些見解可以應(yīng)用于蘋果沉浸式辦公室或冥想環(huán)境。

Crispin表示，虛擬環(huán)境可以根據(jù)這些數(shù)據(jù)實時更新以提高用戶集中力?！耙虼耍胂笠粋€自適應(yīng)沉浸式環(huán)境，它可以通過改變你在背景中看到和聽到的內(nèi)容來幫助你學(xué)習(xí)、工作或放松?！蹦壳盀橹?，Apple Vision Pro只引入了一個撥盤，支持用戶自行調(diào)節(jié)沉浸感。

Crispin并不知道所描述的技術(shù)中有多少實際會被應(yīng)用于Apple Vision Pro，Crispin表示：“我真的很好奇哪些技術(shù)被采納了，哪些將在之后發(fā)布?！?/p>

來源：Mixed

據(jù)Auganix報道，總部位于布魯克林的美國神經(jīng)技術(shù)公司OpenBCI與芬蘭高端VR/XR解決方案商Varjo合作，推出了整合下一代腦機接口（BCI）技術(shù)和頭戴式顯示設(shè)備（HMD）的硬件和軟件平臺“Galea”，OpenBCI稱，Galea beta系統(tǒng)將與Varjo Aero頭顯集成，并將成為全球首款支持同時測量用戶心臟、皮膚、肌肉、眼睛和大腦的設(shè)備。

OpenBCI表示，Galea Beta目前已收到了來自消費者技術(shù)、醫(yī)療保健、研究、培訓(xùn)、游戲和互動媒體等領(lǐng)域申請者的極大興趣，Galea beta單元將與Varjo Aero完全集成，并包括了現(xiàn)有即用型構(gòu)建塊SDK，以用于訪問Unity、Python和其他幾個常見開發(fā)環(huán)境中的傳感器數(shù)據(jù)。

Varjo Aero去年10月發(fā)布，是Varjo旗下最新VR頭顯，該頭顯擁有行業(yè)領(lǐng)先的視覺保真度、115度視野、逼真的邊緣清晰度，面向?qū)I(yè)人士和VR發(fā)燒用戶而設(shè)計；另一方面，“Galea”也充當(dāng)了OpenBCI多模式傳感器網(wǎng)絡(luò)和補充軟件，有助于簡化收集同步數(shù)據(jù)的過程，有助于為希望獲得客觀認知狀態(tài)的用戶解鎖新技術(shù)。

OpenBCI補充，通過整合Galea多模式傳感器系統(tǒng)、集成軟件和Varjo VR硬件，該系統(tǒng)為用戶配備了強大工具以加速神經(jīng)技術(shù)行業(yè)創(chuàng)新。

近十年來，OpenBCI一直致力于擴大消費者對神經(jīng)技術(shù)的認知，最初該技術(shù)僅被極客和早期采用者所應(yīng)用，如今，全球已形成了一個基于腦機接口技術(shù)，集科學(xué)家、開發(fā)者、教育工作者以及越來越多主要技術(shù)公司的技術(shù)社區(qū)。

OpenBCI創(chuàng)始人兼首席執(zhí)行官Conor Russomanno表示：“最終，我認為神經(jīng)技術(shù)和MR技術(shù)的結(jié)合是個人電腦的未來，過去幾年，我們一直在密切關(guān)注神經(jīng)科學(xué)、BCI和消費技術(shù)的融合，Varjo頭顯是我體驗過的最好頭顯，我迫不及待想看看beta用戶能夠基于Galea系統(tǒng)進行創(chuàng)造?！?/p>

Varjo聯(lián)合創(chuàng)始人兼首席技術(shù)官Urho Konttori表示：“很自豪能與OpenBCI聯(lián)手，以將最高保真度的VR擴展到面向人體和心理的新研究和開發(fā)者社區(qū)，此次整合將使Galea用戶可以解鎖當(dāng)今市場最身臨其境的VR體驗，并真正推動多個領(lǐng)域的創(chuàng)新邊界?！?/p>

Galea預(yù)購已向申請了Galea beta系統(tǒng)的數(shù)千家公司、開發(fā)者和研究人員開放，并將于2022年7月1日向公眾開放。