自從蘋果在 WWDC 2023 發表全新 Apple Vision Pro 穿戴式設備後,一名負責開發 Vision Pro 前任神經技術原型設計師 Sterling Crispin 也在 Twitter 上爆料更多新功能細節,他透露 Vision Pro 不只有蘋果在開發者大會展示的功能,實際在他研究開發過程中,還能用 Vision Pro 讀取用戶身體和大腦相關數據,就如同神劇《黑鏡》影集內的腦機介面。
蘋果前任科技發展團隊成員 Sterling Crispin 透露,主要是負責 Vision Pro 基礎開發、正念體驗以及一款神秘新產品(作者未透露),以及神經科技相關研究項目,對於蘋果 Vision Pro 計畫最初願景、策略和方向做出貢獻讓他感到很自豪,他認為 Vision Pro 將在未來可能對全球產生重大影響。
Sterling Crispin 也提到 Vision Pro 技術就如同讀心術,很多工作內容都受到蘋果保密協議限制,所以只能透過已經公開的專利內容來分享更多 Vision Pro 開發細節。
在混合實境和虛擬實境研究過程中,我負責是根據用戶在沉浸式體驗中,讀取身體和大腦數據來檢測心理狀態,利用 AI 模型預測你是否感到好奇、心不在焉、害怕、專注、記住過去的經歷或其他認知狀態。這些狀態可能通過眼動追蹤、腦電波活動、心跳和節奏、肌肉活動、大腦中的血液密度、血壓、皮膚電導等測量來推斷。
其中一個可行的結果是在想點擊之前,瞳孔先會有反應,原因是你期待在點擊之後會發生哪些事情。因此,可以通過監測用戶的眼睛位置並實時重新設計UI,以創造更多的預期瞳孔反應,用戶的大腦就能建立了「腦機互動介面」。
這非常酷!相比之下,我更願意接受這種方式,而不是像特斯拉 CEO 馬斯克研發植入式腦機介面技術與設備,需要動手術在腦中植入晶片。
另一項技術是如何用機器學習和來自身體和大腦的信號來預測你的注意力集中程度、放鬆程度或學習狀態的好壞,並更新虛擬環境以增強這些狀態。
可以想像在一個適應性的沉浸式環境,通過改變背景中你所看到和聽到的內容,這能夠有效幫助你學習、工作或放鬆。
以上這些都只是蘋果已經公開的專利細節,他還參與大量 Vision Pro 功能開發項目,為了避免洩漏機密和違反蘋果保密協議,更多內容就等待 Apple 後續公開。
相信很多人等 Vision Pro 發表已經有很長一段時間,但這只是 VR 技術過程中的一小步,但對於整個虛擬實境行業宏大願景,直到10年末後才真正被蘋果實現。
該名研究員主要從事 AR 和 VR 研究工作已有 10 年,在蘋果工作開發 Vision Pro 投入超過 5 年時間,與其他設計師和工程師一起致力於這個項目,自 2021 年底離開,他表示這 Vision Pro 計劃是有史以來花費最長時間的單一研究項目,從許多方面來說,也算是整個虛擬行業的的結晶。
延伸閱讀:Apple Vision Pro 眼鏡規格亮點、價格與上市日期詳細解析
來源:Twitter
喜歡這篇文章教學,後續想了解更多Apple資訊、iPhone、Mac、3C隱藏技巧,歡迎追蹤 瘋先生FB粉絲團、瘋先生LINE@、訂閱瘋先生Google新聞、Telegram、Instagram以及 訂閱YouTube頻道,將會有更多非常實用的技巧教學分享給大家。