在 Apple WWDC 2023 大会最后的环节上,官方就说了一句 “One More Thing” 后就为大家带来了整场发布会最为惊喜的 Apple Vision Pro 头显。
Apple Vision Pro 是款 MR 式头显,能让用户同时享有 VR 和 AR 的体验,还能通过用户的眼神移动、手势操作、语音控制等进行操控,可以说是一款开启了 AR 大门的新产品。
而在昨日,曾有份参与开发 Vision Pro 头显,并曾在 Apple 公司担任神经技术原型研究员及设计师 Sterling Crispin 就在 Twitter 上分享了有关 Vision Pro 的开发细节。
他表示:“我在 Apple 公司的技术开发组担任神经技术原型研究员的期间,用了我生命中的 10% 时间来为 Vision Pro 的开发做出贡献。这是我做过的单一项目最长时间的一次。我为它最终的揭晓感到自豪和宽慰。我已从事 AR 和 VR 研究十年之久,从多方面来说,这是整个行业的一个结晶。”
他也补充,他很感激能帮忙实现 Vision Pro,并表示若有人想进入该领域或改进策略,他原意接受咨询。
再者,他也阐明他所做的工作支持了 Vision Pro 的基础开发、正念体验、▇▇▇▇▇▇(原文作者将内容涂黑,预计还是保密项目)产品、和更加雄心勃勃的神经技术登月计划研究。
此外,他还形容 Vision Pro 的技术如同 “读心术”,当你实际点击某些东西之前,机器就已经提前知道了。
Sterling Crispin 还表示自己在 Apple 公司绝大部分的工作都是受到保密协议的,但他利用公开的专利内容介绍了一些有关 Vision Pro 头显的开发细节,如下:
总体而言,我所做的许多工作都涉及到在沉浸式体验当中,根据用户身体和大脑的数据来检测用户的心理状态。
因此,用户处于 VR 和 AR 体验中,AI 模型就会试图预测你是否感到好奇、走神、害怕、注意力集中、回忆过去的经历或其他一些认知状态。这些可以通过眼动追踪、脑电活动、心跳和节律、肌肉活动、大脑中的血密度、血压、皮肤电导等测量来推断。
你的瞳孔会在点击之前有所反应,部分原因是因为你期望在单击后会发生某些事情。因此,你可以通过监视用户的眼神,并实时重新设计 UI 以创建更多这种预期的瞳孔反应,从而创建粗略的脑机接口。这很酷,我宁愿选择这种方式,而不是进入侵害性的脑部手术。
此外,他还介绍了另种使用机器学习和来自身体和大脑的信号来预测用户的注意力集中程度、放松程度或学习效果的方法,然后更新虚拟环境和增强这些状态的技术。
他声称很多人已经等待了很长的时间只为看到这个产品的发布。但这仍然是 VR 发展道路上的一步。到这个十年的末尾,该行业才能完全实现该技术的宏伟愿景。
不知道你对于 Vision Pro 头显有何看法呢?欢迎在留言区和小编分享哦~