0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看威廉希尔官方网站 视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

苹果前员工疯狂揭秘:头显Vision Pro竟暗藏「脑机接口」

感知芯视界 来源:新智元 作者:新智元 2023-06-09 09:19 次阅读

来源:新智元,谢谢

惊艳众人的Vision Pro竟偷偷装了「脑机接口」?

编辑:感知芯视界

苹果Vision Pro的横空出世,一夜之间在全球引起轩然大波。

正如库克所称,这将开启「空间计算」时代,足见Vision Pro对所有人来说意义非凡。

戴上Vision Pro,只需眨眨眼,捏合手指,甚至动动嘴,「头号玩家」的科幻便成为可能。

但,苹果Vision Pro的科幻感,不仅于此。

头显发布后,苹果前研究员Sterling Crispin在推特回顾自己工作中,透露了不少关于Vision Pro的「黑科技」。

最让人惊艳的是,Vision Pro其实还暗藏着一种「脑机接口」威廉希尔官方网站 。

不需要芯片植入,它就能预测你的大脑行为,妥妥的「读心术」。

此外,苹果头显还能根据个人身体和大脑的数据,来检测心理状态。

看似篇幅不长的推文中,其实给许多人对苹果Vision Pro带来了无限的畅享。

Vision Pro暗藏「脑机接口」?

2018年,Sterling Crispin加入苹果威廉希尔官方网站 开发小组,担任「神经威廉希尔官方网站 原型」的研究员。

3年前,他开始参与Vision Pro的研发工作。

正如他在推特上所称,自己花费人生10%的时间为Vision Pro的开发做出贡献,这是我做过的最长的一次努力。

Crispin在苹果的大部分工作都受到保密协议的约束,设计广泛的主题和方法。

但其实,这些工作,有些苹果已经申请了专利,可以拿出来讲。

Crispin称,「要使特定预测成为可能,涉及很多技巧,我提到的少数专利对此进行了详细说明。」

最酷的能力就是能够预测用户,会在他们实际点击之前,点击某些东西。

而这项威廉希尔官方网站 背后的主要原理是,每个人在做每件事之前,瞳孔会做出反应,其中部分原因是你预计在你点击之后会发生一些事情。

因此,苹果可以通过算法来监视你的眼睛行为。

并实时重新设计UI,以创建更多这种预期的瞳孔反应,从而创建个人大脑的生物反馈。

这其实就是通过眼睛实现的初级「脑机接口」。

Crispin表示,「这是一项艰巨的工作,也是我引以为豪的事情。随时都会接受侵入性脑部手术。」

从中可见,苹果头显利用大量神经科学威廉希尔官方网站 来开发其中的一些关键功能,凭借不同技巧来确定一个人将要做的事。

此外,Crispin称自己工作很大一部分,涉及通过用户在沉浸式体验中的身体和脑部数据,来检测用户的心理状态。

毕竟沉浸在虚拟世界中的人们,真的很需要有个健康检测的功能。

当你处在混合现实,或者虚拟现实体验中,AI模型尝试预测你是否感到好奇、思维漫游、害怕、注意力集中、记起过去的经历或其他认知状态。

而这些都可以通过眼动追踪、脑部电活动、心脏跳动和节奏、肌肉活动、大脑中的血液密度、血压、皮肤电导等测量数据来推断。

除了以上提到的威廉希尔官方网站 ,推测认知状态还包括你可能察觉不到的方式。

比如,向你快速闪烁视觉效果,或者声音,然后测量你对此的反应。

还有一项专利介绍了,如何使用机器学习,以及来自身体和大脑的信号来预测你的注意力、放松程度或学习情况。

然后,头显会自动更新虚拟环境,以增强这些状态。

因此,你可以想象一个自适应沉浸式环境,它可以通过改变你在背景中看到和听到的内容,来帮助每个人学习、工作或放松。

Sterling Crispin介绍的这些和科技,或许我们能够在VisionPro未来迭代升级中看到。

背后部分专利一览

支撑发布会上魔幻演示的效果的,是苹果在默默开发VR设备这么多年中自己的威廉希尔官方网站 积累。

5000多项VR专利,是发布会上惊艳众人产品和基石和护城河。

现在就来看看演示中涉及到的专利威廉希尔官方网站 。

双手+意念控制一切

市面上几乎所有的VR设备都配备了手柄。

但是苹果却大胆的在自己的第一款VR产品中就完全依赖手势追踪和眼球追踪实现了丝滑的控制效果。

背后的威廉希尔官方网站 在2023年获得了专利。

根据专利图示,FIG.1是3D操作环境的框架图,展示了用户UI实现的整体框架。

FIG.4是捕捉用户的手势输入的头显计算机系统的手部跟踪单元的框架图。

FIG.5是用户的眼球追踪数据输入的头显计算机系统的眼睛跟踪单元的框架图。

这个专利图例展示了眼球反光辅助眼球追踪的流程图。

除了提供手部和眼球追踪威廉希尔官方网站 的基础之外,该专利还描述了用户如何在3D环境中更有效的进行交互的设计和流程。

强大的手势追踪体验,还源于今年5月,苹果又获得了一项专利。

这项专利描述了头显中的摄像头如何使用深度映射来区分不同的手势。

图注:FIG.7E/F/H/I 说明了相对于三维环境,基于用户在一系列用户输入期间保持的手握力从而有选择地移动虚拟对象或相对于三维环境(以及三维环境中的所有虚拟对象)移动视点维度环境。

一键生成3D形象

还记得之前被全网嘲讽的小扎在Horizon World里的3D形象吗?

苹果给出了的方案也许部分解释了为什么同样是做VR设备,苹果能引爆全网,Meta却让自己的股票「跌跌不休」。

背后的威廉希尔官方网站 专利也在上周被公布出来。

这个专利描述了未来的 Apple Watch 和 XR 头显将允许用户使用设备上的相机设置自己的 3D 头像的威廉希尔官方网站 。

在专利的示意图中,苹果展示了未来的 Apple Watch允许用户使用 Apple Watch 背面的传感器拍摄自己的 Face ID 图像。

该传感器威廉希尔官方网站 同样可用于XR环境。

无限画布

苹果发布会上演示的Vision Pro可以将周围空间作为无限画布。

用户不仅可以随意使用任何APP,而且可以把它们调成喜欢的任意尺寸。

苹果在 2018 年就申请了和这个功能相关的专利,这项威廉希尔官方网站 让未来的XR头显提供用户在 3D 环境中编辑文档的功能。

另一个相关专利是2021年获得的让佩戴XR头显设备 (HMD) 的用户可以查看显示器(Mac、MacBook 或电视)并根据需要进行虚拟扩展的威廉希尔官方网站 。

收购AR初创公司Mira

其实,从申请多项专利可见,苹果在AR/VR领域的探索,蓄谋已久。

最早可以回溯到2010年,苹果就收购了来自瑞典的面部识别威廉希尔官方网站 公司Polar Rose。

在Vision Pro推出的后一天,就传出了苹果近来收购了Mira。这是一家构建轻量级AR头显的初创公司,还为美国军方提供服务。

根据Mira首席执行官Ben Taft在Ins上的帖子显示,作为收购的一部分,苹果已经聘请了至少11名Mira的员工。为Mira在苹果的下一篇章感到兴奋。从宿舍到收购的7年旅程。

目前,具体收购金额未知,也不清楚Mira在苹果的增强现实路线图中扮演怎样的角色。

据2名前员工透露,苹果前设计主管Jony Ive曾一度担任这家初创公司的顾问。

Mira于2016年由Ben Taft创立,总部位于洛杉矶,一直在为全球客户生产AR头显,包括任天堂在日本环球影城中的主题公园。

这家初创公司迄今已筹集了约1700万美元的资金,包括蓝熊资本、幸福投资和红杉资本在内的投资者。

而苹果在Vision Pro中展示出来的很多威廉希尔官方网站 ,也是源于一次次成功的收购。

比如一些手势和空间定位的专利威廉希尔官方网站 ,就是通过收购了总部位于蒙特利尔的 VRvana获得的。

头显「iPhone时刻」到来,还需5年

苹果推出的Vision Pro,预示着它的下一个时代即将到来。

这款头显标志着苹果首次创建了一个新的计算平台,可以取代现有的大部分主要产品。

尽管iPhone蚕食了iPod,iPad威胁到了Mac。但是,还没有哪一个苹果产品类别能够同时击败当前3个主要细分市场。

彭博报道称,想让Vision Pro成为iPhone的替代品,至少需要5年的时间。若要成为杀手级产品,可能需要付出更多的时间。

如今,Vision Pro售价3499美元,价格高且不说,不能与手机互联互通,甚至也不能打电话。

而且设计还是太过笨重,而且必须随身装一个外置电池组,仅有2小时电量,无法长时间使用。

但在接下来的几年里,苹果能够解决这些问题,并推出一款「无所不能」的设备。

表面来看,Vision Pro看起来就像是一个为有钱人,或者那些对科技新品有无限需求的人而定制的「高价玩具」。

但是,苹果在WWDC上也竭力表明,这是每个人的设备,从办公、到娱乐、视频、出行等等方面。

不过,这并非不可能。

苹果在iPhone、MacBook等产品的迭代更新向世人展示了自身的潜力。

进而,Vision Pro及其更先进的后续产品的发展价值,也将变得更加清晰。

其实还有一点是,Vision Pro并不像iPad或iPhone一样容易上手。而且每个人戴上头显还可能会有沉浸体验的不舒适感。

不过,随着时间的推移,人们便会习惯这种全新的「空间计算机」,就像戴一副眼镜一样。

通过Vision Pro,苹果展示了自己正朝着将计算设备体积缩到最小、最轻便的未来努力。

但这可能是一条漫长,而崎岖的道路。

不过,至少在周一的2个小时里,对于数百万果粉来说,这款头显让他们终于见证了Vision Pro的到来。

或许有一天,我们可能会戴着Vision Pro,观看WWDC 2030。

*免责声明:本文版权归原作者所有,本文所用图片、文字如涉及作品版权,请第一时间联系我们删除。本平台旨在提供行业资讯,仅代表作者观点,不代表感知芯视界立场。

审核编辑黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 苹果
    +关注

    关注

    61

    文章

    24398

    浏览量

    198578
  • 脑机接口
    +关注

    关注

    8

    文章

    373

    浏览量

    21524
  • vr
    vr
    +关注

    关注

    34

    文章

    9638

    浏览量

    150223
  • 头显
    +关注

    关注

    0

    文章

    151

    浏览量

    7622
收藏 人收藏

    评论

    相关推荐

    苹果Vision Pro大幅减产,或将于2024年底停产

    据最新报道,苹果公司已对其Vision Pro的生产计划进行了大幅调整。供应链人士透露,从今年初夏开始,
    的头像 发表于 10-28 16:22 316次阅读

    苹果大幅减少高端混合现实Vision Pro产量

     据国际媒体报道,苹果公司已显著削减其旗舰级混合现实设备Vision Pro的产量,并有可能在2024年底全面终止该型号的生产。这一举措
    的头像 发表于 10-24 14:05 511次阅读

    苹果Vision Pro上市难挡全球VR市场下滑

    在科技产品层出不穷的当下,苹果Vision Pro无疑为虚拟现实(VR)领域注入了一针强心剂。然而,Counterpoint Rese
    的头像 发表于 06-24 17:38 606次阅读

    苹果搁置Vision Pro 2开发,转向更亲民

    在全球科技行业持续发展的背景下,苹果公司的一则最新消息引起了广泛关注。由于第一代Vision Pro设备上市后销售情况并不理想,
    的头像 发表于 06-20 10:52 638次阅读

    苹果Vision Pro空间计算获黑铅笔奖,出货或已调整

     据5月26日报道,苹果公司于去年WWDC展会上展示的空间计算Vision Pro已于近日在美开售,售价高达3499美元(折合人民币约2
    的头像 发表于 05-27 14:16 460次阅读

    苹果Vision Pro销量下滑,或不再推出继任或衍生机型

    苹果在非美市场发售Vision Pro之前就已开始削减订单,这表明美国市场需求下滑程度超乎预期,导致
    的头像 发表于 04-24 11:56 427次阅读

    苹果Vision Pro将支持12种语言

    近日消息称,苹果 Vision Pro头戴式显示器目前已在美国正式上市,随后将扩展到更多区域。MacRumors通过挖掘发现,苹果即将为Vision
    的头像 发表于 03-14 10:25 644次阅读

    Vision Pro支持SteamVR远程游戏,需配友商控制器

    2022年2月26日,热门串流软件ALVR宣布进军苹果Vision Pro市场。该款应用可让用户通过头
    的头像 发表于 02-26 10:28 668次阅读

    苹果Vision pro 已发售,库克多次表示AR是终极方向?

    2月2日,苹果Vision pro 设备正式发售,而在此前,各界对苹果这款备受瞩目的产品众说
    的头像 发表于 02-25 16:17 497次阅读
    <b class='flag-5'>苹果</b><b class='flag-5'>Vision</b> <b class='flag-5'>pro</b> <b class='flag-5'>头</b><b class='flag-5'>显</b>已发售,库克多次表示AR是终极方向?

    苹果Vision Pro使用体验:视界模糊,交互依赖手势,需适应

    对于额外的辅件工作,Apple Store提供了一款可进行眼镜数据分析的专业设备,并建议顾客在试玩Vision Pro选择配置蔡司光学
    的头像 发表于 02-03 10:03 1028次阅读

    苹果Vision Pro威廉希尔官方网站 受限,手势交互易受外人干扰

    据国际知名科技媒体CNET报道,如果使用者正在佩戴苹果Vision Pro与之互动,外部人员可能会误入和干扰
    的头像 发表于 02-01 10:52 715次阅读

    苹果Vision Pro预购10天售出20万台,净赚6.998亿美元

    1月30日快讯,苹果公司在1月19日开启Vision Pro预定以来,已经过去整整10天时间。据9to5 Mac获得的可靠信息来源显示,
    的头像 发表于 01-30 10:38 684次阅读

    苹果加大Vision Pro混合现实的生产力度

    据外媒报道,苹果正在加大其Vision Pro混合现实的生产力度,为2月份的上市做准备。据匿名知情人士透露,中国工厂已经全速生产这款新
    的头像 发表于 01-07 17:47 1483次阅读

    苹果加强虚拟现实布局,Vision Pro外观设计专利获批

    苹果公司最近获得批准的46项关于Vision Pro的外观设计专利,再次凸显了其对虚拟现实威廉希尔官方网站 的关注和投入。这些专利主要涉及
    的头像 发表于 01-04 14:56 1583次阅读

    苹果Vision Pro配件专利曝光

    据The Information于年初报道,Mark Gurman在X 平台评论关于苹果 vision pro上市时间的新闻时表示,预计
    的头像 发表于 01-03 14:23 604次阅读