官网更新了一个在变幻的苹果 logo,当你用 iPhone 和 iPad 打开苹果官网的活动页面,会出现一个「View the AR experience」的按键,看到 AR 效果下的活动预告。
甚至有网友「破解」了预告中的「隐藏彩蛋」:「VR headset unveiled at WWDC」,意为「VR 头显将在 WWDC 揭晓」。
此前苹果也放出了一张 WWDC 2023 的海报,看这个弧度,像不像头显的镜片?
作为一款早有传言的产品,苹果 MR 头显在几个月的爆料中几乎没有了秘密。Tim Cook 本人对保密也并不在乎,谈到 VR/AR 领域时,他曾大方地表示:「请继续关注,你将会看到我们所带来的产品。」
爆料满天飞,苹果 MR 头显没有「秘密」
据 RoadtoVR 消息,苹果已经向他们及其他 XR 行业媒体发出了 WWDC 2023 的邀请函,这几乎明示了苹果将在这个 6 月发布 MR 设备,结合各方爆料,我们汇总了这台 Reality Pro(已申请商标)的硬件信息:
1.外观:类似滑雪眼镜,外侧是显示用户表情的屏幕;
2.性能:搭载两块芯片,可独立运行;
3.屏幕:两块来自索尼的 4K、1.4 英寸 Micro OLED 屏幕;
4.传感器:多个外部镜头和内部传感器,支持眼部和手部追踪;
5.交互方式:语音、手势、眼动、智能指环;
6.续航:分离式电池组设计,约 2 小时续航;
7.价格:大约 3000 美元;
8.发布时间:WWDC 2023。
根据 The Information 的爆料,苹果为 Reality Pro 设计了两枚独立芯片,包含一枚代号为 Staten 的主 SoC 芯片(含 CPU、GPU 和存储器),和一枚代号为 Bora 的专用图像信号处理器(ISP)芯片,用于处理外部摄像头捕捉到的图像,还原周围环境。
软件方面,彭博社记者 Mark Gurman 透露,苹果将头显视为用于游戏、观看流媒体视频、视频会议、健康和健身以及与他人交流的设备。因此,系统将专注于为这些内容创造最佳的环境。
苹果头显系统的命名很有可能是 xrOS。
昨天开发者Troughton-Smith 试图提交一个为头显设计的应用程序,很快被 App Store Connect 拒绝,但在错误信息中认出它是 xrOS 的二进制文件,再次加大了这个命名的可能性。
xrOS 被认为具有类似于 iOS 的界面,对于 iPhone 和 iPad 用户来说会很熟悉,但交互方式将以全新的方式呈现。
Mark Gurman 的爆料指出, xrOS 应用包括 Safari、照片、消息、地图、Apple TV+、Apple Music、播客、提醒事项和日历,还有专为头显定制的 FaceTime 应用程序,能够模仿用户面部表情和身体动作,呈现极其逼真的效果。
Reality Pro 预计将打通 iPadOS 的 App Store,你可以直接下载 iPad app 使用,就像在搭载 M 系列处理器的 Mac 上使用 iOS app 一样。即使第一时间没有太多第三方 app 支持,依然能保证 Reality Pro 的可玩性。
彭博社还整理了值得期待的 Reality Pro 体验:
1.Safari 浏览器、邮件、地图、笔记等 app 会提供「优化版」;
2.全新相机 app,可用到 Reality Pro 上的多个镜头;
3.使用 Apple book 阅读书籍,并进入冥想;
4.无边记 app 实现混合显示中与他人协作;
5.iWork 套件进行了优化;
6.观看体育比赛时有「更丰富的体验」;
7.游戏「将成为该设备的核心吸引力」。
除了 iPad app,Reality Pro 的主屏幕、控制中心也会与 iPad 类似,但操作方法与 iPad 并不相同。
根据 Information 消息,凭借外部摄像头和设备内传感器,Reality Pro 可以跟踪手部和眼球,捏合手指就能激活 app 或者其他屏幕组件。这意味着 Reality Pro 不用像其他 VR 设备那样使用手柄操作。
这一操作方式在苹果近期曝光的一项专利上可以得到印证,美国专利及商标局 USPTO 公示的苹果专利指出了一种搭载超声换能器/声光透镜、ToF 模组等传感器的电子设备,可通过识别手、触控笔等外部物体,实现非接触式控制。
在专利中,苹果将这种控制方法称为「Air Input」隔空输入,命名果味十足。
作为一款可以独立运行的设备,Reality Pro 依然可以与其他苹果设备联动,比如成为 Mac 的显示器。你可以用 Reality Pro 连接 Mac mini,随时享受大屏办公。
最后,VR 与 AR 之间的无缝切换也是 Reality Pro 的一大卖点。据彭博社消息,Reality Pro 将支持使用机身按键实现 VR 与 AR 的切换。按下后,Reality Pro 的画面将逐渐点亮,方便用户看到周围的真实环境。
独立运行、双 4K 屏幕、高精度传感器、M2 处理器,加上打通 iPad 的软件生态,Reality Pro 的任何一个参数都是行业顶级的存在。VR 头显公司 Oculus 的创始人 Palmer Luckey 在体验之后表示:苹果的头显太棒了。
但并不是所有人都看好 Reality Pro,苹果前销售主管迈克尔· 加滕伯格接受彭博社专访时,就对这款设备表达了质疑:这可能是「苹果有史以来最严重的技术失败。」
近期,研究公司 TrendForce 报告称,Reality Pro 主要面向开发者,而且今年的出货量可能低于 10 万台,但即使全球每一个零售店每日卖出 1 台 Reality Pro,年销量也有 18 万台以上。相较之下,苹果分析师郭明錤不到 50 万台的年销量预测或许更准确一些,这个数字在一年前还是 150 万。
从市场来看,VR/AR 领域的生态与应用程序还没有准备就绪,Reality Pro 3000 美元(约合 21087 元)的售价,比 Meta 去年发布的高端产品 Quest Pro(1499 美元)还要高出不少。
当然,这并不影响它在 WWDC 上与我们见面。
16 位灵魂人物,帮助苹果进入混合现实世界
「我对把别人的东西拼凑起来不感兴趣」,Tim Cook 在接受 GQ 的采访时,侧面回答了为什么 Reality Pro 花了这么长时间才发布。苹果并不想制造一块新的屏幕,它想制造一个全新的工具。
在苹果有数千名员工参与了 Reality Pro 的研发,为了让这款可能是苹果几十年以来风险最大的产品顺利发布,有十六名名工程师起到了至关重要的作用,其中包括已经离开苹果公司的设计师 Jony Ive。
或许在 WWDC 2023 后,你会在更多地方看到下面这些名字,他们是带苹果走进混合现实世界的秘密团队:
Mike Rockwell:Rockwell 是团队的负责人,早在 2016 年就开始领导产品的开发,有一位项目参与者表示,如果有人能(在虚拟现实领域)成功,那一定是 Mike Rockwell。
Jeff Williams:Williams 是苹果的首席运营官,时常被看作下一任苹果 CEO 的人选。他负责 Reality Pro 的设计和人机交互小组。
Dan Riccio:作为苹果硬件工程主管,Riccio 是 Rockwell 的直接上级,有消息表示,他将在 Reality Pro 发布后退休,这款产品的重要性不言而喻,毕竟他之前负责的电视和汽车项目距离产品发布还遥遥无期。
Paul Meade:Meade 曾是 iPhone 团队最顶尖的硬件经理之一,他的任务就是把 Reality Pro 从概念设计变成实际产品。有两个工程师直接向 Meade 汇报:Fletcher Rothkopf 和 Ray Chang。
Fletcher Rotchkopf 从 iPod 产品线实习生做到 Apple Watch 的高级设计师,然后被 Rockwell 选中,成为了 Reality Pro 的首席设计师。Ray Chang 则负责设备底层电路设计。
Jony Ive:虽然在项目早期,Jony Ive 就卸任了苹果首席设计师的职位,但直到 2022 年 7 月,他依然以咨询合作的身份,推动着项目研发工作。在 Reality Pro 上,我们或许会看到三个 Jony Ive 极力推动的设计方案:一体机的形态,可以显示人眼动作、面部表情的屏幕以及类似 Apple Watch 的数字表冠,用于 AR 与 VR 的平滑过度。
Greg Joswiak:作为高管团队中极力推动项目的关键角色,身为公司营销主管的 Joswiak,工作就是把 Reality Pro 用 3000 美元的价格卖给消费者。
Phil Schiller:Schiller 并没有直接参与到研发工作中,但他会负责产品发布的宣讲。现在看来,这是一款风险极高的发布活动,宣讲就显得格外重要了。据说 Schiller 是一个狂热的 VR 赛车爱好者,他亲自推动了 Reality Pro 在游戏方面的进展。
Frank Casanova:在 2019 年时,Casanoba 负责基于 iPhone 的 ARKit 相关业务,早在 1988 年就加入苹果的他,除了 ARKit,还负责过 iPhone、QuickTime 等产品的营销工作。
Kim Vorrath:Vorrath 是 Reality Pro 的首席项目经理(EPM),所以产品开发这么久都怪她(不是)。早在 2000 年,她就是初代 iPhone 软件开发的重要角色,后来又成为了 iOS 和 macOS 这两大系统的首席项目经理。
Jeff Norris:Norris 曾在 NASA 旗下喷气推进实验室工作,他的项目包括用 VR 设备来远程控制航天器。虽然新品发布在即,但 Reality Pro 的应用场景依然模糊,这正是 Norris 的主要任务。在他的设想中,视频会议、冥想和远程协同会是这款设备的主要卖点。
Johny Srouji:如果你关注近几年的 M 系芯片发布,就一定看到过 Srouji 讲解芯片的身影,作为顶级芯片主管,他领导了从 A4 至今的芯片研发工作,但他认为 Reality Pro 更像一个「科学项目」,保持怀疑态度。
Shannon Gans:Gans 曾经是 HBO 的制片人,在动画制作领域有着非常丰富的工作经验,她主要负责 Reality Pro 中的内容,并负责推动与好莱坞等公司的合作项目。
Geoff Stahl:Reality Pro 好不好用,就全靠 Stahl 了,他负责了整个操作系统(或命名为 xrOS)以及大部分软件的开发工作,并参与了设备应用游戏引擎的开发。在此之前,他是苹果高级图形游戏软件经理。
最后,也是最重要的,正是苹果现任 CEO Tim Cook。在 Tim Cook 接棒后,苹果市值增长惊人,但不论是 iPhone、iPad 还是 Apple Watch,都是 Steve Jobs 过去的想法,Tim Cook 并没有开拓新领域。对 Cook 来说, 这款初代产品是一场必须要做好的赌博。
蓄谋已久,从十余年前开始的 VR 梦
如果从苹果任命 Mike Rockwell 作为 VR/AR 团队领导开始算,Reality Pro 的开发已经超过了七年,但苹果对这一领域的探索,要比七年更久。
早在 2010 年,苹果就收购了来自瑞典的面部识别技术公司 Polar Rose,紧接着,室内定位技术公司 Polar Rose、3D 感应与动作捕捉技术公司 PrimeSense、miniLED 公司 LuxVue Technology 等超过 10 余家技术公司被苹果收购。
如果说这些周边技术另有他用,那 2017 年收购混合现实头显公司 Vrvana,2018 年收购 AR 镜片公司 Akonia,2020 年先后收购 VR 直播服务公司 NextVR 和虚拟化身公司 Spaces 等公司,几乎涵盖了从硬件、软件甚至内容服务的方方面面。
看起来苹果在 VR/AR 领域步步为营,但不同于 iPhone 由 Steve Jobs 和 Jony Ive 直接领导,Rockwell 团队在 Reality Pro 开发上遇到了很多决策调整。
最初的 Reality Pro 被拆分为主机和眼镜两部分,通过无线连接,拥有更高的分辨率和更快的处理性能。同时还有一个低功耗独立模式,让眼镜部分可以在较低负载下独立运行。
但 Jony Ive 领导的设计团队并不认可,在项目一开始的大方向上,两个团队就僵持了数月。
最后,Tim Cook 站在了设计一边,重新规划了一体机形态 VR 设备 Reality Pro 的新方向。
时间来到 2018 年,Jony Ive 开始推动 AR 眼镜项目的开发,相应的,苹果头戴式设备的目标最终被定位 VR、AR 的结合体,利用眼部和手部追踪来操作。
至于研发多年的、一体机形态的 VR 设备,被融合到了 Mac 中,曾经为 VR 主机开发的芯片,正是如今 Mac 全线使用的 M 芯片。
而在两度调整、不得不发的当下,苹果的团队内部仍有分歧。
工业设计团队主张保持耐心,等 VR/AR 技术成熟、相关生态完善后再「憋个大的」,延迟发布一鸣惊人。但 Tim Cook 最终拍板直接发布,我们才得以在 WWDC 上看到 Reality Pro。
回到 Tim Cook 最初的愿景,Reality Pro 应该是一款可以满足全天候佩戴需求的眼镜,可以收发邮件、浏览网页、视频通话,代替部分在 iPhone 和 Mac 上的日常操作,甚至可以兼容其他苹果设备。
但如今的 Reality Pro 已经变成了「头显」形式,尺寸接近滑雪镜大小。
考虑到苹果已经多年没有发布新品类,Reality Pro 或许会是 Tim Cook 苹果 CEO 生涯的最后一个大动作,他渴望打造一个能决定苹果下一个十年新计算平台的产品,希望它能像 iPhone 一样,证明苹果在新行业的创造力。
在 AI 的对话框里,是 AR/VR 的机遇
作为 VR 头显设备的领导者,Oculus 的市场份额在 2021 年就达到了惊人的 80%,到了 2022 年第一季度,更是占据了 90% 的市场份额。但 2019 年到 2022 年,Meta 的元宇宙业务累计亏损已超 350 亿美元,亏损逐渐扩大,而且还在继续。
发展多年的 VR/AR 依然是一个新兴领域,从 iPod 到 iPad,苹果基本创造了每一个我们熟悉产品的更好版本,但在 VR/AR 领域,它却不得不向消费者解释为什么需要这样一款产品。
好在软件生态一直是苹果的强项,在 2022 年 Q1 财报会议上,Tim Cook 表示 Apple Store 里已有超过 14000 款 AR 软件,为数百万人提供着 AR 服务。再加上系统 app 的针对开发,Reality Pro 的初期表现似乎不用太过担心。
不过,经过多年发展的市场并没有出现可以改变行业的「iPhone 时刻」,上万款的 AR 软件也好,针对设备进行的系统 app 开发也罢,苹果如今的布局也更像是把能提供的服务都给用户,想要获得「只有 Reality Pro 能做到」的体验,或许还要经过一段不可避免的尴尬期。
从用图形界面代替代码、降低人际交互门槛的 Mac,到用多点触控代替键盘的 iPhone,苹果不断让交互变得直觉,在智能手机增长乏力的今天,作为几次推动科技行业前行的公司,苹果如今的挑战并不轻松,但它还是要用自己的探索,给行业一些新启发。
强大且丰富的软件生态,才是苹果产品迷人的原因。
在 AIGC 的冲击下,复杂的搜索、创作界面都被简化成了一个对话框,我们不再需要复杂的按键去完成工作,一句话就能完成曾经复杂的创作。从一块屏幕,到一个对话框,AI 还会重塑多少我们习以为常的互联网体验?重塑后的互联网,类 Reality Pro 设备,会不会是更好的选择呢?
去年九月,Tim Cook 在意大利大学演讲时,再次谈起 AR,并认为它将触及我们生活中的一切,对世界的影响将会和互联网一样深远:「未来的我们可能无法想象生活中没有了 AR 会是什么样子。」