category
AI summary
tags
password
summary
date
icon
status
字数统计
type
slug
orgsrc
URL
距离 2024 年苹果开发者大会（WWDC24）还有两周时间，近几年苹果在手机、平板、电脑等硬件产品线的创新不足和在 AI 能力上的缺位，承载软件和开发者生态的 WWDC 反而能够给大家带来更多期待和惊喜。
根据媒体预测，深度集成 AI 功能的 iOS 18 预计将是多年来 iPhone 最大的更新，包括更加智能的 Siri 和系统级快捷指令，实现基于用户场景的多步骤任务自动化处理（AppleInsider）。此外，iOS 18 还将带来一些设计变更，可能采用 visionOS 的设计元素，但不会有彻底的改革。
而作为已经发布满一年的空间计算平台操作系统 visionOS，在经历了4 个月的早期市场和用户检验之后，也将迎来首个大版本更新。本文就来总结一下 Vision Pro 用户及开发者对 WWDC24 即将发布 visionOS 2 功能升级的期待。
部分开放 VST 视频权限
我们都知道，出于用户隐私的考虑，Vision Pro 严格控制了视频透视相机（VST）权限，即便是在 Full Immersive 应用状态下，第三方应用也仅能通过 ARKit 获取算法识别后的坐标信息。而这一设计，几乎锁死了绝大部分想要实现用户与现实场景之间虚实互动的可能。
如果将第一视角实时视频流权限开放给开发者，结合 AI 功能，将会极大丰富 Vision Pro 的应用生态，就像下面这个 GPT-4o 演示的效果，想象一下把举在半空中的手机换成 Vision Pro，可能这符合大家对于未来「空间计算」的期待：
开放 Spatial Persona 第三方接口
身为从发售之初就深入体验 Apple Vision Pro 的用户，数月的使用可能让你觉得苹果在「空间计算」的雄心并非特别突出。与 Meta Quest 这种坚持打造元宇宙的概念相比，Vision Pro 除了在 3D 内容表现的精准、系统运行的稳定性以及遵循苹果一贯的设计理念方面有所领先外，革命性亮点并不明显。然而，Spatial Persona 测试版本的推出，特别是其支持 SharePlay 功能，开始让人期待更多可能。
Spatial Persona 在 FaceTime 中为用户提供了超越传统设备的沉浸式交流体验——无论是观看视频、互动游戏，还是普通聊天，都足够引人入胜。尽管目前该技术还处于测试阶段，且除 FaceTime 外的应用尚未支持 3D 效果，我们依旧期待即将到来的 WWDC24 能够带来正式版的 Spatial Persona，并拓展至更多第三方应用程序。
对于开发者来说，目前测试开发 Spatial Persona 时的一个现实难题是，至少需两台设备并由两名用户进行登录才能体验，这确实不利于开发和测试的进行。期望 visionOS 2 能够开放 Spatial Persona 的模拟器版本，提升开发效率。
兼容 Apple Pencil Pro
在此前的文章中，我们探讨了将 Apple Pencil Pro 作为 Vision Pro 控制器潜力的可能性，从硬件层面考虑，一切条件已经具备。我们期待在 WWDC24 看到具备精确触觉反馈和高级空间定位功能的 Apple Pencil Pro 成为 Vision Pro 眼手交互体验之外的有力补充。
更好的多窗口管理（Stage Manager）
Apple Vision Pro 突破了传统的交互限制，通过无限的空间为用户带来并行多窗口和多任务操作的体验。然而，在实践体验中过于自由的窗口布局有时会导致混乱。缺乏一个中心化的、高效的窗口管理功能，成为visionOS操作系统的一大缺憾。
为了优化用户体验，很多用户期望苹果能在系统中实现类似于 iPadOS 和 macOS 的前台调度功能。这种设计将使我们在享受自由空间多窗口功能的同时，也能快速有效地进行窗口管理。
多设备投屏（iPhone / iPad Mirroring）
visionOS 当前仅支持 macOS 的屏幕镜像功能，这为用户带来了与现有工作流程最大程度的兼容性，同时也最有可能是使用频率和时长最高的功能。然而，它缺少对 iPhone 和 iPad 等其他苹果设备投屏的支持，这无疑是当前版本 visionOS 的一个不足之处。
除了支持更多苹果设备的「屏幕级」镜像功能，对单个应用窗口的投屏功能也是很多用户迫切希望的功能。
支持更多物体追踪与透视功能（ Object Awareness）
visionOS 中可以通过设置 People Awareness 功能来实现对人的追踪和透视，允许用户在佩戴 Vision Pro 时看到周围的人。此功能确保在虚拟环境中也能感知到接近的人，以保持与现实世界的互动。
除了房间里的人之外，用户还需要对更多物体进行实时追踪定位并融合进 Vision Pro 全沉浸场景中，例如键盘、水杯，甚至包括移动的宠物等等。
总结
自 Apple Vision Pro 年 6 月份发布以来，其引发的 XR 行业关注可谓是前所未有的。不管正反两方面的评价，它总能激起讨论声浪。我们也非常期待在 WWDC24 的 Special Event 中，苹果如何回顾和评价这一年来的空间计算生态发展、市场表现和用户反馈。
无论是 Vision Pro 的用户还是开发者，你对 visionOS 2 的更新有哪些期待？
投票：
- 开放 VST 视频流权限，由用户授权第三方应用是否可以直接获取原始数据
- 开放 Spatial Persona 第三方权限，增加美颜美化效果，可以在更多社交应用中支持
- 支持自定义的物体追踪与透视效果（键盘、水杯、宠物等）
- 兼容 Apple Pencil Pro，提供眼手追踪以外具备触觉反馈的辅助交互功能
- 通过前台调度等方式实现更方便的多窗口管理
- 实现 iPhone 、iPad 镜像投屏，增加应用级独立窗口投屏
- 更多的系统 Environment 选择，以及用户自定义 Environment
- 优化 iPhone 拍摄空间视频、空间照片的功能和效果
- 应用内截屏/录屏功能，更方便将 Vision Pro 内容分享至其它设备观看
- 2D / 3D 桌面组件，方便查看时间日期、设备电量、天气等信息
两周之后我们将再来揭晓答案。
参考
- 作者:V2XR
- 链接:https://hackvision.pro/post/wwdc2024-spatial-computing
- 声明:本文采用 CC BY-NC-SA 4.0 许可协议，转载请注明出处。