visionOS 27 首个测试版现已上线,苹果在 Vision Pro 的交互设计上再次突破——这次的核心创新并非手眼操控,而是你身边的现实物体。
先看一段演示视频:
(此处插入演示视频,位置同原文)
回顾 Vision Pro 初代发布时,苹果重点推广的是手眼协同的交互方式,几乎未提及专用控制器,仅表示“可配合 PlayStation 手柄运行 2D iPad 游戏”。这种方案在多数日常场景中表现流畅,但一旦涉及游戏或需要精密操作的空间交互,缺少触觉反馈与实体握持感的短板便会凸显——沉浸感受限,操作精度也难以满足需求。
到了 visionOS 26,苹果初步引入了“空间配件”概念。而此次 visionOS 27 的更新,则将支持范围大幅扩展,覆盖了更完整的控制器类型,以及更多可被系统识别的物理对象。
先谈空间配件。以索尼 PSVR2 控制器和罗技 Muse 手写笔为例,这类设备通常通过蓝牙连接,具备按钮、触觉反馈等功能。苹果对空间配件的最新定义,至少包含三个核心要素:LED 追踪阵列、IMU(惯性测量单元)芯片,以及蓝牙连接。按钮和触觉反馈为可选配置——换句话说,即便是一个仅带 LED 灯的小配件,只要满足上述条件,也能被 Vision Pro 精确追踪。
苹果还现场演示了一款手电筒配件:开发者只需在应用中整合该设备的 3D 模型,Vision Pro 便能结合模型与 LED 阵列完成准确追踪。

一款配备 LED 指示灯的空间辅助手电筒的 3D 渲染示意图
另一类是可追踪对象。这类物体无需内置复杂电子元件,开发者可通过 3D 模型识别,或为物体加装外部追踪器完成映射。苹果展示了一个有趣的案例——地球仪。系统可在实体地球仪上叠加虚拟界面,当用户转动实物时,虚拟内容会同步旋转。

利用 ARKit 可扫描地球仪等实物,并将其导入软件进行交互。
简而言之,苹果正在将 Vision Pro 从“仅识别手指与眼睛”的封闭系统,扩展为能够感知、追踪并响应真实世界中各类物体的开放平台。这不仅是为开发者提供更多 API 接口,更是在为空间计算的下一阶段铺路——当虚拟内容能够稳定附着在物理物体上,并随用户动作实时反馈时,“数字与现实世界深度融合”的体验,才真正开始初现雏形。
