在办公空间内，书架上整齐摆放着魔术道具，一旁是一扇可以眺望巴黎全景的窗户——但这扇窗实际上并不存在。所有这一切，都是在佩戴Apple Vision Pro头显时出现的混合现实叠加画面，精准映射到真实窗户的位置。墙上还挂着一只虚拟时钟。

真实的书架清晰可见，而巴黎窗景和挂钟属于虚拟元素。但当我以一个发光球体的形式唤起Siri时，它能同时识别这些真实与虚拟的物体。询问面前有什么，Siri的文字回复框便会逐一描述眼前的场景。

首次佩戴Vision Pro，并在VisionOS 26开发者预览版中体验“全知Siri”时，初感受既令人惊喜，又格外熟悉。此前在三星Galaxy XR头显上也有过类似体验——那款设备已支持Gemini Live模式，能识别用户所在的房间以及打开的虚拟应用和窗口。此外，我也曾佩戴过多款带摄像头的智能眼镜，在走动时向AI询问周边环境。

正如预期的那样，Apple今年秋季将为Apple Watch、iPhone、iPad等设备带来全面升级的Siri，并将视觉智能能力从iPhone扩展至更多平台。其中，Vision Pro上的Siri最为引人注目，也或许最具野心——它能在用户需要时感知视野内的一切，仿佛一位贴心的感知伙伴。

这个在Apple WWDC上刚刚发布数日的早期预览版本并不完美，但其表现已足以让人窥见未来的方向。如今，能够实现这一感知能力的眼镜产品似乎完全触手可及。与此同时，Vision Pro的辅助功能也将变得更加引人入胜。

Siri的发光球体：随时准备“看见”

与iOS和iPadOS上通过相机应用启动的视觉智能模式不同，Vision Pro上的Siri只需你说出“Hey Siri”并提问，即可立即感知周围环境。

Siri以一个三维发光球体的形式出现，仿佛一位精灵降临在房间中。你可以随意拖动它的位置，这颗发光球体借助VisionOS的空间图形引擎，在桌面或房间里投射出真实的光影效果，视觉上颇为惊艳。

只需说“Hey Siri，我面前有什么？”便能触发视觉智能功能——系统会发出一声新颖的提示音，随后根据眼球追踪技术，对视线所及的区域进行快速视觉扫描。扫描范围相当广泛：它能看到面前书架上满满的书籍，以及摆放在那里的各种手办和玩具，还能准确读出几本书的书名，例如《漩涡》和《奇书》。

AI的反馈基于摄像头对眼前场景（无论真实还是虚拟）拍摄的静止画面，这与Meta智能眼镜或三星Galaxy XR上其他基于摄像头的AI的“拍摄-响应”节奏类似。不过，它目前尚不具备那些设备所支持的实时连续识别模式，每次请求只能拍摄一张静态图像进行分析。

同时识别真实与虚拟物体

在桌面上，Siri成功识别出一台红色Virtual Boy虚拟现实头显和一台Steam Deck掌机，两者都是真实物品。随后，视线转向虚拟的巴黎窗景、墙上的时钟小组件以及装满魔术道具的书架，它同样一一识别了出来。

在这个早期测试版本中，Siri有时会在一段时间内停留在某个特定视角进行分析，除非关闭Siri或移动发光球体重新尝试。当然，这也可能只是我还不够熟悉操作方式。

但我已经开始思考，如何借助这种视觉感知能力来提升工作效率。让Siri总结一篇关于近期剧本创作的备忘录——只需开口询问，它便调出了内容并提炼了要点。我还询问了MacBook虚拟屏幕上打开的浏览器窗口情况。（就在通过Mac在Vision Pro中撰写这篇文章的此刻，Siri正在告诉我，打开了一个Google文档窗口，里面写的正是Siri识别真实与虚拟物体的内容。）

将个人照片转化为全景三维背景

VisionOS 26中的全景照片转换新功能——它能将相册中的任意全景照片转换为可环绕包裹的三维背景，供工作时使用。

转换效果并不像Apple自家的沉浸式环境那样完全三维环绕，也没有动态效果或环境音效，更像是超大型的环绕式三维窗口，办公室的部分实景依然在边缘可见。

视觉效果相当美观，尽管并非所有全景照片都能成功转换（这还是非常早期的阶段，相信后续会逐步完善）。我调出了一张疫情期间探望母亲时在她后院拍摄的照片，现在每次启动时，那个场景便会迎接我，仿佛又回到了那里。如果Vision Pro能像Meta Quest那样，支持从多张照片生成完全沉浸式的高斯泼溅场景，那就更完美了。

我不禁开始想象，Apple即将推出的智能眼镜将如何借助具有视觉能力的Siri实现辅助功能。但这或许有些超前了。目前，体验这一切需要一台售价3499美元的Vision Pro。然而，当Apple推出类似谷歌或Xreal Project Aura那样体积更小、价格更亲民的AR眼镜，当更多应用能够接入Siri的视觉框架时，一切将会如何演变？站在未来的门槛上，我满怀期待地向前张望。

Q&A

Q1：Vision Pro上的Siri视觉功能和其他设备上的视觉智能有什么区别？

A：Vision Pro上的Siri视觉功能无需进入相机应用，只需说“Hey Siri”并提问即可触发。它以三维发光球体形式呈现，能同时识别真实和虚拟物体，并结合眼球追踪技术扫描视野范围。不过目前每次请求仅能拍摄一张静态图像分析，尚不支持Meta眼镜或三星Galaxy XR那样的实时连续识别模式。

Q2：VisionOS 26的全景照片转换功能效果如何？

A：该功能可将相册中的全景照片转换为环绕式三维背景，用于工作时的视觉环境。效果介于普通大屏和完全沉浸式环境之间，没有动态效果或环境音效，办公室实景仍在边缘可见。目前并非所有全景照片都能成功转换，功能仍处于早期阶段，预计后续版本会持续完善。

Q3：Apple智能眼镜什么时候会推出类似Vision Pro的Siri视觉功能？

A：目前Apple尚未正式发布智能眼镜产品，体验Siri视觉功能仍需3499美元的Vision Pro。但随着谷歌、Xreal等厂商推出体积更小、价格更亲民的AR眼镜，加之Apple预计将推出类似产品，具备视觉感知能力的Siri有望在未来以更低门槛的硬件形态普及。