苹果在 WWDC26 上发布了面向 Apple Vision Pro 的新一代操作系统「visionOS 27」。本次更新以可固定在空间中、用视线即可唤起的全新 Siri AI 为核心,同时带来可对眼前所见内容随时提问的视觉智能(Visual Intelligence),以及把照片转换为立体空间场景的功能。开发者测试版已随发布同步开放,公测版将于下月推出,正式版预计今年秋季发布。下面梳理这些有望大幅改变 Vision Pro 使用体验的变化。

放在空间里、用视线说话的全新 Siri AI

visionOS 27 改变最大的,是 Vision Pro 上的 AI 体验。全新的 Siri AI 可以作为一个图标(气泡)固定放置在空间中你喜欢的位置。之后只需把视线投向该图标并开口说话即可操作,不必再像以往那样喊「Hey Siri」后等待。这是一种专为头显设计、把视线与语音结合起来的唤起方式。

全新 Siri AI 运行在新一代 Apple Intelligence 基础之上,这一基础引入了 Google 的 Gemini 技术,因此能够在理解用户所处情境与屏幕上所显示信息的同时作出回应。Siri AI 将于今年下半年作为测试功能开放,初期仅支持英语,包括日语在内的其他语言将逐步扩展。

对眼前所见之物随时提问

另一大亮点是与视觉智能更深入的联动。无论是摆在面前的实物,还是显示在应用画面中的内容,都可以直接对其提问。

在苹果展示的演示中,用户一边看着 Safari 中显示的一只背包,一边询问「下次旅行能不能带上飞机」,Siri AI 便结合航空公司的一般规定和用户的出行计划作出了回答。当用户接着就同一画面中的登山鞋追问「能不能装进这个包里」时,它也保持着上下文继续应答。与 iPhone 和 Mac 一样,Vision Pro 上同样可以使用辅助撰写和编辑文字的功能,朗读语音的音高、语速与语调也能进行细致调整。

照片与空间表现同样进化

AI 以外的功能也在稳步扩充。「Spatial Panoramas」可将你拍摄的全景照片转换为立体的空间场景,生成的空间可直接用作 Vision Pro 的环境(Environment)。新增的环境中还包括冰岛的峡谷「Thórsmörk(索尔斯莫克)」。

在照片编辑方面,「Spatial Reframing」能用 AI 一并处理被摄主体的位置调整、裁剪以及缺失背景的补全,让人轻松从自己的照片中提取出空间内容特有的沉浸感。

操作方式与窗口显示焕新

直接影响日常使用的部分也得到了重新设计。只需把视线投向通知即可展开其内容,视线操作更加顺手。控制中心也被整理为通知与播放控制、主要系统设置、环境设置三个部分,让人更容易找到目标项。

应用窗口新增了「Curved Windows」,可像真正的曲面屏一样让画面弯曲,使边缘部分更易查看。该功能将先从 Safari、Freeform 和 Apple TV 的 Multiview 开始,随后逐步扩展。此外,Wi-Fi 连接速度最高提升至 3 倍,Mac Virtual Display 即使面对处于合盖状态的 Mac 也能快速连接。Safari 支持利用网站 360 度背景的沉浸式网页体验,小组件则新增了「Extra Small」尺寸。

面向开发者的强化与未来布局

面向开发者的功能同样得到加强。现在可以在 Vision Pro 的空间内预览和编辑 Mac 上的 3D 模型,Quick Look 也支持线框显示、UV 贴图显示以及添加注释。对于在空间中创作内容的人来说,确认与调整的流程将更加顺畅。

Vision Pro 一直被指出在销售方面表现不佳。即便如此,visionOS 27 仍进一步打磨了它在视线追踪、空间感知和视觉智能方面的优势。这些技术看起来将成为通向传闻中未来推出的苹果智能眼镜的基础,因而这次更新所承载的意义已超越 Vision Pro 这一硬件本身。

总结

visionOS 27 以用视线唤起的 Siri AI 和可对所见之物提问的视觉智能为核心,把空间计算与 AI 更紧密地结合在一起。从 Spatial Panoramas 到焕新的窗口显示,日常使用的便利性也得到了提升。开发者测试版已经开放,正式版预计今年秋季发布。