蘋果在 WWDC26 上發表了專為 Apple Vision Pro 打造的新一代作業系統「visionOS 27」。這次更新以可固定在空間中、用視線即可喚起的全新 Siri AI 為核心,同時帶來能對眼前所見內容隨時提問的視覺智慧(Visual Intelligence),以及把照片轉換為立體空間場景的功能。開發者測試版已隨發表同步開放,公測版將於下個月推出,正式版預計今年秋季釋出。以下整理這些可望大幅改變 Vision Pro 使用體驗的變化。

放進空間、用視線說話的全新 Siri AI

visionOS 27 改變最大的,是 Vision Pro 上的 AI 體驗。全新的 Siri AI 可以化為一個圖示(泡泡),固定放在空間中你喜歡的位置。接著只要把視線投向該圖示並開口說話即可操作,不必再像過去那樣喊「Hey Siri」後等待。這是一種專為頭戴裝置設計、把視線與語音結合起來的喚起方式。

全新的 Siri AI 運作在新一代 Apple Intelligence 基礎之上,這套基礎導入了 Google 的 Gemini 技術,因此能在理解使用者所處情境與螢幕上所顯示資訊的同時做出回應。Siri AI 將於今年下半年以測試功能的形式開放,初期僅支援英文,包含日文在內的其他語言則會逐步擴大。

對眼前所見之物隨時提問

另一大亮點,是與視覺智慧更深入的整合。無論是擺在眼前的實物,還是顯示在應用程式畫面中的內容,都可以直接針對它提問。

在蘋果展示的示範中,使用者一邊看著 Safari 中顯示的一只後背包,一邊詢問「下次旅行能不能帶上飛機」,Siri AI 便結合航空公司的一般規定與使用者的旅行計畫做出回答。當使用者接著針對同一畫面中的登山鞋追問「能不能放進這個包包裡」時,它也維持著前後脈絡繼續回應。與 iPhone 和 Mac 一樣,Vision Pro 上同樣可以使用協助撰寫與編輯文字的功能,朗讀語音的音高、語速與語調也能進行細緻調整。

照片與空間表現同樣進化

AI 以外的功能也在穩定擴充。「Spatial Panoramas」可將你拍攝的全景照片轉換為立體的空間場景,產生的空間能直接當作 Vision Pro 的環境(Environment)使用。新增的環境中還包含冰島的峽谷「Thórsmörk(索爾斯莫克)」。

在照片編輯方面,「Spatial Reframing」能用 AI 一併處理被攝主體的位置調整、裁切以及缺漏背景的補全,讓人輕鬆從自己的照片中帶出空間內容特有的沉浸感。

操作方式與視窗顯示煥新

直接影響日常使用的部分也經過重新檢視。只要把視線投向通知即可展開其內容,視線操作更加順手。控制中心也整理為通知與播放控制、主要系統設定、環境設定三個區塊,讓人更容易找到目標項目。

應用程式視窗新增了「Curved Windows」,可像真正的曲面螢幕一樣讓畫面彎曲,使邊緣部分更易檢視。此功能將先從 Safari、Freeform 與 Apple TV 的 Multiview 開始,隨後逐步擴大。此外,Wi-Fi 連線速度最高提升至 3 倍,Mac Virtual Display 即使面對處於闔上狀態的 Mac 也能快速連接。Safari 支援運用網站 360 度背景的沉浸式網頁體驗,小工具則新增了「Extra Small」尺寸。

面向開發者的強化與未來布局

面向開發者的功能同樣獲得加強。現在可以在 Vision Pro 的空間內預覽與編輯 Mac 上的 3D 模型,Quick Look 也支援線框顯示、UV 貼圖顯示以及加入註解。對於在空間中創作內容的人來說,確認與調整的流程將更加流暢。

Vision Pro 一直被指出在銷售方面表現不佳。即便如此,visionOS 27 仍進一步打磨了它在視線追蹤、空間感知與視覺智慧方面的優勢。這些技術看來將成為通往傳聞中未來推出的蘋果智慧眼鏡的基礎,因此這次更新所承載的意義已超越 Vision Pro 這項硬體本身。

總結

visionOS 27 以用視線喚起的 Siri AI 和可對所見之物提問的視覺智慧為核心,把空間運算與 AI 更緊密地結合在一起。從 Spatial Panoramas 到煥新的視窗顯示,日常使用的便利性也獲得提升。開發者測試版已經開放,正式版預計今年秋季釋出。