蘋果發(fā)布了visionOS 2，這是2月份與Apple Vision Pro一起推出的visionOS操作系統(tǒng)的最新版本。

用戶可以通過導航到“設置”應用、選擇“常規(guī)”、并選擇“軟件更新”選項在Vision Pro 上下載?visionOS 2?。而要安裝更新，需要移除Vision Pro，其正面EyeSight顯示屏上有一個軟件進度條。

visionOS 2更新允許用戶從2D圖像創(chuàng)建3D空間照片，利用深度信息和機器學習來添加自然深度和維度。

基于visionOS 2，用戶現在可自定義主視圖并移動應用，蘋果還添加了新的Bora Bora環(huán)境。環(huán)境也已更新，以便用戶在沉浸其中時可以看到Magic Keyboard或MacBook鍵盤，使得打字更輕松，另外，用戶還可以在觀看基于網絡的視頻時將鍵盤與Safari兼容使用。

visionOS 2下，數字角色的膚色更加準確，衣服顏色選項更加鮮艷，手勢動作也進行了更新，變得更加流暢自然。對于Vision Pro控制，增加了新的捏合和旋轉手勢，可用于進入主視圖、訪問控制中心、控制音量和檢查電池電量。

用戶現在可以將鼠標與Vision Pro一起使用，Vision Pro改進了訪客模式，因此最近訪客的手部和眼部數據將保存30天，以便更輕松訪問而無需重復設置。

今年晚些時候，visionOS 2將支持連接Mac的更大超寬視圖，并支持MLS和MLB游戲的多視圖。

visionOS 2完整發(fā)布說明如下：

照片

-只需輕按一下按鈕，即可根據過去的回憶創(chuàng)建空間照片

-通過FaceTime與使用Vision Pro和SharePlay for Photos的用戶分享最喜愛的時刻

-在重新設計的照片應用中，通過精選空間照片等收藏功能查找和體驗最珍貴的回憶

-修剪照片庫中的視頻

主視圖

-通過重新排列應用程序（包括來自“兼容應用程序”文件夾的應用）來個性化主視圖

-使用改進的人物視圖更輕松開始FaceTime 通話、發(fā)送短信或查找聯系人信息

輸入

-使用新的手勢輕松訪問主視圖、查看時間、控制音量、檢查電池電量以及打開控制中心

-只需看麥克風圖標，即可使用“查看以聽寫”在“信息”中快速輸入文本

-使用藍牙鼠標導航Vision Pro

-通過鍵盤感知以身臨其境的體驗查看Magic Keyboard鍵盤或MacBook鍵盤

Safari

-像在照片應用中一樣，沉浸在環(huán)繞全景圖中

-使用大屏幕觀看來自YouTube.com、Netflix.com等網站的網絡視頻，包括光暈和反射

-讓Siri閱讀Safari網頁上的內容

-使用固定標簽快速訪問最重要的信息

-使用個人資料區(qū)分瀏覽主題，如工作、個人或學校

訪客用戶

-保存最近訪客的眼部和手部數據長達30天，以便可以跳過設置并直接返回Vision Pro

旅行模式

-在火車上使用旅行模式進行私密工作，使用多個應用進行多任務處理，支持在長途通勤中觀看最喜愛的節(jié)目

環(huán)境

-探索新的海灘環(huán)境，波拉波拉島

數字角色

-創(chuàng)建具有更準確膚色、流暢自然的手部動作和效果、更鮮艷的服裝顏色和更多眼鏡選擇的角色

-在FaceTime或第三方視頻通話期間從各種背景中進行選擇，包括個人照片

正念

-隨著呼吸而出現的視覺動畫進行冥想

隱私

-開啟“通信安全”，其中包括對兒童可能接收或試圖發(fā)送的敏感視頻和照片的保護

-使用“敏感內容警告”模糊處理收到的敏感照片和視頻

輔助功能

-使用實時字幕實時轉錄語音、音頻和視頻內容，包括FaceTime通話

-在空間中的任何位置固定Apple Immersive Video隱藏式字幕

-配對專為iPhone設計的人工耳蝸設備

-通過更改內容的顯示方式反轉顏色以輕松查看視圖中的內容

-自動調暗描繪閃爍或頻閃燈光的視頻內容

-降低物體的透明度，使其更易于查看或閱讀

此版本還包括其他功能和改進：

-基于Vision Pro作為AirPlay接收器來鏡像來自同一無線網絡上附近任何iPhone或iPad的內容

-新窗口視圖下支持其他應用程序運行時觀看Apple Immersive Video內容

-一起編輯播放列表，并通過Apple Music Sing加入終極唱歌會話

-基于Quick Look將對象錨定到水平表面并預覽

visionOS 2穩(wěn)定版本將于周一公開發(fā)布。

visionOS 2于6月份在WWDC24大會上發(fā)布。自那時起，蘋果已發(fā)布了9個測試版本，現在候選版本也已發(fā)布。

visionOS 2的變化和改進

Apple Vision Pro操作系統(tǒng)visionOS 2將引入新功能和多項改進。

菜單手勢

visionOS 2增加了兩個系統(tǒng)手勢?，F在，張開手掌并將食指捏到拇指上會調出應用啟動器（與 Meta Quest的菜單手勢相同）。再次將手掌朝下會顯示一個手鎖定信息欄，其中包含時間、音量、電池百分比和連接狀態(tài)。捏合將打開控制中心。

該更新還允許用戶重新排列主屏幕上的應用，之前只能強制按字母順序排序，無法進行自定義。

將圖像轉換為空間照片

visionOS 2可將2D圖像轉換為空間照片，并使用“先進的機器學習”使其3D化。

超寬Mac虛擬顯示器

Mac虛擬顯示功能將得到重大改進，將顯示屏擴展為虛擬超寬屏幕，相當于兩個4K顯示器合在一起。蘋果表示，這基于眼動追蹤動態(tài)注視點技術驅動實現。

此功能需要基于macOS未來版本，目前測試版或候選版本中尚未提供此功能。

手勢追蹤和場景理解的改進

visionOS 2帶來了兩項手部追蹤改進和兩項場景理解改進。

在visionOS 1上，系統(tǒng)支持30Hz手部追蹤姿勢。而在visionOS 2上，手部追蹤姿勢以顯示刷新率呈現，通常為90Hz。

另一項手部追蹤改進是預測，這對開發(fā)者來說是可選的。啟用預測可提供推斷的手部姿勢，表示在顯示每一幀時手部應該在哪里。這可以顯著降低有效延遲，但會犧牲一些準確性。

借助 visionOS 2，Vision Pro現在具有房間追蹤功能。該系統(tǒng)將為開發(fā)者提供每個房間墻壁和地板的精確幾何形狀，甚至支持非矩形墻壁。進入新房間時，系統(tǒng)將通知開發(fā)者并開始僅為新房間描繪幾何形狀。

除了墻壁和地板，visionOS 2還改進了平面檢測。相比之下visionOS 1只能檢測水平和垂直平面，而visionOS 2還可以檢測傾斜平面。

Safari默認提供影院模式和WebXR

在visionOS 2中，Safari支持在虛擬環(huán)境巨大虛擬屏幕上播放全屏視頻，包括YouTube和 Netflix內容。

WebXR現在也默認啟用，不再隱藏在用戶需要啟用的功能標志后面。

Vision Pro現在是AirPlay接收器

借助visionOS 2，Vision Pro可為AirPlay接收器，這意味著用戶可以將iPhone或iPad顯示投射到頭顯上。

新的虛擬環(huán)境：波拉波拉島

鍵盤突破與實體鼠標

在visionOS 2中，物理鍵盤現在可以顯示完全沉浸式的環(huán)境，這稱為“鍵盤突破”。

此外，現在還支持物理鼠標，而以前只能使用觸控板。

訪客模式升級

visionOS 2允許保存訪客用戶的手眼設置長達30天。

對于經常使用Vision Pro的訪客來說，這將非常有用，因為以前每次都需要重新進行手眼設置。

靜態(tài)3D物體追蹤

visionOS 2還為開發(fā)者增加了追蹤3D對象的功能，這是一項全新的追蹤功能。

在編譯應用之前，開發(fā)者必須將追蹤3D對象作為USDZ 3D模型反饋給Mac Create ML工具。Create ML將為每個對象訓練一個神經網絡，并將其嵌入到應用中。

火車出行模式

旅行模式此前是為航空出行而設計的，現在，正獲得對火車出行的支持。

實時字幕

正如5月份所宣布，visionOS 2增加了實時字幕選項，該選項可應用于通過麥克風輸入的實時對話以及來自任何應用程序的音頻，包括FaceTime通話。

HealthKit與TableTopKit

HealthKit曾在其他蘋果設備上使用，現已在visionOS 2中推出，其使健康和健身應用能從用戶Apple Health檔案中存儲和讀取數據。

新的TabletopKit使開發(fā)者能更輕松“快速構建以桌子為中心的共享和協(xié)作應用體驗，例如棋盤游戲或制造工作站”。

企業(yè)Raw相機訪問

借助visionOS 2，企業(yè)可訪問Vision Pro的直通攝像頭來運行自定義計算機視覺模型。

蘋果明確表示，這些功能只能在“僅用于商業(yè)環(huán)境”的應用中使用這些功能，并且使用這些功能的應用只能作為專有的內部應用或使用Apple Business Manager為特定業(yè)務制作的自定義應用分發(fā)，而不能在App Store上分發(fā)。且需要托管授權以及與用戶Apple開發(fā)者賬戶綁定的許可證文件。

蘋果面向Apple Vision Pro開發(fā)者發(fā)布了visionOS 2候選版本，該測試版是在visionOS 2 beta 9發(fā)布一周后推出的。

注冊開發(fā)者可以通過打開Vision Pro“設置”應用，轉到“軟件更新”部分，點擊“Beta更新”選項，然后切換到“開發(fā)者Beta”來選擇加入Beta版。請注意，下載和安裝Beta版需要與開發(fā)者賬戶關聯的Apple ID。

visionOS 2能夠從2D照片中獲取深度信息，并使用先進的機器學習將其轉換為3D照片。蘋果表示，該功能旨在為照片增加深度，讓回憶更加身臨其境。

基于新的手勢可激活Home View和控制中心，Home View現在也可以自定義，可以重新排列應用程序。旅行模式包括了對火車模式的支持，訪客用戶資料可保存30天，因此訪客不必在每次試用Vision Pro時都進行設置。

今年晚些時候，Mac Virtual Display將支持更高分辨率和更大尺寸的虛擬顯示器，蘋果表示這相當于兩個并排的4K顯示器。通過AirPlay更新，Vision Pro可用作?AirPlay?接收器，因此可以將iPhone、iPad或 Mac上的內容共享到頭顯上。

Mindfulness應用支持攝像頭追蹤和響應呼吸模式，以改善冥想體驗，并且Vision Pro也支持了visionOS 2藍牙鼠標。

蘋果面向Apple Vision Pro開發(fā)者發(fā)布了visionOS 2 beta 9測試版，該測試版比beta 8推出晚了一周。

Vision Pro注冊開發(fā)者可通過“設置”應用，轉到“軟件更新”，點擊“Beta 更新”選項，然后切換到“開發(fā)者Beta”以選擇Beta版本。請注意，下載和安裝Beta版需要與開發(fā)者賬戶關聯的Apple ID 。

visionOS 2可從2D照片中獲取深度信息，并使用先進的機器學習將其轉換為3D照片。蘋果表示，該功能旨在為照片增加深度，讓回憶更加身臨其境。

基于新手勢開發(fā)者可激活Home View和控制中心，Home View也可自定義，重新排列應用程序。visionOS 2旅行模式現在包括了對火車模式的支持，訪客用戶資料可保存30天，因此訪客不必在每次試用頭顯時都進行設置。

今年晚些時候，Mac Virtual Display將支持更高分辨率和更大尺寸的虛擬顯示器，蘋果表示這相當于并排放置兩個4K顯示器。通過AirPlay更新，Vision Pro可充當?AirPlay?接收器，因此可以將iPhone、iPad或Mac上的內容共享到頭顯上。

Mindfulness應用支持攝像頭追蹤和響應呼吸模式，以改善冥想體驗，并且Vision Pro支持visionOS 2藍牙鼠標。

蘋果面向Apple Vision Pro開發(fā)者發(fā)布了visionOS 2 beta 8測試版，該測試版比beta 7晚了一周。

注冊開發(fā)者可以通過打開Vision Pro“設置”，轉到“軟件更新”部分，點擊“Beta更新”選項，然后切換到“開發(fā)者Beta”來選擇加入Beta版。請注意，下載和安裝Beta版需要與開發(fā)者賬戶關聯的Apple ID。

基于visionOS 2可從2D照片中獲取深度信息，并使用先進的機器學習將其轉換為3D照片。蘋果表示，該功能旨在為照片增加深度，讓回憶更加身臨其境。

基于新的手勢可以激活Home View和控制中心，Home View現在也可自定義，以重新排列應用程序，旅行模式包括了對火車模式的支持，訪客用戶資料可保存30天，因此訪客不必在每次試用頭顯時都進行設置。

今年晚些時候，Mac Virtual Display將支持更高分辨率和更大尺寸的虛擬顯示器，蘋果表示這相當于并排放置兩個4K顯示器，通過AirPlay更新，Vision Pro可充當?AirPlay?接收器，因此可以將iPhone、iPad或Mac的內容共享到頭顯上。

Mindfulness應用可以使用攝像頭追蹤和響應呼吸模式，以改善冥想體驗，并且Vision Pro支持visionOS 2藍牙鼠標。

蘋果面向Apple Vision Pro開發(fā)者發(fā)布了visionOS 2 beta 7測試版，該測試版比beta 6晚了一周。

Vision Pro注冊開發(fā)者可以通過“設置”應用，轉到“軟件更新”，點擊“Beta更新”選項，然后切換到“開發(fā)者Beta”來選擇加入Beta版。請注意，下載和安裝Beta版需要與開發(fā)者賬戶關聯的Apple ID。

visionOS 2能從2D照片中獲取深度信息，并使用先進的機器學習將其轉換為3D照片。蘋果表示，該功能旨在為照片增加深度，讓回憶更加身臨其境。

visionOS 2支持有新的手勢以激活Home View和控制中心，Home View現在也可自定義，以重新排列應用程序。旅行模式包括了對火車模式的支持，訪客用戶資料現在可保存30天，因此訪客不必在每次試用Vision Pro時都進行設置。

今年晚些時候，Mac Virtual Display將支持更高分辨率和更大尺寸的虛擬顯示器，蘋果表示這相當于并排放置兩個4K顯示器。通過AirPlay更新，Vision Pro可以充當?AirPlay?接收器，因此可以將iPhone、iPad或 Mac上的內容共享到Vision Pro上。

Mindfulness應用還可基于攝像頭追蹤和響應呼吸模式，以改善冥想體驗，并且Vision Pro兼容visionOS 2藍牙鼠標。

蘋果面向Apple Vision Pro開發(fā)者發(fā)布了visionOS 2 Beta 6版本，該測試版比Beta 5晚發(fā)布一周。

Vision Pro注冊開發(fā)者可通過打開Vision Pro“設置”，轉到“軟件更新”部分，點擊“Beta更新”選項，然后切換到“開發(fā)者Beta”以選擇Beta版本。請注意，下載和安裝Beta版需要與開發(fā)者賬戶關聯的Apple ID。

visionOS 2支持從2D照片中獲取深度信息，并使用先進的機器學習將其轉換為3D照片。蘋果表示，該功能旨在為照片增加深度，讓用戶回憶更加身臨其境。

visionOS 2支持以新手勢激活Home View和控制中心，Home View也可以自定義，以重新排列應用程序。旅行模式現在包括了對火車模式的支持，訪客用戶資料保存達到30天，使訪客不必在每次試用頭顯時都進行設置。

今年晚些時候，Mac Virtual Display將支持更高分辨率和更大尺寸的虛擬顯示器，蘋果表示這相當于并排放置兩個4K顯示器。通過AirPlay更新，Vision Pro可以充當?AirPlay?接收器，從而將iPhone、iPad或Mac內容共享到Vision Pro。

另外Mindfulness應用支持攝像頭追蹤和響應呼吸模式，以改善冥想體驗，并且Vision Pro支持帶有visionOS 2的藍牙鼠標。

蘋果WWDC 2024上宣布了visionOS 2.0的一些新的Quick Look功能。在本文中，我們將介紹在Apple Vision Pro中使用 QuickLook 的新方法。

Quick Look是visionOS的一項功能，可讓用戶以增強的分辨率預覽visionOS應用對象的大型 3D渲染圖。通過使用Quick Look，用戶可以在visionOS中選擇3D對象并將其放大以進行3D 預覽。

要在visionOS應用中提供快速查看預覽，只需提供一個URL。

在visionOS Quick Look中預覽3D內容有兩種方法：應用內樣式或窗口樣式（類似于macOS中Quick Look的工作方式）。

應用內樣式

使用應用內樣式，用戶可現場查看visionOS場景中的3D對象，而無需打開單獨的界面。應用內樣式只需點擊3D對象即可快速輕松地預覽。

使用應用內樣式允許用戶直接操作和預覽對象。

窗口化

在窗口式快速查看中，3D對象以體積形式顯示，讓用戶可以在單個覆蓋窗口中查看所有可用的3D對象。

窗口快速查看方便輕松查看大量對象，并且速度更快，因為用戶可以在一個空間中循環(huán)瀏覽所有可用對象，而不必選擇每個對象，然后預覽。

預覽應用程序API

visionOS 2提供了一個利用SwiftUI和并發(fā)性的新PreviewApplication API，允許開發(fā)者僅用幾行代碼即可在visionOS應用程序中包含Quick Look。

使用PreviewApplication API，visionOS應用可以為單個對象提供快速查看預覽功能，或者使用Collection View提供一組預覽。

要使用 PreviewApplication API，開發(fā)者需要在Xcode中的Swift文件View中創(chuàng)建一個新的子類，并在視圖子類文件的頂部創(chuàng)建框架。

在body View子類中，添加一個縮略圖視圖和.onTapGesture。

在.onTapGesture中，首先創(chuàng)建一個PreviewItem，傳入3D對象URL，然后調用PreviewApplication.open，傳入創(chuàng)建的預覽項。

使用此代碼，當用戶點擊文件時，它會在visionOS工作區(qū)的新窗口中打開；如果文件包含視頻，則視頻會自動開始播放。

通過在參數中傳遞URL數組.selectedURL而不是單個URL，開發(fā)者可以允許用戶在Collection View Quick Look窗口中預覽多個項目。

editingMode：開發(fā)者還可以通過將參數設置為來指定是否顯示預覽編輯選項卡，以便用戶可以對正在預覽的項目進行編輯.enabled；開發(fā)者還可以更改正在預覽的項目的當前標題。

visionOS 2中還有其他新的Quick Look API變化，包括Quick Look預覽會話事件等。

配置

visionOS 2中的Quick Look還支持配置。通過配置，開發(fā)者可以指定3D對象的選項或變體供用戶選擇，這包括了大小、顏色、透明度等選項。

開發(fā)者還可以在“快速查看”中為3D對象添加紋理選項，通過配置，開發(fā)者將能允許用戶在 visionOS環(huán)境中自定義3D對象。

蘋果舉辦了一場名為“visionOS快速查找新功能”的會議，介紹了WWDC24 vision OS 2.0快速查找新功能及其變化。

另外，請務必查看Quick Look文檔和使用AR Quick Look預覽模型；此外，還有一個Quick Look 3D模型概覽庫，展示了如何為visionOS用戶提供Apple Vision Pro上物體的高分辨率3D預覽。