基于VisionOS 1.0 beta 4版本,Apple Vision Pro支持通過AirPlay或FaceTime進(jìn)行屏幕鏡像。
通過“AirPlay”或“FaceTime”鏡像或共享視圖時(shí),只有一項(xiàng)活動(dòng)可用。這表明用戶可將Vision Pro顯示屏鏡像到外部顯示器或電視,或通過“AirPlay”或“FaceTime”與其他人分享視圖。Meta Quest等其他頭顯也具有類似的功能,這有助于減少頭顯用戶與其他人的孤立感。
VisionOS 1.0 beta 4還包括一個(gè)重置EyeSight數(shù)據(jù)的新選項(xiàng)。EyeSight是在Apple Vision Pro外部顯示屏顯示用戶模擬眼睛的功能。該選項(xiàng)操作如下:
用戶可通過選擇“設(shè)置”>“人物感知”并點(diǎn)擊“重置個(gè)性化EyeSight”來重置EyeSight。該重置功能將刪除用戶個(gè)性化眼部數(shù)據(jù)詳細(xì)信息,例如眼球形狀和尺寸;重置EyeSight后,用戶仍能通過重新捕獲數(shù)字角色以恢復(fù)眼部數(shù)據(jù)。
而角色數(shù)據(jù)共享則表示用戶數(shù)字角色將呈現(xiàn)于FaceTime通話中的所有參與者,以便其他參與者查看用戶角色。Apple Vision Pro通過機(jī)器學(xué)習(xí)以生成數(shù)字角色,支持用戶通過FaceTime 與其他人實(shí)時(shí)共享反映面部和手部動(dòng)作虛擬表征。
至于在VisionOS設(shè)備上的FaceTime通話,在通話結(jié)束后,數(shù)字角色還可以加密方式存儲(chǔ)最多30天,其他通話參與者只有在與用戶通話時(shí)才能觀看該數(shù)字角色。這表明了,數(shù)字角色(不是用于生成角色的數(shù)據(jù))可以存儲(chǔ)在蘋果服務(wù)器上。
來源:MacRumors
蘋果向世界知識(shí)產(chǎn)權(quán)組織提交了一項(xiàng)涉及一種全新轉(zhuǎn)錄應(yīng)用程序的專利,更具體說,涉及對(duì)話和環(huán)境轉(zhuǎn)錄生成和協(xié)助,蘋果專利描述了生成轉(zhuǎn)錄以及提供主動(dòng)和反應(yīng)性轉(zhuǎn)錄協(xié)助的技術(shù),該專利可用于iDevices、Mac和蘋果未來MR頭顯的FaceTime通話或辦公室電話會(huì)議。
根據(jù)蘋果專利背景,傳統(tǒng)系統(tǒng)無法根據(jù)這些轉(zhuǎn)錄內(nèi)容有效提供主動(dòng)和反應(yīng)性幫助,此類系統(tǒng)也無法根據(jù)對(duì)話上下文或環(huán)境因素有效生成轉(zhuǎn)錄內(nèi)容。例如,傳統(tǒng)系統(tǒng)沒有為用戶提供一種有效的方式來根據(jù)特定參數(shù)(例如會(huì)話主題、環(huán)境條件等)快速查看部分轉(zhuǎn)錄內(nèi)容;系統(tǒng)也不基于用戶注意力狀態(tài)(例如當(dāng)用戶從對(duì)話中分心時(shí))提供用戶幫助,因此,需要一種用于轉(zhuǎn)錄和轉(zhuǎn)錄輔助的改進(jìn)系統(tǒng)。
通常,轉(zhuǎn)錄有助于查看和總結(jié)與對(duì)話或各方之間其他互動(dòng)相關(guān)的信息,鑒于設(shè)備之間對(duì)話通信的增加,以及此類設(shè)備技術(shù)的進(jìn)步,對(duì)話轉(zhuǎn)錄現(xiàn)在能有效被利用;另外,各種技術(shù)也可有助于對(duì)環(huán)境進(jìn)行有效翻譯,例如與擴(kuò)展現(xiàn)實(shí)或類似技術(shù)相關(guān)聯(lián)的環(huán)境。
總的來說,蘋果專利涵蓋了轉(zhuǎn)錄和轉(zhuǎn)錄輔助的系統(tǒng)和流程。例如,獲得用戶與至少一個(gè)對(duì)話參與者之間的對(duì)話文本表示;基于文本表示,識(shí)別與對(duì)話相關(guān)聯(lián)的內(nèi)容,其中內(nèi)容包括來自用戶的第一輸入和來自至少一個(gè)對(duì)話參與者的第二輸入中的至少一個(gè);響應(yīng)于內(nèi)容與預(yù)定義內(nèi)容相關(guān)聯(lián)的確定,基于內(nèi)容識(shí)別文本表示的一部分;基于所識(shí)別的部分,提供響應(yīng)于第一輸入和第二輸入中的至少一個(gè)的輸出。

來源:patentlyapple
據(jù)MacRumors報(bào)道,經(jīng)常準(zhǔn)確洞察蘋果計(jì)劃的彭博社知名爆料人Gurman曾表示蘋果AR/VR頭顯將專注于游戲、媒體內(nèi)容消費(fèi)和社交,據(jù)聞該頭顯將運(yùn)行“realityOS”操作系統(tǒng)。
日前,Gurman表露其十分期待視頻聊天應(yīng)用“FaceTime”在realityOS系統(tǒng)的表現(xiàn),并認(rèn)為“FaceTime”可能會(huì)與蘋果現(xiàn)有體驗(yàn)“Memojis”和“SharePlay”息息相關(guān)。

“我想象了VR版本FaceTime,你將置身于可容納幾十人的虛擬會(huì)議室,并能看到對(duì)方逼真的Memojis面部表情;不僅如此,我還希望realityOS系統(tǒng)支持SharePlay,即允許多個(gè)用戶共享音樂、電影、游戲內(nèi)容?!?/p>
自2017年以來,一直有傳言稱蘋果正在開發(fā)realityOS,如今該傳聞得到證實(shí),在App Store上傳日志和蘋果開源代碼中發(fā)現(xiàn)了對(duì)該操作系統(tǒng)的引用。
蘋果在2018年推出了Memojis(iOS 12),而SharePlay則于去年推出(iOS 15.1),蘋果近年發(fā)布了諸如ARKit、Apple Maps AR導(dǎo)航、動(dòng)態(tài)頭部運(yùn)動(dòng)追蹤空間音頻、 LiDAR激光雷達(dá)等新功能,從長遠(yuǎn)來看,這些功能都將集成至蘋果AR/VR頭顯,而Memojis和SharePlay也可能包含在內(nèi)。
盡管蘋果AR/VR頭顯在今年發(fā)布的呼聲很高,但Gurman認(rèn)為,開發(fā)問題很可能會(huì)導(dǎo)致該頭顯延期至WWDC 2023。