美國專利商標(biāo)局正式公布蘋果一項專利申請,該專利申請涉及基于Vision Pro創(chuàng)作藝術(shù)畫作的潛在輸入設(shè)備。
蘋果提出的技術(shù)基于兩項專利,支持用戶AR繪畫,使用戶能在虛擬畫布上創(chuàng)作;該技術(shù)還支持在現(xiàn)實世界中進行藝術(shù)創(chuàng)作,使虛擬藝術(shù)品可以疊加在實際元素上。
第一項專利申請,“頭戴式設(shè)備手寫筆輸入系統(tǒng)”準(zhǔn)確描述了傳言所暗示內(nèi)容:蘋果正在研究使用手寫筆與虛擬世界進行交互。
雖然Apple Pencil是輸入設(shè)備的自然選擇,但該專利描述了一種帶有光發(fā)射器(可能是紅外線)的新設(shè)備,可以讓頭顯追蹤設(shè)備的位置和方向。

第二項專利“在計算機生成的現(xiàn)實環(huán)境中實現(xiàn)繪圖的技術(shù)”則更進一步。
下圖顯示了手部追蹤機制,像握住畫筆一樣捏住手指,其中一根手指就會疊加在手上,切換工具和Vision Pro會改變你手中物品的顯示。
雖然應(yīng)用中沒有提及,但為不同媒體添加手勢會很容易。你也許可以通過握住罐子并按下按鈕的手勢來虛擬地噴漆,或者通過伸出手指來進行手指繪畫。
蘋果希望通過獨特的手勢選擇顏色以創(chuàng)建藝術(shù)家工作流程的虛擬模擬。借助這項技術(shù),你可以通過翻轉(zhuǎn)一只手并將虛擬畫筆“浸入”虛擬顏料來選擇和混合顏色。這種體驗將模仿藝術(shù)家一手拿著顏料托盤,另一只手拿著畫筆。
在3D空間中繪圖并不是獨一無二的,擁有Quest之類頭顯的人都可以使用Tilt Brush或其他藝術(shù)創(chuàng)作應(yīng)用來創(chuàng)建虛擬藝術(shù)品。
然而,這些應(yīng)用需要使用手柄,這也顯得創(chuàng)作很笨拙,因為按下按鈕并不是一種自然的繪畫方式,而且手柄也會妨礙體驗。
除了虛擬繪畫,蘋果專利還表明,音頻反饋可以讓用戶聽到紙上的畫筆筆觸或鉛筆畫線條聲,像這樣的沉浸式體驗可以改變AR/VR中的藝術(shù)創(chuàng)作。
音頻反饋也可用于虛擬藝術(shù)課程。戴上頭顯,聽舒緩的音樂,然后按照繪畫老師的提示進行操作。
我們可以想象該專利可與蘋果其他AR/VR專利相結(jié)合,這將支持多個用戶查看相同的虛擬對象并與之交互,即使不在同一個空間中。例如,你可以與美術(shù)老師一起上課,并在同一虛擬畫布上繪畫。
結(jié)合Apple Vision Pro測試Apple Pencil的消息,可以肯定說,其中一些技術(shù)很快就會推出,或許最快在WWDC24上推出。