?? 由 文心大模型 生成的文章摘要
近日,F(xiàn)acebook Reality Labs的研究人員演示了一種新穎的文本輸入方法,該方法可以實(shí)現(xiàn)無(wú)需手柄的手動(dòng)跟蹤,使用戶可以通過(guò)捏拿的手勢(shì)來(lái)選擇字母進(jìn)行文本輸入。
目前,在VR/AR頭顯中進(jìn)行文本輸入仍然是一項(xiàng)艱巨的任務(wù)。這是因?yàn)楫?dāng)用戶戴上VR頭顯后是看不到鍵盤(pán)的,雖然對(duì)于盲打高手來(lái)說(shuō),這或許并不是問(wèn)題,但對(duì)于大多數(shù)人來(lái)說(shuō),打字將會(huì)變得異常困難。即使是用戶戴著AR頭顯在可以看到鍵盤(pán)的情況下打字,也不可避免要花費(fèi)大量時(shí)間。
除了文本輸入法,語(yǔ)音輸入也是目前流行的輸入方式,但這種方式也存在幾大問(wèn)題。首先,其智能語(yǔ)言判斷機(jī)制還不夠完善,以及容易暴露隱私——對(duì)方不僅要聽(tīng)你說(shuō)的語(yǔ)音內(nèi)容,而且還要聽(tīng)清楚和聽(tīng)明白。其次,與打字相比,語(yǔ)音輸入在某種程度上是一種不同的思維方式,其輸入效率不能與打字相比。

此外,虛擬鍵盤(pán)也是文本輸入的另一種選擇,你可以通過(guò)手指點(diǎn)擊虛擬鍵盤(pán)來(lái)進(jìn)行文本輸入,但虛擬鍵盤(pán)的打字速度太慢,無(wú)法完成繁重的書(shū)寫(xiě)任務(wù)并且缺乏敲打鍵盤(pán)時(shí)產(chǎn)生的物理反饋。
以上主流的幾大文本輸入方式或多或少都存在著一些弊端。為此,F(xiàn)acebook Reality Labs的研究人員創(chuàng)建了一個(gè)手動(dòng)跟蹤文本輸入原型,該原型專為VR/AR頭顯而設(shè)計(jì),而無(wú)需使用傳統(tǒng)鍵盤(pán)。
該手動(dòng)跟蹤文本輸入法讓用戶無(wú)需觸摸鍵盤(pán)上的按鍵,按鍵組則映射到用戶的每根手指上。同時(shí)用戶在輸入時(shí)不是選擇一個(gè)特定字母,而是使用與包含所需鍵入的顏色編碼組相對(duì)應(yīng)的手指進(jìn)行按壓。當(dāng)用戶進(jìn)行按壓輸入時(shí),系統(tǒng)會(huì)根據(jù)用戶輸入的上下文來(lái)預(yù)測(cè)用戶想要輸入的單詞,研究員稱該系統(tǒng)為“PinchType”。
PinchType系統(tǒng)可以解決虛擬鍵盤(pán)和語(yǔ)音輸入的諸多問(wèn)題,其輸入無(wú)聲、隱私性高,比通過(guò)虛擬鍵盤(pán)進(jìn)行頁(yè)面搜索的速度還要快,同時(shí)該系統(tǒng)還支持觸摸物理反饋。
以下是研究人員分享的在測(cè)試PinchType系統(tǒng)時(shí)發(fā)現(xiàn)的一些情況:
在一項(xiàng)有14名參與體驗(yàn)用戶參與的初步研究中,我們調(diào)查了PinchType在體驗(yàn)用戶初次使用時(shí)的速度和準(zhǔn)確性,以及它相對(duì)于虛擬鍵盤(pán)所帶來(lái)物理反饋舒適性。在輸入了40個(gè)短語(yǔ)后,大多數(shù)體驗(yàn)用戶表示,使用PinchType比使用虛擬鍵盤(pán)更舒適。大多數(shù)體驗(yàn)用戶的平均輸入速度達(dá)到了每分鐘12.54個(gè)單詞,或每分鐘20.07個(gè)單詞,與其他依靠手指輸入的虛擬文本輸入方法相比,PinchType的優(yōu)勢(shì)明顯。
不過(guò),PinchType也存在一些缺點(diǎn),該系統(tǒng)太依賴于精準(zhǔn)的手部跟蹤,通過(guò)頭顯攝像頭的角度來(lái)看,手指被手背遮擋是比較普遍的現(xiàn)象,那么就會(huì)造成用戶文本輸入發(fā)生問(wèn)題。根據(jù)下圖顯示,從該角度上看,如果用戶使用小指或無(wú)名指進(jìn)行敲擊,是無(wú)法鍵入字母的。

由此我們猜測(cè),PinchType原型很可能是根據(jù)帶有外部攝像頭的高端手動(dòng)跟蹤技術(shù)進(jìn)行開(kāi)發(fā)的。值得注意的是,PinchType原型是Facebook Reality Labs研究人員Jacqui Fashimpaur、Kenrick Kin和Matt Longest共同研究的成果,該研究團(tuán)隊(duì)為此還著作了一篇技術(shù)論文——《采用舒適的指尖捏取法實(shí)現(xiàn)在VR/AR環(huán)境中的文本輸入》。
【93913原創(chuàng)內(nèi)容,轉(zhuǎn)載請(qǐng)注明及回鏈】








