Ultraleap在AWE 2024上演示了一種全天候手勢識別方案，只需消耗很少的電量即可保持全天候待機。

將事件傳感器3D打印外殼以電纜連接至Raspberry Pi Zero和電池組，通過直接平臺集成，基于事件傳感器即可追蹤手勢。Ultraleap XR副總裁Matt Tullis解釋，這個方案旨在“使AR眼鏡、智能眼鏡和智能鏡架能全天佩戴進行手勢輸入?！?/p>

今年5月，Ultraleap宣布對其業(yè)界領(lǐng)先的手部追蹤技術(shù)Hyperion進行升級，彼時提到了高功率和低功率模式。

同時，越來越多的合作伙伴希望將手部追蹤作為眼鏡和頭顯的內(nèi)置解決方案，然而Ultraleap在與試圖開發(fā)專屬解決方案的頭顯制造商合作的過程中遇到了挑戰(zhàn)?，F(xiàn)在，通過Hyperion、Leap Motion 2手柄和OpenXR支持，Ultraleap已準備好為新一代頭顯提供手勢輸入和手部追蹤功能。

Ultraleap是一家手部追蹤和空中觸感XR技術(shù)供應(yīng)商，本周發(fā)布了Ultraleap Hyperion，這是該公司手部追蹤軟件Gemini的最新迭代。

Ultraleap Hyperion是一個靈活的平臺，使用戶能更好控制手部追蹤交互，從而調(diào)整不同的參數(shù)并在模型之間切換以適應(yīng)應(yīng)用。Ultraleap表示，該平臺“展示了手部追蹤的性能、功能和靈活性方面的重大變化”。據(jù)該公司稱，與市場上其他“一刀切”的追蹤解決方案不同，Ultraleap Hyperion提供了多種追蹤模型和模式的組合，以提供可靠、靈活的解決方案，從而滿足獨特的業(yè)務(wù)需求。

Ultraleap Hyperion的主要功能包括：

微手勢交互：Hyperion可追蹤精確到毫米的小手指運動，從而輕松實現(xiàn)微妙的手勢。

穩(wěn)健性物體追蹤：當(dāng)用戶手中拿著物理物體或道具時，Hyperion可執(zhí)行穩(wěn)健的手部追蹤性，這非常適合混合現(xiàn)實應(yīng)用。

物體追蹤：Hyperion支持該公司Leap Motion Controller 2相機追蹤AR標記（也稱為基準標記），從而追蹤任何物體。

性能切換：Hyperion增加了新模式，包括低功耗模式和高性能模式，低功耗模式可在降低功耗的情況下運行手部追蹤功能，而高性能模式可在計算機處理不受限制的情況下，以低延遲提供準確的手指映射。

擴展追蹤功能：Hyperion可直接訪問Leap Motion Controller 2立體紅外相機硬件，將其用途擴展到其他計算機視覺任務(wù)，例如深度感測、3D掃描和物體追蹤。

Ultraleap指出，Hyperion在設(shè)計時考慮了頭顯制造商和應(yīng)用開發(fā)商的需求，其附加功能可以直接在平臺內(nèi)選擇實現(xiàn)，無需計算機視覺專家或軟件工程師。

該公司補充，其Leap Motion Controller 2現(xiàn)在還捆綁了商業(yè)許可證，可以自動訪問Hyperion 的功能及使用以開發(fā)、采用和銷售新應(yīng)用。

此外，Ultraleap表示，通過Hyperion，可針對其他特定用例進一步訓(xùn)練手部追蹤模型，以適應(yīng)其他特定用例和定制模型，從而加快客戶的上市速度。

手部追蹤和空中觸感XR技術(shù)供應(yīng)商Ultraleap宣布與VR頭顯制造商歌爾合作，為市場推出具有Ultraleap預(yù)集成手部追蹤功能的下一代VR和MR頭顯參考設(shè)計。

現(xiàn)已推出的新參考設(shè)計延續(xù)了高通宣布的VR和MR參考設(shè)計HMD（其中還包括與歌爾的合作），將歌爾頭顯設(shè)計和制造力與對Gemini（Ultraleap手部追蹤平臺）的支持相結(jié)合。 Ultraleap稱，新的參考設(shè)計將使OEM廠商能更輕松、更快速為客戶提供手勢追蹤交互。

Ultraleap計算機視覺和機器學(xué)習(xí)模型首次基于SLAM攝像機運行手部跟蹤，并使用LED照明進行控制器跟蹤。Ultraleap表示，這將有助于大幅降低OEM和頭顯制造商集成手部追蹤的成本。

在當(dāng)今新型XR頭顯中，手部追蹤已成為一項強制性功能，因為許多UX設(shè)計師認為自然手勢對于用戶沉浸式體驗而言是一種卓越的交互方案。

Ultraleap首席執(zhí)行官Tom Carter表示：“我們相信自然的手部交互對于VR來說就像觸感對于智能手機，這使得Ultraleap手部追蹤直接集成到現(xiàn)有的攝像頭傳感器上，讓客戶可以輕松設(shè)計和推出新的頭顯產(chǎn)品。此次合作意味著希望推出新VR頭顯產(chǎn)品的公司可輕松開發(fā)一款采用全球領(lǐng)先頭顯制造商提供的全球最佳手部追蹤功能的頭顯，這是一個無與倫比的組合?！?/p>

Ultraleap手部追蹤技術(shù)已在人工智能、機器學(xué)習(xí)和計算機視覺領(lǐng)域開發(fā)了十多年。這項技術(shù)并不僅限于XR，并且在汽車、數(shù)字標牌、工業(yè)自動化、消費電子和LBE娛樂等行業(yè)具有廣泛的應(yīng)用，以增強人與技術(shù)之間的自然互動。

Ultraleap新技術(shù)將使數(shù)字內(nèi)容能在空中被感知，而全新硬件更有助于該技術(shù)取得突破。

Ultraleap研發(fā)了超聲波換能器，從而實現(xiàn)無需設(shè)備即能獲得觸覺體驗，用戶可以感知空中虛擬物體，并通過手勢與之互動。目前，Ultraleap正在升級所需硬件，以使其更高效，更適合大規(guī)模生產(chǎn)。

Ultraleap駕駛艙技術(shù)：手勢控制代替觸摸屏和按鈕

Ultraleap于2019年由Leap Motion和Ultrahaptics合并組成，這兩家公司專門從事手部追蹤和XR觸覺技術(shù)，Leap Motion主要專注于手部和手指追蹤，而Ultrahaptics則推出了“ultrasonic carpets”，可使空氣中虛擬物體的輪廓清晰可見。

兩家公司合并后，Ultraleap以先進的XR接口為發(fā)展方向，并將手指跟蹤和空中觸覺技術(shù)結(jié)合，同時，除了XR行業(yè)，Ultraleap近幾年也專注于汽車領(lǐng)域，希望用“虛擬觸摸技術(shù)”取代駕駛艙內(nèi)的觸摸屏和物理控制。

手勢控制本身并不是什么新鮮事，谷歌在2019年通過Pixel 4智能手機發(fā)布了Soli雷達控制。例如，通過手指手勢，媒體播放器可以在用戶沒有觸摸顯示器的情況下進行播放。

如今，Ultraleap的虛擬觸摸技術(shù)更進一步，將基于超聲波的觸覺投射到空氣中。與Soli相比，基于虛擬觸摸技術(shù)的用戶可以感受空中的虛擬物體，并通過轉(zhuǎn)動或滑動手勢操作在駕駛艙內(nèi)進行調(diào)整。

空中觸覺技術(shù)將朝小型化、低成本方向發(fā)展

Ultraleap首席執(zhí)行官Tom Carter在Twitter解釋了這項技術(shù)，“超聲波換能器就像小型揚聲器，將超聲波投射到你的手上以產(chǎn)生觸覺效果。” 而開發(fā)換能器最困難的部分是將電能轉(zhuǎn)化為聲音。

“對于在空氣而不是水中（聲納）或人體組織（醫(yī)療）中運行的換能器而言，這一挑戰(zhàn)更加困難，要將能量轉(zhuǎn)換為目標介質(zhì)，你需要使用匹配層。”Tom Carter指出。

Tom Carter稱，Ultraleap換能器厚度僅為波長的一小部分，且不會犧牲性能，這種設(shè)計也大大簡化，使Ultraleap客戶制造和安裝成本更低。

以更高效的硬件擺脫利基市場

因此，新的超聲波換能器比以前的型號更小、更便宜、更容易制造，同時保持相同的性能，Ultraleap預(yù)計這將帶來更高效的制造流程，并首次實現(xiàn)真正可擴展的空中觸覺生產(chǎn)。

目前，虛擬觸摸技術(shù)有望在汽車行業(yè)獲得認可，因為手勢控制的優(yōu)勢是顯而易見的：駕駛員無需在觸摸屏上搜索按鈕或控件，就能時刻關(guān)注道路。

元宇宙的成功取決于與虛擬對象的交互

如上所述，Ultraleap的根基在于為元宇宙奠定基礎(chǔ)的技術(shù)，盡管該公司目前主要活躍于其他行業(yè)，但其認為空中觸覺是混合現(xiàn)實應(yīng)用交互的一項重要創(chuàng)新。

該公司表示，“元宇宙”被用以描述一個數(shù)字內(nèi)容以3D形式存在并與物理世界融合的世界是恰當(dāng)?shù)?，元宇宙的成功很大程度上取決于人們?nèi)绾闻c虛擬對象進行交互，在這其中手部追蹤和空中觸覺技術(shù)將起著至關(guān)重要的作用。

來源：Mixed

據(jù)Auganix報道，英國手部追蹤技術(shù)廠商Ultraleap發(fā)布了一款支持Pico Neo 3 Pro及Pico Neo 3 Pro Eye頭顯的手部追蹤配件，以為企業(yè)級用戶帶來逼真的自然交互解決方案。

新配件將與Pico Neo 3 Pro或Pro Eye捆綁銷售，Ultraleap手部追蹤配件現(xiàn)在可供開發(fā)者、評估人員和概念驗證人員使用，可擴展完整捆綁包將于今年夏季推出。

兼容Pico Neo 3 Pro的Ultraleap手部追蹤配件由定制安裝的Ultraleap Stereo IR 170手部追蹤相機組成，Ultraleap最新一代手部追蹤軟件Gemini也將預(yù)裝于所選頭顯。Ultraleap稱，早期捆綁包支持Unity和Unreal平臺，而可擴展完整捆綁包將兼容更多功能工具。

Ultraleap指出，采用手部追蹤以替代或補充手柄控制將有助于擴大企業(yè)級市場規(guī)模，例如可為空乘人員甚至外科醫(yī)生提供基于手勢的VR培訓(xùn)；手部追蹤還可用于新員工培訓(xùn)以及LBE VR新手培訓(xùn)。

Ultraleap XR副總裁Matt Tullis表示：“VR培訓(xùn)正處于主流采用的風(fēng)口浪尖，我們堅信手部追蹤在推廣VR培訓(xùn)方面將能發(fā)揮重要作用，與Pico合作意味著更多開發(fā)者和企業(yè)將測試、試點和改進手部追蹤相關(guān)應(yīng)用程序，以釋放VR真正的能量，并致力于在未來進行大規(guī)模部署。”

Ultraleap“Pico Neo 3 Pro/Pro Eye手部追蹤配件”主要特點包括：

跟蹤范圍和視場角：理想深度10 cm（4”）到75cm（29.5”）之間，最大可達 1 m（39”）；視場角，170×170°（最小160×160°）；

攝像頭：立體紅外拍攝90幀/秒；

工作波長：850nm，通過位于攝像頭兩側(cè)的兩個紅外LED提供照明。

Ultraleap補充，該手部跟蹤可以在各種環(huán)境條件下運行，能夠跟蹤不同大小手型，并支持用戶雙手交互。

根據(jù)auganix報道，手部追蹤和空中觸覺等XR技術(shù)提供商Ultraleap今天宣布已完成 6000 萬英鎊（約8200 萬美元）的 D 輪融資。Ultraleap表示，這筆資金將使該公司能夠為現(xiàn)有和下一代計算平臺進一步開發(fā)和商業(yè)化自有技術(shù)。

Ultraleap現(xiàn)有股東Mayfair Equity Partners和IP Group plc均參與了本輪融資，此外，Ultraleap還引入了包括騰訊、招銀國際、British Patient Capital在內(nèi)的新投資方。

Ultraleap首席執(zhí)行官Tom Carter表示：“元宇宙概念對Ultraleap來說并不新鮮。消除物理世界和數(shù)字世界之間的界限一直是我們的使命。越來越多的人了解了通過數(shù)字元素增強物理世界的強大效果，加速了元宇宙這一概念的興起。”

“對于Ultraleap來說，這個新時代并不僅限于VR頭顯。就像互聯(lián)網(wǎng)一樣，元宇宙將在我們生活各個方面與之互動的現(xiàn)實，無論我們在家、在辦公室、在汽車上還是在公共場合。我們此次D輪融資的目標是讓元宇宙加速過渡到更主流的交互方式——你的手。因為任何人對于元宇宙的愿景中都不會出現(xiàn)物理控制器、按鈕或觸摸屏?！?/p>

據(jù)Ultraleap稱，其最近發(fā)布了第五代手部追蹤平臺Gemini，意味著其手部追蹤軟件現(xiàn)在可以跨多個平臺、相機系統(tǒng)和第三方硬件使用。高通驍龍XR2芯片組和 Varjo的VR-3和XR-3頭顯均已經(jīng)內(nèi)置了Gemini。

Ultraleap表示，最新一輪的融資完成后，會繼續(xù)將Gemini引入不同的操作系統(tǒng)，并增加對工具的投入，使開發(fā)人員能夠構(gòu)建更多以手部作為交互方式的應(yīng)用程序。Ultraleap還將繼續(xù)加大研發(fā)投入，進一步開發(fā)基于機器學(xué)習(xí)的手部追蹤技術(shù)。此外，D輪融資還將使Ultraleap 能夠在其汽車觸覺平臺上更快地研發(fā)與迭代，推動其商用空中觸覺解決方案的發(fā)展。

Carter 補充道：“此次融資不僅為我們提供了更多的資源來擴大公司的規(guī)模，我們的投資者也為我們提供了對市場的洞察和進入目標市場的途徑。正是因為我們在關(guān)鍵垂直領(lǐng)域看到了客戶需求，才選擇了這樣一個時機進行新一輪的融資?！?/p>

「93913原創(chuàng)內(nèi)容，轉(zhuǎn)載請注明出處」

據(jù)VRFocus報道，今年早些時候，英國手部追蹤技術(shù)公司Ultraleap公布了其第五代手部追蹤軟件“Gemini”預(yù)覽版，該軟件提供了包括雙手交互在內(nèi)的一系列改進，如今，Ultraleap正式推出了這款完全兼容Windows系統(tǒng)的全新手部追蹤軟件。

Gemini是Ultraleap三年來發(fā)布的首款正式版本軟件，其兼容Varjo頭顯并集成至高通Snapdragon XR2 5G參考設(shè)計，具有完全重建的手部追蹤引擎，并優(yōu)化了雙手追蹤細節(jié)（遮擋會削弱傳感器區(qū)分兩只手的感知能力）。

另一個重要的改進是加快檢測手部的速度，親歷LBE VR線下場所的用戶可能會注意到當(dāng)手部離開視線時，手部追蹤會產(chǎn)生幾秒延遲，而現(xiàn)在通過Gemini則能糾正這一問題。

Ultraleap還指出Gemini“提高了復(fù)雜環(huán)境條件下的穩(wěn)定性”，因此，即使光照突然發(fā)生變化，用戶手部也能被及時追蹤。

Ultraleap空間計算產(chǎn)品總監(jiān)Matt Tullis表示：“Ultraleap Gemini將直觀和無縫的XR體驗帶入生活，從而使人與技術(shù)之間的自然交互成為可能，憑借10年持續(xù)創(chuàng)新和支持超過35萬名開發(fā)人員的經(jīng)驗，我們改進了手部追蹤，以提供最好、最靈活的手部追蹤軟件。我們期待與軟件和硬件合作伙伴合作，將手部追蹤技術(shù)推向大眾?！?/p>

目前Ultraleap Gemini正式版已可下載，并支持與Leap Motion Controller和Stereo IR 170相機模塊配合使用。