Frame AI智能眼鏡改進(jìn),優(yōu)化多模態(tài)生成式人工智能系統(tǒng)、引入圖像和矢量引擎

?? 由 文心大模型 生成的文章摘要

初創(chuàng)公司Brilliant Labs宣布了旗下Frame AI智能眼鏡多項(xiàng)新功能和強(qiáng)大工具,主要更新包括高級文本轉(zhuǎn)語音功能、縮短流式響應(yīng)延遲以及引入內(nèi)部圖像和矢量引擎。

開發(fā)者可基于Frame AI助手Noa進(jìn)行更直觀的交互,從而創(chuàng)建更具創(chuàng)意和創(chuàng)新性的AI應(yīng)用。

改進(jìn)功能包括如下:

Noa文本轉(zhuǎn)語音功能:用戶可直接從Frame中聽到反饋內(nèi)容。此功能提供了一種直觀、免提的方式,可與Noa AI助手進(jìn)行交流。

圖像和矢量引擎:此工具支持開發(fā)者創(chuàng)建和交付復(fù)雜的圖像和矢量內(nèi)容,這些內(nèi)容可直接顯示在用戶眼前,這為交互式內(nèi)容開辟了新的可能性。

連接服務(wù):用戶可通過Perplexity和OpenAI訂閱在Frame上不受限制使用,充分發(fā)揮語言模型的潛力。

Brilliant Labs推出了世界上第一款內(nèi)置多模式AI助手的智能眼鏡,這款重量39克的眼鏡框配備了在線AI助手Noa。

多模態(tài)生成式人工智能系統(tǒng)可同時(shí)運(yùn)行GPT4、Stability AI和Whisper AI模型,通過分析用戶與人工智能助手之間的互動(dòng),Noa可進(jìn)化并發(fā)展出獨(dú)特的個(gè)性。

Brilliant Labs的目標(biāo)是基于Frame將生成式人工智能從電腦帶到現(xiàn)實(shí)世界。該系統(tǒng)無需輸入問題,而是基于來自環(huán)境的輸入,Noa可處理攝像頭捕獲的內(nèi)容、識(shí)別語音和聲音、實(shí)時(shí)翻譯或總結(jié)整本書的內(nèi)容。

Frame AI智能眼鏡還支持掃描衣服或其他物品以比較商品價(jià)格,但不具備Apple Vision Pro或Meta Quest 3等復(fù)雜的混合現(xiàn)實(shí)功能,其框架內(nèi)置的MicroOLED可在20度視野范圍內(nèi)顯示圖像和文本內(nèi)容。

「93913原創(chuàng)內(nèi)容,轉(zhuǎn)載請注明出處」