新加坡科技設(shè)計(jì)大學(xué)(SUTD)斥資5000萬美元,將重點(diǎn)轉(zhuǎn)向人工智能和設(shè)計(jì)。這些資金將在未來3至5年內(nèi)投入,其中大部分將用于內(nèi)部開發(fā)的新型人工智能平臺(tái)。
新加坡科技設(shè)計(jì)大學(xué)表示,其人工智能平臺(tái)將具有“獨(dú)立思考”的能力,并將接受訓(xùn)練“向其人類團(tuán)隊(duì)伙伴提供建設(shè)性的反饋和建議”。
對(duì)于本科生來說,新生將選修基礎(chǔ)設(shè)計(jì)人工智能的必修課程,同時(shí)還將開設(shè)新課程,包括人工智能輔修課程。
對(duì)于研究生,新加坡科技設(shè)計(jì)大學(xué)將推出設(shè)計(jì)AI碩士課程,參與者將與行業(yè)合作伙伴合作開展項(xiàng)目。該項(xiàng)目將于2025年9月開始招生。
新加坡科技設(shè)計(jì)大學(xué)校長方國光表示,融入人工智能的方法側(cè)重于“人類與人工智能”之間的互動(dòng)。他說,大學(xué)的目標(biāo)是開發(fā)增強(qiáng)和補(bǔ)充人類能力的人工智能。
這種轉(zhuǎn)變對(duì)于讓學(xué)生為未來做好準(zhǔn)備也至關(guān)重要,因?yàn)榕c人工智能的合作將成為創(chuàng)新和解決問題的關(guān)鍵。
方國光表示:“這將是我們更高的夢想,我們將能夠創(chuàng)造一種強(qiáng)大、新的工作方式,讓人類和人工智能相互補(bǔ)充?!?/p>
約有30名學(xué)生成為首批體驗(yàn)設(shè)計(jì)和人工智能的學(xué)生,畢業(yè)后會(huì)獲得設(shè)計(jì)和人工智能(DAI)學(xué)位。
DAI項(xiàng)目于2022年推出,招生人數(shù)穩(wěn)步增加,從2022年的34名學(xué)生增加到2024年的50名學(xué)生。在為期三年半的課程里學(xué)生將學(xué)習(xí)用戶界面和數(shù)據(jù)驅(qū)動(dòng)設(shè)計(jì),以及人工智能技術(shù)和算法,以改進(jìn)設(shè)計(jì)和應(yīng)用。
新加坡科技設(shè)計(jì)大學(xué)表示,首批畢業(yè)生中有90%已經(jīng)在建筑、電信等行業(yè)就業(yè),薪資從4000 美元到6000美元不等。
個(gè)人計(jì)算機(jī)發(fā)展史也是人機(jī)交互變革史
個(gè)人計(jì)算機(jī)面世之初,人機(jī)交互最早的形式是命令行。Apple II在70年代末開創(chuàng)了個(gè)人計(jì)算機(jī)的產(chǎn)業(yè),“IBM兼容機(jī)+DOS操作系統(tǒng)”緊隨其后,逐漸成為個(gè)人計(jì)算機(jī)的主流配置。了解這些名詞,對(duì)現(xiàn)在的00后用戶,無疑是一次科技考古。每次操作計(jì)算機(jī),都要從記憶中抓取命令字符,準(zhǔn)確輸入,才能準(zhǔn)確輸出。
1984年Macintosh問世,圖形用戶界面(GUI)徹底改變了計(jì)算機(jī)信息呈現(xiàn)和交互。鼠標(biāo)來回輕點(diǎn),隨便拖曳窗口,極大地降低了普通人操作難度。Macintosh使用獨(dú)立的macOS系統(tǒng),而微軟研發(fā)的Windows操作系統(tǒng)發(fā)力兼容機(jī)市場,與Macintosh共同推動(dòng)了個(gè)人電腦的大規(guī)模運(yùn)用,也改變了人類的生產(chǎn)和生活方式。一大批影響世界的科技公司應(yīng)運(yùn)而生。包括Adobe、Google、Facebook、Amazon等在內(nèi)的頭部公司,至今還在決定科技的走向。
從PC到移動(dòng),人機(jī)交互又被打開一個(gè)新世界,標(biāo)志性事件就是iPhone重新定義了手機(jī),觸摸成為人機(jī)交互的主流。彼時(shí),iPhone所搭載的iOS仍然只能為蘋果硬件服務(wù),市場上其他的硬件廠商必須選擇搭載其他操作系統(tǒng)來滿足終端用戶的需求。最終,Android成為了適配多元硬件的開放生態(tài)中最大的贏家。
觸摸屏橫掃天下,自然易上手的交互方式催生了其上繁榮的移動(dòng)互聯(lián)網(wǎng)產(chǎn)業(yè)。相比PC互聯(lián)網(wǎng)時(shí)代,有更多的用戶能夠利用電子設(shè)備方便自己的生活。互聯(lián)網(wǎng)公司開始爭奪場景,智能手機(jī)、Pad、汽車中控臺(tái)等等,只要屏幕能抵達(dá)的地方,就有移動(dòng)互聯(lián)網(wǎng)。
人機(jī)交互演進(jìn)的一個(gè)特征或原則是,不斷接近人類現(xiàn)實(shí)世界信息獲取和流動(dòng)的方式,體驗(yàn)更自然,信息呈現(xiàn)的形式也更豐富和立體。圖片就是比文字信息含量更大,視頻又比圖片更豐富。

決定和支持人機(jī)交互方式變化的有多重因素,比如硬件算力、顯示、輸入設(shè)備的不斷迭代,而在軟件層面,操作系統(tǒng)是基石。
對(duì)下,它是硬件接口,確保任何型號(hào)、任何制式的硬件都能順暢地跑起來;對(duì)上,它定義和承接應(yīng)用體系,應(yīng)用選擇什么開發(fā)語言,提供什么服務(wù)能力,甚至長什么樣子,都由操作系統(tǒng)來決定。
操作系統(tǒng)以其獨(dú)特的魅力吸引了國內(nèi)外諸多公司和技術(shù)大拿前仆后繼,不論P(yáng)C還是移動(dòng)時(shí)代,即便面臨諸多挑戰(zhàn),大家從未放棄過開發(fā)操作系統(tǒng)的努力。
XR需要怎樣的操作系統(tǒng)
所有人都想知道,移動(dòng)互聯(lián)網(wǎng)下一代是什么。從硬件設(shè)備、用戶體驗(yàn)到內(nèi)容構(gòu)建,整套體系會(huì)發(fā)生怎樣的變革。
早在2014年,F(xiàn)acebook以20億美元的高價(jià),將年輕的公司Oculus收入麾下。當(dāng)時(shí),扎克伯格就說,VR是繼移動(dòng)互聯(lián)網(wǎng)之后的下一個(gè)計(jì)算平臺(tái)。2021年,Oculus Quest 2出貨量近千萬臺(tái),為彰顯all in Metaverse的決心,F(xiàn)acebook更名為Meta,Oculus Quest系列也更名為Meta Quest。
一個(gè)日漸清晰的共識(shí)是,未來可能性最大的方向是VR/AR。從科技公司發(fā)力的空間計(jì)算、AI等基礎(chǔ)技術(shù),到Facebook(已經(jīng)更名為Meta)、蘋果、騰訊、字節(jié)等巨頭的布局落子,都越來越支持這個(gè)結(jié)論。

相比上一代移動(dòng)互聯(lián)網(wǎng),VR/AR帶來的最本質(zhì)的變化是,用戶能夠在三維空間中與立體、逼真的信息進(jìn)行互動(dòng)。VR(Virtual Reality 虛擬現(xiàn)實(shí))是指,由計(jì)算機(jī)創(chuàng)建、渲染一個(gè)仿真三維空間并呈現(xiàn)信息;AR(Augmented Reality增強(qiáng)現(xiàn)實(shí))是指直接以真實(shí)的三維空間為背景將信息投射其中。
我們理解VR/AR可能會(huì)經(jīng)歷三個(gè)發(fā)展階段:第一階段,特定領(lǐng)域、特定場景的沉浸式VR體驗(yàn),比如游戲、培訓(xùn)等垂直領(lǐng)域;第二階段,就是場景一般化,虛擬和真實(shí)相結(jié)合,也就是目前AR試圖達(dá)到的體驗(yàn);第三階段是能完全創(chuàng)造出一個(gè)真正意義上虛實(shí)結(jié)合的社會(huì)系統(tǒng),就是電影《頭號(hào)玩家》所講的故事。但想達(dá)到第三個(gè)階段,需要更長時(shí)間的沉淀。
第一階段VR已有類似Quest這樣相對(duì)成熟的硬件產(chǎn)品;而第二階段目前AR設(shè)備受限于工程技術(shù)的挑戰(zhàn),更多在B端使用,在C端還沒有真正成熟落地的產(chǎn)品。目前最接近成熟的方案是Video See-Through VR(VST VR),它以VR相對(duì)成熟的硬件為基礎(chǔ),添加能夠捕捉真實(shí)世界的攝像頭,將真實(shí)世界重構(gòu)于用戶眼前,達(dá)到一種類似AR的效果。這種方案也有人稱之為MR(Mixed Reality 混合現(xiàn)實(shí))。VR、AR、MR被統(tǒng)稱為XR。
傳統(tǒng)VR類似于游戲機(jī),而VST VR更像是PC的延伸,AR更像是手機(jī)的延伸。
目前普通人生活中最常用的個(gè)人硬件設(shè)備有便攜和移動(dòng)兩種。手機(jī)是真正的移動(dòng)設(shè)備,走到哪用到哪;便攜則不同,筆記本便攜,但沒法做到隨時(shí)隨地打開,總歸要考慮使用環(huán)境。
相對(duì)應(yīng)的就是,VR頭盔可以便攜,但如果你戴著它走在街上或騎車,可能會(huì)很不適應(yīng),大家看到你也會(huì)感覺很奇怪,所以還是需要在相對(duì)固定的場景使用,將其視為PC的延伸。AR則隨時(shí)隨地可以處理事情,類似于是手機(jī)的延伸。

從操作系統(tǒng)的視角來看,XR會(huì)給應(yīng)用體系帶來三個(gè)層面的變化。
一、交互形式的變化
直觀地來看,XR讓內(nèi)容脫離了平面屏幕,直接以3D的形式呈現(xiàn)在真實(shí)空間中,因此也帶來了如手勢、眼動(dòng)、空間感知等更豐富的空間交互方式。此外,相對(duì)于智能手機(jī),XR在360度范圍內(nèi)都能夠呈現(xiàn)內(nèi)容,為用戶帶來了更大的視場角(FOV),因而用戶自然會(huì)期待能夠同時(shí)操作多個(gè)任務(wù)。對(duì)于VST VR和AR來講,3D多任務(wù)的特性決定了XR系統(tǒng)的交互形式跟手機(jī)時(shí)代有根本性的不同。

二、應(yīng)用模式的變化
相較于智能手機(jī),XR設(shè)備散熱空間有限(眼鏡形態(tài)AR的散熱空間甚至要少于手機(jī))。算力受限于功耗,但為了呈現(xiàn)3D化的內(nèi)容,XR場景卻有更多的算力需求。對(duì)開發(fā)者來說,尤其對(duì)于AR而言,本地算力有限,要想給用戶提供卓越的體驗(yàn),就需要借助多端的算力進(jìn)行處理,手機(jī)、云端、PC甚至車都可能參與到計(jì)算當(dāng)中。這更對(duì)操作系統(tǒng)的多端算力分配和協(xié)同提出了要求。而從用戶的視角來看,多任務(wù)場景下,原生于Android的超級(jí)APP體驗(yàn)下降;由于能夠和真實(shí)空間進(jìn)行結(jié)合,用戶更希望直接得到基于場景的服務(wù)??梢韵胂蟮囊环N體驗(yàn)是,無需下載安裝應(yīng)用,就能在需要的時(shí)候及時(shí)獲得服務(wù),有些類似于 “3D小程序”。
三、內(nèi)容分發(fā)機(jī)制的變化
相比PC和智能手機(jī),XR設(shè)備能夠采集到更多的用戶信息和環(huán)境信息。結(jié)合應(yīng)用模式的變化,下一代的智能終端能夠產(chǎn)生更加豐富的內(nèi)容分發(fā)機(jī)制,像智能助手一樣根據(jù)環(huán)境感知實(shí)時(shí)進(jìn)行信息推送。達(dá)到這樣的體驗(yàn),需要行業(yè)上下游一起合作。目前我們的工作主要在操作系統(tǒng)層面,圍繞多元感知的特性設(shè)計(jì)了系統(tǒng)底層架構(gòu)以及交互體系,能夠高效、方便地接入各類感知算法。
VST VR和AR作為基于虛實(shí)結(jié)合的通用場景智能終端,帶來了交互形式、應(yīng)用模式和內(nèi)容分發(fā)三個(gè)層面的根本變化,這些特性都對(duì)操作系統(tǒng)提出新的要求。

在VST VR和AR的背景下,現(xiàn)有的Android系統(tǒng)有很明顯的短板。
一個(gè)最直觀的問題,XR應(yīng)用應(yīng)該能夠以3D形態(tài)呈現(xiàn)在空間中,而且能夠支持手勢等空間交互方式。而在Android本身基于2D觸控屏幕設(shè)計(jì),從系統(tǒng)側(cè)看來,一個(gè)應(yīng)用就是一個(gè)全屏的框,只能通過框內(nèi)的點(diǎn)擊、滑動(dòng)進(jìn)行交互。
此外,XR需要支持多任務(wù)。在Android現(xiàn)有的APK體系里,應(yīng)用生命周期設(shè)計(jì)之初是針對(duì)于單任務(wù)的場景,雖然Android底層的Linux本身支持多進(jìn)程,但在Android的設(shè)計(jì)中主要只有一個(gè)前臺(tái)應(yīng)用和用戶交互,這在多任務(wù)情形下會(huì)帶來一系列的問題。例如Android的“殺后臺(tái)”問題,用戶應(yīng)用被自動(dòng)殺掉,這在多任務(wù)體驗(yàn)中是不能接受的。
同樣是基于2D單任務(wù)的設(shè)計(jì)理念,Android對(duì)資源的占用并不節(jié)制,Android系統(tǒng)內(nèi)部有部分代碼用Java實(shí)現(xiàn),這會(huì)帶來不小的額外開銷。在應(yīng)用側(cè),同樣的應(yīng)用Android版消耗的內(nèi)存和PC版可以有3倍的差距。這對(duì)于資源相對(duì)緊缺又需要3D多任務(wù)體驗(yàn)的XR設(shè)備來講,是一個(gè)巨大的問題。
因此XR需要一個(gè)全新的操作系統(tǒng)。
新浪潮中的虹宇
相較于智能手機(jī)時(shí)代的轉(zhuǎn)折點(diǎn),在當(dāng)前中國高速發(fā)展,中美激烈競爭的大背景下,中國更有需要,也更有機(jī)會(huì)做出真正意義上的XR原生操作系統(tǒng)。
我們從2016年起開始研發(fā)XR操作系統(tǒng)。在2019年之前,行業(yè)內(nèi)的XR硬件廠商主要是創(chuàng)業(yè)企業(yè),我們和很多當(dāng)時(shí)的廠商進(jìn)行過合作,2019年開始,伴隨著5G的浪潮,國內(nèi)一線硬件大廠把更多的注意力放到了XR,我們也很有幸地為多家一線廠商提供了底層操作系統(tǒng)。迄今為止我們適配過的XR硬件有大幾十款,我們也希望為行業(yè)合作伙伴提供更多的幫助。
從2016年虹宇創(chuàng)立之初起,我們一直在探索、實(shí)踐下一代人機(jī)交互形態(tài)下的應(yīng)用該如何定義,需要什么樣的系統(tǒng)來支撐。如今,我們愈加能夠清晰地感受到消費(fèi)電子與互聯(lián)網(wǎng)變革的來臨。在這樣的浪潮中,作為一支中國力量,我們希望對(duì)行業(yè)進(jìn)步有所助力,亦能乘浪而行。
來源:虹宇科技IrisView
]]>
據(jù)MacRumors報(bào)道,知名蘋果分析師郭明錤再度爆料傳聞已久的蘋果AR/VR頭顯將配置多個(gè)高度敏感3D傳感模塊,并支持創(chuàng)新手勢及人機(jī)交互。
據(jù)預(yù)測,基于蘋果AR/VR頭顯的結(jié)構(gòu)光(structured light)不僅可以檢測用戶或其他人的手和用戶眼前物體的位置變化,還可以檢測手部的動(dòng)態(tài)細(xì)節(jié)變化(例如iPhone Face ID /結(jié)構(gòu)光/Animoji可以檢測用戶的動(dòng)態(tài)表情變化)、捕獲手部動(dòng)作的細(xì)節(jié)、并提供更直觀、生動(dòng)的人機(jī)界面(例如,檢測用戶的手從握緊拳頭到松開手指以及手中的虛擬氣球飛走的過程)。
為此郭明錤描述了蘋果AR/VR頭顯檢測手勢及動(dòng)作的方式,以及用戶握緊、松開拳頭及虛擬氣球放飛的全過程。
為了實(shí)現(xiàn)這一令人印象深刻的壯舉,蘋果AR/VR頭顯預(yù)計(jì)將采用四組3D傳感器,這些傳感器的質(zhì)量和規(guī)格都比當(dāng)前的iPhone更高。另外,郭明錤認(rèn)為人機(jī)交互將是該頭顯成功的關(guān)鍵,據(jù)郭明錤介紹,人機(jī)用戶UI功能將包括手勢控制、物體檢測、眼球追蹤、虹膜識(shí)別、語音控制、皮膚檢測、表情檢測及空間檢測。
值得一提的是,根據(jù)今年早些時(shí)候Patently Apple報(bào)道的蘋果專利申請(qǐng),其中詳細(xì)介紹了相同的概念。
專利表明,基于微手勢的不同動(dòng)作、位置及各種運(yùn)動(dòng)參數(shù)來確定三維環(huán)境中執(zhí)行的操作,并通過攝像頭捕獲微手勢與三維環(huán)境交互,從而使用戶在物理環(huán)境中自由移動(dòng),不受物理輸入設(shè)備的束縛,進(jìn)而讓用戶更自然、高效探索三維環(huán)境。
【93913原創(chuàng)內(nèi)容,轉(zhuǎn)載請(qǐng)注明及回鏈】





【913VR原創(chuàng)內(nèi)容,轉(zhuǎn)載請(qǐng)注明及回鏈】






這款游戲一開始將會(huì)以黑白畫面的游戲展現(xiàn)在玩家眼前,之后隨著游戲進(jìn)度的進(jìn)展,畫面顏色會(huì)不斷升級(jí),最后呈現(xiàn)出逼真艷麗的游戲畫面。


但這個(gè)游戲最大的特點(diǎn)在于它是一個(gè)可互動(dòng)的游戲,與以往固定故事情節(jié)的游戲不同。玩家使用VR設(shè)備進(jìn)入游戲中,隨意與游戲NPC進(jìn)行互動(dòng),玩家與NPC互動(dòng)的情況會(huì)直接讓游戲有不一樣的發(fā)展。
]]>