英偉達(dá)推出“Neuralangelo”新型AI模型,支持2D視頻內(nèi)容轉(zhuǎn)換為詳細(xì)3D結(jié)構(gòu)

?? 由 文心大模型 生成的文章摘要

“Neuralangelo”是英偉達(dá)研究院(NVIDIA Research)開(kāi)發(fā)的新型人工智能模型,該模型基于神經(jīng)網(wǎng)絡(luò)以將2D視頻內(nèi)容轉(zhuǎn)換為詳細(xì)的3D結(jié)構(gòu)——可生成建筑物、雕塑和其他現(xiàn)實(shí)世界物體的逼真虛擬復(fù)制品。

如同生成的栩栩如生米開(kāi)朗基羅3D雕塑,Neuralangelo可實(shí)現(xiàn)具有復(fù)雜細(xì)節(jié)和紋理的3D結(jié)構(gòu)。然后,創(chuàng)意專業(yè)人士可以將這些3D內(nèi)容導(dǎo)入設(shè)計(jì)應(yīng)用,以進(jìn)一步編輯并應(yīng)用于藝術(shù)、游戲開(kāi)發(fā)、機(jī)器人和工業(yè)數(shù)字孿生。

Neuralangelo將復(fù)雜材料(包括屋頂瓦片、玻璃板和光滑大理石)的紋理從2D視頻格式轉(zhuǎn)換為3D資產(chǎn)的解決方案大大超過(guò)了以前的方法。這使得高保真度3D重建更加容易,開(kāi)發(fā)者和創(chuàng)意專業(yè)人士將能基于智能手機(jī)攝像頭為項(xiàng)目快速創(chuàng)建可用的虛擬對(duì)象。

“Neuralangelo 3D內(nèi)容重建功能將為創(chuàng)作者帶來(lái)巨大好處,并幫助創(chuàng)作者在數(shù)字世界構(gòu)建真實(shí)世界。該工具最終將使開(kāi)發(fā)者能夠?qū)⒃敿?xì)的對(duì)象——無(wú)論是小型雕像還是大型建筑物——導(dǎo)入游戲或工業(yè)數(shù)字孿生虛擬環(huán)境?!?/p>

Neuralangelo采用即時(shí)神經(jīng)圖形基元(構(gòu)建NVIDIA Instant NeRF的技術(shù))以捕捉更精細(xì)細(xì)節(jié)。

基于從不同角度拍攝的物體或場(chǎng)景2D視頻,Neuralangelo從中選擇不同視點(diǎn)的幀——就像藝術(shù)家從多個(gè)側(cè)面考慮一個(gè)物體不同深度、大小和形狀。

一旦確定了每一幀的相機(jī)位置,Neuralangelo AI就會(huì)創(chuàng)建場(chǎng)景的粗略3D表示,如同雕刻家開(kāi)始鑿出物體對(duì)象的形狀一樣。

之后,Neuralangelo會(huì)優(yōu)化渲染以銳化細(xì)節(jié),最終結(jié)果是生成的3D內(nèi)容可應(yīng)用于虛擬現(xiàn)實(shí)應(yīng)用、數(shù)字孿生或機(jī)器人開(kāi)發(fā)的3D對(duì)象或大型場(chǎng)景。

來(lái)源:英偉達(dá)

「93913原創(chuàng)內(nèi)容,轉(zhuǎn)載請(qǐng)注明出處」