2024年5月10日，我們受邀來到魔琺科技在上海嘉定區(qū)的工作室，參加了其舉辦的“2024魔琺科技開放日”活動(dòng)。本次活動(dòng)以“AIGC+3D虛擬人”為主題，為前來的嘉賓展示了一系列與3D虛擬人及AIGC相關(guān)的“黑科技”。
在工作人員的講解下，我們詳細(xì)了解了魔琺科技在3D虛擬人領(lǐng)域的發(fā)展歷程。公司成立于2018年初，在之后6年時(shí)間里持續(xù)投入上億元資金用于3D虛擬人的技術(shù)及美術(shù)研發(fā)：
2018年8月，在Chinajoy發(fā)布全棧式自研端到端AI表演動(dòng)畫技術(shù)；
2019年11月，推出中國首個(gè)超寫實(shí)3D虛擬人Ada，打造首個(gè)商業(yè)化落地的金融行業(yè)虛擬人；
2020年5月，公司原創(chuàng)的中國首位超寫實(shí)國風(fēng)虛擬偶像“翎__Ling”正式出道，成為虛擬人1.0時(shí)代的標(biāo)桿；
2023年2月，公司原創(chuàng)的首個(gè)國風(fēng)虛擬武俠IP“令顏歡”正式出道，首播刷新抖音虛擬直播數(shù)據(jù)記錄，成為虛擬人2.0時(shí)代的標(biāo)桿；
2023年5月，公司原創(chuàng)的首個(gè)超寫實(shí)3D虛擬人智能體“鏡JING”正式出道，引領(lǐng)行業(yè)正式進(jìn)入虛擬人3.0時(shí)代。
2023年，以ChatGPT為代表的AI大模型及AIGC技術(shù)風(fēng)靡全球。魔琺科技在8月召開發(fā)布會(huì)，正式發(fā)布3款3D虛擬人AIGC終端產(chǎn)品：“魔琺有言”虛擬人視頻AIGC平臺(tái)、“魔琺有光”虛擬人直播AIGC平臺(tái)以及“魔琺有靈”虛擬人服務(wù)AIGC平臺(tái)。這三款產(chǎn)品從各自的方向上解決了3D虛擬人在制作、運(yùn)營以及服務(wù)中的一些痛點(diǎn)。今年3月，有言AIGC平臺(tái)正式上線，并對公眾開放。
3D虛擬人是如何通過AIGC創(chuàng)作并運(yùn)營的？在本次開放日活動(dòng)的體驗(yàn)環(huán)節(jié)，工作人員帶領(lǐng)我們觀摩了魔琺科技打造的3D虛擬人全流程AIGC的智能工業(yè)化產(chǎn)線——3D角色建模、綁定、3D動(dòng)畫、聲音、3D場景、鏡頭、腳本、渲染等等。
在角色建模環(huán)節(jié)的展示中，我們親歷了真人形象通過專業(yè)拍攝快速形成3D模型的流程。同時(shí)，我們了解到，以往超寫實(shí)3D虛擬人的制作流程需要3-5個(gè)月的工作量，每位3D虛擬人的制作成本在30-60萬左右。與之相對應(yīng)，魔琺科技通過2年的技術(shù)積累，構(gòu)建了工業(yè)化產(chǎn)線，為有言AIGC平臺(tái)提供了數(shù)千級別的多族裔、多風(fēng)格的3D超寫實(shí)虛擬人庫。
目前用戶在有言平臺(tái)可以0成本使用基礎(chǔ)庫的內(nèi)容。未來三個(gè)月，魔琺科技還會(huì)陸續(xù)開放用戶自定義裝扮、自由捏臉以及圖生3D虛擬人的功能。
在聲音及文本生成環(huán)節(jié)的展示中，我們體會(huì)到了“聲音克隆”技術(shù)的奇妙：只需錄制10-20秒音頻，再輸入相關(guān)文本，用戶就可以一鍵生成高自然度、高近似度的語音效果。同時(shí)，有言AIGC平臺(tái)也支持30+的高質(zhì)量音色庫供用戶選擇，包括直播帶貨、產(chǎn)品講解、知識(shí)分享、新聞播報(bào)等多種應(yīng)用場景。前面提到的聲音克隆技術(shù)預(yù)計(jì)將在今年7月向用戶開放。
在文成文方面，有言AIGC平臺(tái)包含場景模式（支持不同垂類場景腳本生成）和自由模式（根據(jù)創(chuàng)作需求自由生成腳本）。工作人員表示：“創(chuàng)作者僅需提供一個(gè)idea，我們就能夠通過AI的能力幫助創(chuàng)作者快速獲得高質(zhì)量的腳本，用于視頻創(chuàng)作?！?/p>
在動(dòng)畫生成技術(shù)環(huán)節(jié)的展示中，一位媒體老師親自下場，與動(dòng)捕演員一起完成了3D虛擬人的部分動(dòng)作數(shù)據(jù)的采集?；?年幾百小時(shí)的高質(zhì)量三維動(dòng)畫數(shù)據(jù)的積累，魔琺科技AIGC三維動(dòng)畫生成的結(jié)果已經(jīng)非常接近真人表現(xiàn)。用戶只需提供文本腳本，有言AIGC平臺(tái)就能夠自動(dòng)生成匹配語音的動(dòng)畫，極大提升了用戶的創(chuàng)作效率，降低了創(chuàng)作門檻，而且用戶可以對生成內(nèi)容進(jìn)行編輯和控制，擁有一定的創(chuàng)作自由度。除此之外，用戶還可以選擇多種風(fēng)格的全套動(dòng)畫，滿足不同應(yīng)用場景的需求。
在渲染環(huán)節(jié)與3D場景的展示中，結(jié)合綠幕環(huán)境，各位嘉賓分別與由演員控制的3D虛擬人在虛擬演播室中進(jìn)行互動(dòng)與合影。魔琺科技自研的實(shí)時(shí)渲染方案可以在幾分鐘之內(nèi)生成高質(zhì)量的3D視頻，讓所有有言AIGC平臺(tái)的用戶都能獲得低門檻、低成本、高效率的制作體驗(yàn)。目前有言平臺(tái)包含500多個(gè)不同種類及風(fēng)格的3D場景庫，包括大舞臺(tái)、小舞臺(tái)、演播室、室內(nèi)空間、戶外空間等等，用戶可以免費(fèi)進(jìn)行選擇使用。未來魔琺科技還將逐步開放場景編輯功能，允許用戶對現(xiàn)有場景進(jìn)行個(gè)性化定制，更快實(shí)現(xiàn)差異化的創(chuàng)意設(shè)計(jì)。
在體驗(yàn)環(huán)節(jié)的結(jié)尾，我們還體驗(yàn)了魔琺科技為Vision Pro準(zhǔn)備的3D高清視頻內(nèi)容。在Vision Pro高分辨率的顯示性能配合下，這些高清內(nèi)容帶給了我們相當(dāng)震撼的3D沉浸感。近年來，伴隨著XR設(shè)備的發(fā)展，消費(fèi)者、市場對于高質(zhì)量3D內(nèi)容的需求正在以指數(shù)級別增長，3D內(nèi)容領(lǐng)域特別是高質(zhì)量3D內(nèi)容賽道存在巨大的潛力及發(fā)展空間，而這樣的趨勢對于魔琺科技而言，正好是大展拳腳的廣闊舞臺(tái)。
在開放日活動(dòng)的最后，我們對魔琺科技創(chuàng)始人兼CEO柴金祥教授進(jìn)行了采訪。他告訴我們，經(jīng)過多年的耕耘，目前魔琺科技已經(jīng)擁有60多家政府與商業(yè)領(lǐng)域的頭部客戶，覆蓋十幾個(gè)行業(yè)及細(xì)分賽道，而公司打造的有言、有元、有靈這三個(gè)AIGC終端產(chǎn)品能夠同時(shí)服務(wù)企業(yè)與個(gè)人用戶，對于C端用戶而言更是強(qiáng)有力的生產(chǎn)力工具。魔琺科技將通過3D虛擬人+AIGC等先進(jìn)的技術(shù)，為千行百業(yè)賦能，幫助企業(yè)及個(gè)人收獲AIGC時(shí)代的紅利。
在經(jīng)過了整整一下午的體驗(yàn)活動(dòng)以及與柴教授的深入交流之后，我們充分感受到在普惠大眾的高科技產(chǎn)品及服務(wù)的背后，是廣大科研人員多年以來的持續(xù)努力。同時(shí)在這些科技成果的推動(dòng)下，普通大眾將會(huì)享受到更多科技所帶來的便利與美好體驗(yàn)，創(chuàng)作者的創(chuàng)作門檻將會(huì)降低，創(chuàng)作的空間與想象力則會(huì)進(jìn)一步提升。
最后我們強(qiáng)烈推薦對AIGC及內(nèi)容創(chuàng)作感興趣的朋友實(shí)際體驗(yàn)一下有言AIGC平臺(tái)的神奇效果，正如古話所說，百聞不如一見，相信實(shí)際體驗(yàn)之后，各位一定會(huì)收獲不少有趣的體驗(yàn)和更多的創(chuàng)作靈感。毫無疑問，2024魔琺科技開放日，對于我們而言是極其成功和富有積極意義的，我們也非常期待有更多科技企業(yè)能夠通過公司開放日這種形式，讓我們能夠近距離感受各種黑科技的魅力，并將我們激動(dòng)的心情與滿滿的收獲分享給更多的人。
