近日,新暢元首次公布數字人技術(shù)戰略,并發(fā)布前沿技術(shù)2D AvatarVerse,這項技術(shù)國際領(lǐng)先,在過(guò)去幾年的CVPR、SIGGRAPH、ICCV、ECCV等計算機視覺(jué)或人工智能頂會(huì )多次發(fā)表,將由近期上線(xiàn)的創(chuàng )視元首發(fā)搭載。
率先實(shí)現2D AvatarVerse商業(yè)化
據官方介紹,2D AvatarVerse 在只有5分鐘視頻的條件下,便可以學(xué)習到從交互行為到真人形象的映射關(guān)系,從而對現實(shí)人物進(jìn)行高真實(shí)感真人圖像生成。用戶(hù)據此能夠實(shí)現創(chuàng )建具備專(zhuān)業(yè)用途的高真實(shí)感數字人,通過(guò)跨模態(tài)方式驅動(dòng)數字人并制作視頻和進(jìn)行直播,從根本上提升內容創(chuàng )作的效率,實(shí)現批量化生產(chǎn)。
新暢元發(fā)布前沿技術(shù)2D AvatarVerse,是市場(chǎng)上唯一一家可提供該項技術(shù)的公司。區別于僅靠唇形驅動(dòng)的數字人,AvatarVerse是指整個(gè)數字人都是由算法生成且可驅動(dòng)的,表情、動(dòng)作都可以自由生成,表現得更為自然、流暢、有個(gè)性,極大豐富了數字人的不同應用場(chǎng)景。
相比Meta現階段的方案,新暢元數字人采集便捷且算法更優(yōu)、算力需求小
新暢元正式發(fā)布數字人技術(shù)戰略
新暢元正式發(fā)布數字人技術(shù)戰略,官方表示,2D AvatarVerse是新暢元Verse引擎計劃之一,其技術(shù)優(yōu)勢在于效果真實(shí)自然。未來(lái),新暢元還將推出顛覆式的3D AvatarVerse,采用近年來(lái)學(xué)術(shù)界備受關(guān)注的神經(jīng)輻射場(chǎng)(NeRF)作為底層表征,未來(lái)通過(guò)產(chǎn)品的方式與大家見(jiàn)面。
據了解,新暢元Verse引擎即全生成數字人技術(shù)AvatarVerse和數字人的相關(guān)的一系列技術(shù)(比如語(yǔ)音、文本/肢體語(yǔ)義理解等),它的出現將加速數字人技術(shù)應用落地,填補產(chǎn)業(yè)缺項。新暢元將持續推進(jìn)Verse引擎計劃,致力于構建一個(gè)安全可靠、充滿(mǎn)活力的數字智能生態(tài)系統,為各行各業(yè)提供強大而全面的技術(shù)支持。
新暢元聯(lián)合創(chuàng )始人兼CEO邱見(jiàn)明博士表示,“在生成式數字人領(lǐng)域,算法將扮演更重要的角色,而高質(zhì)量的算法能力是新暢元打造AIGC數字人多模態(tài)內容生成與互動(dòng)系統的核心競爭力?!?/p>
新暢元擁有來(lái)自于清華大學(xué)、微軟、阿里巴巴等機構及科技大廠(chǎng)的核心技術(shù)人員,覆蓋軟硬件技術(shù)開(kāi)發(fā)、投融資等不同領(lǐng)域。截至目前,團隊于2023年已在CVPR2023*發(fā)表文章2篇,在SIGGRAPH2023*發(fā)表文章5篇,ICCV2023發(fā)表4篇。新暢元首席科學(xué)家劉燁斌教授的清華團隊通過(guò)研究虛擬數字人的采集系統級相關(guān)技術(shù),曾獲國家發(fā)明技術(shù)一等獎。清華團隊的多相機采集系統,能夠在現有的硬件條件下獲得效果最佳、精度最高的采集數據,新暢元團隊也因此在多圖像三維重建精度方面連續7年排名國際第?。