36氪獲悉，XR創(chuàng)作技術(shù)企業(yè)深鍶科技(北京)有限公司（以下簡(jiǎn)稱“深鍶科技”）宣布完成連續(xù)三輪總額超千萬(wàn)美元融資，其中天使輪由源合資本投資，金沙江聯(lián)合投資了Pre-A輪，SIG投資了Pre-A+輪。據(jù)悉，資金將主要用于加強(qiáng)云渲染等方面技術(shù)研發(fā)。
深鍶科技打造了自己的虛擬人IP安若菡
深鍶科技以自研XR引擎為基座，面向電商、直播、XR演唱會(huì)、商業(yè)發(fā)布會(huì)、社交媒體傳播、虛擬人助理和客服等多應(yīng)用場(chǎng)景提供SaaS化虛擬制片服務(wù)。將實(shí)時(shí)3D互動(dòng)內(nèi)容制作能力像Canva或Figma一樣，以更低的門檻提供給B端客戶。
事實(shí)上無(wú)論是國(guó)內(nèi)，還是在全球范圍，將3D互動(dòng)內(nèi)容制作SaaS化的公司還比較少。因?yàn)?D互動(dòng)引擎是建立在復(fù)雜工具鏈的基礎(chǔ)上，傳統(tǒng)而言主要為游戲公司、及更高端的電影產(chǎn)業(yè)提供服務(wù)。而再疊加實(shí)時(shí)計(jì)算功能，則在云計(jì)算、邊緣計(jì)算、人工智能算法等方面提出了更高的要求。
SaaS化提供XR制作能力的深鍶科技核心團(tuán)隊(duì)，是在這一前沿領(lǐng)域國(guó)內(nèi)不多見的既有專業(yè)深度，又具備技術(shù)廣度的創(chuàng)業(yè)團(tuán)隊(duì)。創(chuàng)始團(tuán)隊(duì)主要由前視頻、影視行業(yè)資深專家組成，與好萊塢The Third Floor、Pixar等頂尖機(jī)器視覺團(tuán)隊(duì)進(jìn)行過長(zhǎng)期深度的合作及研討，成員包括前阿里、騰訊、百度高管及中科院前沿領(lǐng)域研究人員。
深鍶科技聯(lián)合創(chuàng)始人兼COO安承海向36氪表示：”在過去半年中，我們花了很多精力在做好一件事情，就是XR引擎的產(chǎn)品與市場(chǎng)相契合（PMF）驗(yàn)證。目前已經(jīng)在國(guó)內(nèi)頂尖電商、演唱會(huì)、虛擬人運(yùn)營(yíng)等領(lǐng)域有合作案例。“
其中虛擬人是XR創(chuàng)作工具最主要的應(yīng)用方向之一。近年來，特別是從2021年元宇宙概念大火開始，虛擬人正在為大眾所接受，也正在從遙不可及的高科技結(jié)晶，轉(zhuǎn)變成虛擬藝人、虛擬主播、數(shù)字員工等生產(chǎn)力工具。
但是在目前的技術(shù)體系中，不同類型的虛擬人，比如高清數(shù)字人，通常需要一定規(guī)模的動(dòng)畫視頻制作團(tuán)隊(duì)來支持，也無(wú)法做到實(shí)時(shí)互動(dòng)，其實(shí)無(wú)異于一個(gè)動(dòng)畫角色；虛擬偶像，則需要投入動(dòng)輒百萬(wàn)起步的專業(yè)動(dòng)捕設(shè)備、表情捕捉設(shè)備、以及技術(shù)團(tuán)隊(duì)，系統(tǒng)聯(lián)調(diào)需要以小時(shí)計(jì)的啟動(dòng)時(shí)間。
一方面是需求的快速增長(zhǎng)，另一方面則是高昂的制作成本，以及低效的制作流程正在成為商業(yè)模式走向成熟的桎梏。而已經(jīng)在虛擬人領(lǐng)域?qū)崿F(xiàn)商業(yè)落地的深鍶XR引擎，打通了虛擬和現(xiàn)實(shí)之間的數(shù)字通路，能夠在保持高度真實(shí)感的基礎(chǔ)上，實(shí)現(xiàn)實(shí)時(shí)統(tǒng)一的表情、動(dòng)作捕捉，超低延時(shí)傳輸和實(shí)時(shí)云渲染。
越是看似簡(jiǎn)單操作，背后越是需要更加艱深的技術(shù)來推動(dòng)，深鍶科技聯(lián)合創(chuàng)始人兼CTO徐昊向36氪介紹：“可以實(shí)時(shí)互動(dòng)的4K高清照片級(jí)真實(shí)感的虛擬數(shù)字人，表情和動(dòng)作非常微妙，特別是當(dāng)他動(dòng)起來還要顯得真實(shí)的話，背后有非常大量的圖形渲染、幾何處理和物理模擬的工作。之前為什么大家一直都沒有做得很好，是因?yàn)樯婕暗乃惴ㄟ壿嬏珡?fù)雜，或者說計(jì)算量太大。在過去的2021年里，深鍶科技投入了大量的時(shí)間和精力，從技術(shù)底層及核心算法上逐層突破，僅一年內(nèi)，已經(jīng)在人體的三維重建、真實(shí)感圖形渲染和云原生SaaS服務(wù)等多個(gè)關(guān)鍵技術(shù)領(lǐng)域取得重大進(jìn)展。”
具體來說，深鍶科技通過構(gòu)建多視角人體標(biāo)準(zhǔn)數(shù)據(jù)集，用以訓(xùn)練和測(cè)試神經(jīng)網(wǎng)絡(luò)算法，進(jìn)而僅用一個(gè)普通單目攝像頭即實(shí)現(xiàn)了實(shí)時(shí)全身動(dòng)作捕捉，能夠同時(shí)對(duì)身體姿態(tài)、面捕表情進(jìn)行實(shí)時(shí)捕捉，還可以高精度還原手部細(xì)節(jié)；并且在常規(guī)基于視覺的動(dòng)作捕捉方案不太擅長(zhǎng)的半身遮擋場(chǎng)景下，也有很好的表現(xiàn)，這也是Meta的Horizon全家桶一直被外界詬病的地方。
基于自身的SaaS平臺(tái)，深鍶也打造了自己的虛擬人IP安若菡，據(jù)深鍶團(tuán)隊(duì)介紹，安若菡集合了深鍶1年多以來的技術(shù)探索成果，完全按照電影工業(yè)級(jí)標(biāo)準(zhǔn)打造；在B站的冷啟動(dòng)試播階段，就憑借其高度接近真人的展示效果給觀眾留下了深刻印象，并在網(wǎng)絡(luò)上引起了話題討論。
金沙江聯(lián)合資本合伙人尹德綱表示：“投資深鍶科技以來，我們始終與團(tuán)隊(duì)保持著密切的溝通交流，深鍶科技在產(chǎn)品和業(yè)務(wù)兩端均保持了高質(zhì)量的快速增長(zhǎng)，其超高質(zhì)量的數(shù)字人及其他3D實(shí)時(shí)互動(dòng)內(nèi)容獲得了客戶一致認(rèn)可；深鍶團(tuán)隊(duì)富有創(chuàng)業(yè)精神與熱情，對(duì)產(chǎn)品方向與市場(chǎng)趨勢(shì)具有極強(qiáng)的洞察能力，能夠領(lǐng)先于行業(yè)找到需求的爆點(diǎn)并提前布局形成標(biāo)準(zhǔn)化產(chǎn)品，金沙江聯(lián)合很高興能夠在企業(yè)創(chuàng)業(yè)的初期開始就與團(tuán)隊(duì)同行。”
“中國(guó)的企業(yè)客戶在掀起向XR遷移的浪潮，在這個(gè)大背景下，SIG很高興能夠支持深鍶科技。深鍶科技是我們看到行業(yè)內(nèi)少有的既具有非常豐富的行業(yè)經(jīng)驗(yàn)與資源，又有極強(qiáng)技術(shù)與產(chǎn)品化能力的頂尖團(tuán)隊(duì)。深鍶科技顯著降低了未來每一個(gè)用戶使用高質(zhì)量3D互動(dòng)內(nèi)容的門檻，將有機(jī)會(huì)成為XR時(shí)代必不可少的基礎(chǔ)設(shè)施。” SIG海納亞洲創(chuàng)投基金合伙人郭路說到。
當(dāng)前，整個(gè)互聯(lián)網(wǎng)行業(yè)寄希望于通過第四次工業(yè)革命，實(shí)現(xiàn)全真互聯(lián)、萬(wàn)物互聯(lián)、數(shù)字智能、混合現(xiàn)實(shí)等諸多領(lǐng)域的數(shù)字化、智能化突破。元宇宙、Web3等概念和提法也應(yīng)運(yùn)而生，Metaverse或?qū)⒊蔀橹频谒拇喂I(yè)個(gè)革命的全面啟動(dòng)，并且在整體轉(zhuǎn)型的過程中，從學(xué)術(shù)、知識(shí)、技術(shù)、工藝、生產(chǎn)制造、到日常生活，形成全方位的迭代升級(jí)。
在2021年，Meta的VR設(shè)備Oculus Quest 2全球銷量已超千萬(wàn)，在XR硬件市場(chǎng)進(jìn)一步爆發(fā)之后，社交、游戲、消費(fèi)等巨大的C端應(yīng)用場(chǎng)景也必將被引爆，屆時(shí)海量原生3D內(nèi)容、以及實(shí)時(shí)3D交互的需求勢(shì)必會(huì)成為市場(chǎng)的焦點(diǎn)。
關(guān)鍵詞： 動(dòng)作捕捉 快速增長(zhǎng) 的基礎(chǔ)上
