動(dòng)作捕捉技術(shù)類(lèi)型大PK:“激光+慣性”將占據C位

IM2MakerOpr 3年前 (2022-04-20)

最近,虛擬主播的熱度持續升溫。

被稱(chēng)為現象級虛擬人的美妝達人柳夜熙,第一條視頻漲粉上百萬(wàn),出道即巔峰;攜“聲優(yōu)”首發(fā)優(yōu)勢,快速卡位虛擬直播的抖音主播許安一,三周多時(shí)間,漲粉近10萬(wàn),引發(fā)圍觀(guān)熱潮。更早一些,洛天依、ayayi、清華學(xué)生華智冰……越來(lái)越多的虛擬數字人受到追捧,并迅速躥紅。

研究數據顯示,當前虛擬數字人市場(chǎng)規模已超2000億元,預計2030年達到2700億元,虛擬人賽道有望涌現超過(guò)5家以上的獨角獸企業(yè)。其中以虛擬主播、明星虛擬分身、品牌代言人等為代表的身份型虛擬人將在未來(lái)將占據主導地位,體量達1750億元。

虛擬人,借著(zhù)元宇宙基礎設施的東風(fēng),一下子站到風(fēng)口浪尖上。特別是在內卷化嚴重的MCN、主播市場(chǎng)中,虛擬人的出現,解決了IP穩定性、不愿出鏡、差異化競爭等難題,甚至被認為是主播逆襲的工具。提及虛擬人,除了內容端的形象設計建模、渲染外,決定虛擬人靈活性、穩定性、使用門(mén)檻的動(dòng)作捕捉技術(shù),是兵家必爭之地。

激光+慣性:易搭建、易攜帶,連續直播不“掉線(xiàn)”

4月17日,抖音虛擬主播許安一直播間,人聲鼎沸。“到一萬(wàn)人就給大家倒立,還能隨意跳舞,我還會(huì )倒立洗頭呢,絕活可多了”,在線(xiàn)數據很快飆升到1萬(wàn)人,許安一二話(huà)不說(shuō),當場(chǎng)就來(lái)了個(gè)倒立,整個(gè)動(dòng)作行云流水,絲毫不拖沓。

但恰恰就是這樣一個(gè)線(xiàn)下直播的“常規”動(dòng)作,如果讓虛擬數字人“照辦”,對動(dòng)作捕捉技術(shù)和設備的要求就相當苛刻了。

動(dòng)作捕捉技術(shù)類(lèi)型大PK:“激光+慣性”將占據C位

有了“激光定位+慣性”的動(dòng)捕技術(shù),才讓許安一“有恃無(wú)恐”。因為在采用STEPVR的動(dòng)捕方案前,虛擬主播在窗口前很容易“掉鏈子”,或是突然形象崩塌,或是大幅動(dòng)作“穿幫”,因此,不得不謹小慎微。有了“激光+慣性”動(dòng)捕技術(shù)的加持,主播可以在直播間里肆意表演,跳舞、倒立、翻跟頭等高難度動(dòng)作,都能流暢完成,還支持多人實(shí)時(shí)動(dòng)捕,觀(guān)賞性一下子就拉高很多。

相比其他類(lèi)別動(dòng)捕技術(shù),“激光+慣性”還有超強穩定性的優(yōu)勢,連續直播10小時(shí),不會(huì )拉胯,不需要矯正復位等多余的操作。另外值得一提的是,這一動(dòng)捕技術(shù)性?xún)r(jià)比極高,使用門(mén)檻極低,對空間要求也很低,主播如果想換個(gè)“場(chǎng)子”,拎著(zhù)箱子出去,在任意小空間都可以靈活搭建,直播起來(lái),幾乎是傻瓜式操作。

慣性:成本低廉,但短板很明顯,需15分鐘矯正

目前,應用在虛擬直播上的慣性動(dòng)作捕捉技術(shù)占主流。從原理上講,是將慣性傳感器應用到數據采集端,通過(guò)慣性原理對數據進(jìn)行處理,從而完成運動(dòng)目標的姿態(tài)角度測量,可以簡(jiǎn)單理解為手機里那個(gè)陀螺儀。

好處是,成本相對低廉,短板也非常突出,誤差比較大,重復精度比較低。因為動(dòng)作捕捉數據由推算而來(lái),所以絕對位置的數據精準度非常低。比如現實(shí)世界的才藝表演,主播回到原點(diǎn)后,虛擬世界跟隨同樣的運動(dòng)后,慣性式虛擬人極有可能回不到最初的原點(diǎn),甚至跑到旮旯去了。數據誤差不斷積累的話(huà),就需要每15分鐘,復位矯正一次設備。

對虛擬主播來(lái)說(shuō),這就尷尬了,往往難以忍受。

所以,使用了單一慣性動(dòng)捕技術(shù)的虛擬主播,不管是跳舞、運動(dòng),上限時(shí)間是15分鐘左右,之后主播不得不回到座椅上“休息”一下,實(shí)際上是為了復位校正。再者,使用慣性動(dòng)捕時(shí),如果周邊手機設備較多的話(huà),電磁信號復雜,很可能導致虛擬人會(huì )突然姿態(tài)崩潰、失控。目前,國外代表性的企業(yè)有Xsence,國內采用慣性的動(dòng)捕企業(yè)也不少。

光學(xué)相機:影視級別效果,搭建復雜,可移動(dòng)性差

最后一類(lèi)是光學(xué)相機動(dòng)捕技術(shù),這一流派并不陌生,在《阿凡達》等好萊塢動(dòng)畫(huà)片中,有著(zhù)廣泛應用。技術(shù)原理上是通過(guò)多個(gè)紅外發(fā)射攝像頭,對室內空間進(jìn)行覆蓋,在被追蹤物體上放置反光點(diǎn),通過(guò)捕捉這些反光點(diǎn)反射回來(lái)的圖像,確定其在空間中的位置信息。

優(yōu)勢是影視級別效果,因為多年技術(shù)沉淀,成片視覺(jué)效果細膩。當然,這自然是所有虛擬主播所追求的目標,品質(zhì)體驗上對粉絲更為友好,但可惜的是,價(jià)格極高,讓人望而卻步。而且操作起來(lái)相當復雜,需要進(jìn)行長(cháng)時(shí)間培訓,無(wú)法實(shí)現快速搭建,搭建完成后不能輕易“挪動(dòng)”,可移動(dòng)性差,需要專(zhuān)業(yè)人員定期維護。

但這與虛擬主播的未來(lái)發(fā)展趨勢有點(diǎn)兒相悖,他們需要更高的自由度。

比如聲優(yōu)主播許安一借助虛擬人,以黑馬姿態(tài)出位;柳夜熙爆火后,馬不停蹄地在線(xiàn)下開(kāi)展攻勢,接品牌代言;麥當勞推出首位虛擬代言人,超寫(xiě)實(shí)數字人Ayayi也成品牌合作大戶(hù),以及未來(lái)虛擬人走向帶貨場(chǎng)景。這意味著(zhù)虛擬人面向的未來(lái)場(chǎng)景更多元,不僅僅存在于直播間,這就要求背后的動(dòng)捕技術(shù)具有靈活、可移動(dòng)、快速搭建、免維護的特征。顯然,光學(xué)相機一派的弊端明顯,有些難以適從。

動(dòng)作捕捉技術(shù)類(lèi)型大PK:“激光+慣性”將占據C位

對比了一番后,動(dòng)作捕捉技術(shù)究竟孰強孰弱?結果可能已經(jīng)不言而喻:慣性短期內有一定成本優(yōu)勢,但長(cháng)期看未來(lái)可能是“激光+慣性”技術(shù)的天下。

最后,記得關(guān)注微信公眾號:鎂客網(wǎng)(im2maker),更多干貨在等你!

鎂客網(wǎng)


科技 | 人文 | 行業(yè)

微信ID:im2maker
長(cháng)按識別二維碼關(guān)注

硬科技產(chǎn)業(yè)媒體

關(guān)注技術(shù)驅動(dòng)創(chuàng )新

分享到