松花江網(wǎng)

您所在的位置 首頁 商業(yè)資訊

快手為游戲主播打造虛擬人“紅塵” 自研技術(shù)拓寬創(chuàng)作者發(fā)揮空間

2021-11-19 14:21   
分享到
官方微信平臺

  近日,快手特效團(tuán)隊聯(lián)合Y-tech技術(shù)團(tuán)隊為游戲主播“俠客紅塵”打造了一款高真實感的虛擬人形象“紅塵”?!凹t塵”已在快手帶來直播首秀,虛擬形象加上新奇有趣的玩法使得首秀直播吸引了近300萬人觀看,同時在線人數(shù)近5000人,漲粉近10萬。

  直播間效果顯示,直播中虛擬人“紅塵”的面部動作和肢體動作真實感很強(qiáng),在游戲中的喜怒哀樂的情緒均能準(zhǔn)確的表達(dá),還可以自由切換發(fā)型和各種道具。此外還為“紅塵”配置了一些有趣的玩法,比如,在被彈幕噴“菜”時會氣得頭變大,在輸?shù)粲螒驎r會變出一個平底鍋來接鍋。

  

  

  紅塵在直播時唱歌

  據(jù)了解,紅塵在直播中運(yùn)用了大量的2D和3D特效效果。在直播中,“紅塵”的頭頂有可愛的小鴨子,還能夠換上機(jī)車頭盔和小象頭套,甚至還能變成馬臉和一個電視機(jī)。帶著馬臉揮著平底鍋,跳著騎馬舞的夸張形象引起了直播間觀眾們“就離譜”的陣陣驚呼。

  

  

  豐富的3D魔表效果

  主播“俠客紅塵”表示,用了虛擬形象之后,和觀眾有了更好的互動體驗。“之前直播的時候我只是打游戲,即使在和觀眾互動時也主要是圍繞游戲展開?,F(xiàn)在有了虛擬形象后,能明顯感覺到大家在關(guān)注游戲的同時,還能非常好地感受到我,感受到我的喜怒哀樂等情緒。”

  據(jù)了解,在虛擬人“紅塵”這套技術(shù)完全由快手自研。獲得快手用戶喜愛的背后,實際上主播并不需要為此添置昂貴或者復(fù)雜的器材。應(yīng)用快手的這套解決方案,主播只需要單個攝像頭和普通電腦即可實時驅(qū)動虛擬人。

  該項目的技術(shù)總監(jiān)馬博士表示,這套方案包括3D掃描、動作捕捉以及實時渲染等技術(shù),可在一個100元左右的攝像頭下,實時捕捉人的動態(tài)并幾乎無延遲地驅(qū)動虛擬人。這次虛擬人識別驅(qū)動技術(shù)為業(yè)內(nèi)頂級,其中面部捕捉技術(shù)可以和蘋果arkit技術(shù)相媲美,而且并不需要采集深度信息。

  據(jù)介紹,此次虛擬人驅(qū)動模塊根據(jù)真人識別信息,通過資產(chǎn)校準(zhǔn)、反向動力學(xué)等算法模塊,轉(zhuǎn)化為連續(xù)穩(wěn)定的資產(chǎn)動畫。系統(tǒng)中還使用了自動情緒增強(qiáng)模塊,通過自動識別的驅(qū)動者情感,對資產(chǎn)的面部表情動作進(jìn)行自動調(diào)優(yōu),以使虛擬角色體現(xiàn)出更具表現(xiàn)力的情感。

  資深算法工程師鄭博士表示,該項目在實時渲染效果上極大的接近了真實感,且在渲染效率上做了大幅優(yōu)化,以能夠完美支持直播和短視頻場景。鄭博士還介紹,在高真實感的皮膚材質(zhì)生成方面,快手運(yùn)用深度神經(jīng)網(wǎng)絡(luò),將美術(shù)繪制的紋理進(jìn)行風(fēng)格轉(zhuǎn)化,通過該方法降低了美術(shù)素材的創(chuàng)建成本,同時提高了渲染的真實感。

  該項目負(fù)責(zé)人表示,基于平臺優(yōu)質(zhì)的直播和短視頻生態(tài),未來快手還將推出千人千面的虛擬人服務(wù),為創(chuàng)作者提供廣闊的發(fā)揮空間,也將面向C端用戶提供更多豐富的玩法選擇,歡迎對虛擬人感興趣的組織聯(lián)系快手。

 ?。ㄋ苫ńW(wǎng)編輯 李明丹)

反侵權(quán)公告:

根據(jù)《中華人民共和國著作權(quán)法》、《信息網(wǎng)絡(luò)傳播權(quán)保護(hù)條例》等法律法規(guī),未經(jīng)書面許可,擅自轉(zhuǎn)載本報社作品的,將涉嫌侵犯著作權(quán)人合法權(quán)益。為規(guī)范網(wǎng)絡(luò)轉(zhuǎn)載行為,制止非法侵權(quán)轉(zhuǎn)載,本報社鄭重公告:

一、任何單位或個人,在任何公開傳播平臺上使用著作權(quán)歸屬于江城日報社(包括《江城日報》、《江城晚報》、松花江網(wǎng)、吉林烏拉圈等)的原創(chuàng)內(nèi)容,必須事先取得江城日報社書面授權(quán);

二、對侵犯江城日報社(包括《江城日報》、《江城晚報》、松花江網(wǎng)、吉林烏拉圈等)著作權(quán)益的違法行為,本報社將采取一切合法措施,追究行為人的侵權(quán)責(zé)任,包括但不限于公開譴責(zé)、向國家版權(quán)行政管理部門舉報、提起訴訟等;

三、對于各類非法轉(zhuǎn)載行為,歡迎讀者提供侵權(quán)線索:

陳律師(法律顧問)0432-62099222

武文斌(版權(quán)合作)0432-62523496

文檔附件