首頁(yè)>資訊 >
這屆冬奧會(huì),虛擬人在為人類打工 2022-02-17 14:53:17  來(lái)源:36氪

虛擬人概念在2021年全網(wǎng)爆火,從時(shí)尚博主AYAYI到美妝達(dá)人柳夜熙再到清華大學(xué)虛擬學(xué)生華智冰,在抖音、小紅書等社交平臺(tái)上,虛擬人、虛擬偶像一度成為了“流量密碼”。

根據(jù)此前艾媒咨詢預(yù)計(jì),2021年中國(guó)虛擬偶像核心產(chǎn)業(yè)規(guī)模達(dá)62.2億元,而到2023年,有望突破200億元。

當(dāng)收割了大量流量之后,人們也開始提出疑問(wèn),除去噱頭之后,虛擬人帶來(lái)的商業(yè)想象力到底還剩多少?

除了無(wú)瑕偶像以外,虛擬人是否能為人類的生活中發(fā)揮出更多的社會(huì)價(jià)值?

意料之外的是,在2022年的冬奧會(huì)上,2021年爆火的虛擬人概念,獲得了廣泛應(yīng)用。

01虛擬人手語(yǔ)主播24小時(shí)服務(wù)2700萬(wàn)特殊群體

近日,央視主持人朱廣權(quán)和AI虛擬人手語(yǔ)主播的一條pk短視頻引發(fā)了全網(wǎng)關(guān)注。

畫面中,朱廣權(quán)金句頻頻,語(yǔ)速驚人。

而一旁的虛擬人手語(yǔ)主播也是見(jiàn)招拆招,根據(jù)朱廣權(quán)的話同步即時(shí)進(jìn)行手語(yǔ)翻譯,最后圓滿成功完成了挑戰(zhàn)。

根據(jù)全國(guó)第二次殘疾人抽樣調(diào)查數(shù)據(jù),中國(guó)目前有2780萬(wàn)聽障人士。

為了讓這些同樣也在關(guān)注冬奧盛事的聽障群體們,第一時(shí)間獲取比賽動(dòng)態(tài)和感受賽場(chǎng)上的激情,百度智能云團(tuán)隊(duì)花了2個(gè)月的時(shí)間打造了這個(gè)虛擬人AI手語(yǔ)主播,從北京冬奧會(huì)開始,全年無(wú)休用AI智慧為聽障用戶提供手語(yǔ)服務(wù)。

在過(guò)去,我們從熒幕上看到的手語(yǔ)翻譯,大多是由真人完成。

打造一個(gè)手語(yǔ)數(shù)字人并不簡(jiǎn)單,主要有三個(gè)難點(diǎn):

1、不同地區(qū)的手語(yǔ)各不相同,需要一套類似普通話通用版的手語(yǔ)。

2、手語(yǔ)的語(yǔ)序與正常說(shuō)話的語(yǔ)序并不相同,虛擬人大多需要先進(jìn)行提煉和語(yǔ)序調(diào)整,再進(jìn)行翻譯。

3、手語(yǔ)不僅僅只是靠手部動(dòng)作傳遞信息,表情、口型也是關(guān)鍵組成部分。虛擬人不僅要準(zhǔn)確地用手語(yǔ)進(jìn)行翻譯,還需要準(zhǔn)確地根據(jù)語(yǔ)境做出表情反饋。

普通翻譯講究信、達(dá)、雅,一個(gè)AI虛擬人手語(yǔ)翻譯,要像真正實(shí)現(xiàn)替代真人,就必須足夠智能。

百度打造的虛擬人手語(yǔ)主播之所以能夠拿下朱廣權(quán)的挑戰(zhàn),離不開各種技術(shù)的加成。

為了讓虛擬人聽得清主持人/解說(shuō)員在講什么,百度方面利用了ASR語(yǔ)音識(shí)別模型幫助虛擬人主播準(zhǔn)確識(shí)別語(yǔ)音。

據(jù)報(bào)道,這一系統(tǒng)的準(zhǔn)確率高達(dá)98%,還能夠準(zhǔn)確識(shí)別方言、中英文混雜的情況。

為了讓虛擬人手語(yǔ)主播實(shí)現(xiàn)準(zhǔn)確的翻譯,百度在訓(xùn)練這一模型的時(shí)候,主要應(yīng)用了自然手語(yǔ)語(yǔ)料。

在我國(guó),存在的手語(yǔ)種類超過(guò)百種,為了讓更多的聽障人士能夠看懂,央視新聞AI手語(yǔ)主播掌握的手語(yǔ)詞匯規(guī)范都來(lái)自《國(guó)家通用手語(yǔ)詞典》標(biāo)準(zhǔn),另外還添加了體育專有名詞、時(shí)政新聞、常用短句等特殊訓(xùn)練。

為了讓虛擬人通過(guò)表情進(jìn)行更加準(zhǔn)確的表達(dá)句意,百度智能云方面建立了一個(gè)擁有近萬(wàn)個(gè)手語(yǔ)動(dòng)作的動(dòng)作庫(kù),推動(dòng)精準(zhǔn)手語(yǔ)表達(dá)實(shí)現(xiàn)。

在口型與表情上,百度智能云通過(guò)4D掃描數(shù)據(jù)進(jìn)行訓(xùn)練,為表情與口型進(jìn)行精準(zhǔn)矯正,總體上口型生成的準(zhǔn)確度超過(guò)98.5%。

當(dāng)然,除了百度的虛擬手語(yǔ)人主播以外,2月3日,由北京智譜華章科技有限公司、凌云光技術(shù)股份有限公司和北京廣播電視臺(tái)聯(lián)合打造的“冬奧手語(yǔ)播報(bào)數(shù)字人系統(tǒng)”也正式上線。

這一系統(tǒng)基于北京智源人工智能研究院“悟道2.0”超大智能模型進(jìn)行研發(fā),自主搭建多模態(tài)肢體動(dòng)作、表情、手指同步采集系統(tǒng),目的也是方便殘障人士收看賽事報(bào)道,目前已經(jīng)在“冬奧賽事集錦”和“一起看冬奧”電視節(jié)目正式亮相。

智譜華章是清華大學(xué)計(jì)算機(jī)系知識(shí)工程實(shí)驗(yàn)室的技術(shù)成果轉(zhuǎn)化而來(lái)。

智譜AI合伙人左家平曾經(jīng)這樣評(píng)價(jià)虛擬手語(yǔ)人產(chǎn)品:“它類似于一個(gè)擁有了1.75萬(wàn)億條知識(shí)的大腦?!?/p>

02 谷愛(ài)凌虛擬數(shù)字人跨界解說(shuō)天氣預(yù)報(bào)虛擬主播上崗

今年冬奧的冰雪賽場(chǎng)上,谷愛(ài)凌是滑雪賽場(chǎng)上的實(shí)力金牌選手,賽場(chǎng)外,由中國(guó)移動(dòng)通過(guò)最新的云計(jì)算技術(shù)打造的谷愛(ài)凌孿生虛擬人Meet GU也是忙得不可開交。

在冬奧會(huì)舉辦期間,Meet GU在咪咕冬奧賽事演播室中完成了滑雪賽事解說(shuō)、播報(bào)及場(chǎng)景電商的虛擬互動(dòng)等工作。

據(jù)報(bào)道,Meet Gu背后的技術(shù)主要是通過(guò)高質(zhì)量肢體及亞毫米級(jí)面部綁定,采用動(dòng)補(bǔ)驅(qū)動(dòng)亞毫米級(jí)數(shù)字人并達(dá)到4k質(zhì)量合成。

Meet Gu的外形、聲音,神情與妝容、毛孔細(xì)節(jié)、皮膚質(zhì)感都與谷愛(ài)凌本人1:1還原。

除了Meet GU之外,咪咕方面還打造了徐夢(mèng)桃、隋文靜、韓聰、任子威等4名冰雪項(xiàng)目運(yùn)動(dòng)員的虛擬數(shù)字人。

他們?cè)诙瑠W會(huì)開幕前夕曾在2022年中國(guó)網(wǎng)絡(luò)視聽年度盛典上合唱了冰雪助威曲《準(zhǔn)備好》。

當(dāng)然,除了熱門IP的虛擬人在熒幕中亮相之外,一些實(shí)用場(chǎng)景的虛擬人也正在為人類減負(fù)。

在冬奧會(huì)開幕前十天,虛擬人氣象主播馮小殊在中國(guó)天氣WAP、張家口氣象公眾號(hào)等新媒體平臺(tái)上已經(jīng)正式上崗,為選手和觀眾們實(shí)時(shí)播報(bào)體感寒涼指數(shù)、穿衣指數(shù)、感冒指數(shù)、凍傷指數(shù)、防曬指數(shù)、護(hù)目鏡指數(shù)等氣象信息指標(biāo)。

虛擬氣象主播馮小殊由中國(guó)氣象局華風(fēng)氣象傳媒集團(tuán)聯(lián)合小冰公司打造,以“中國(guó)天氣”主持人馮殊為原型,依托小冰框架數(shù)字孿生虛擬人技術(shù)構(gòu)建。

通過(guò)一周的深度神經(jīng)網(wǎng)絡(luò)渲染技術(shù)及小樣本學(xué)習(xí)技術(shù),馮小殊出爐,從外貌、動(dòng)作到神態(tài)與真人是真假難分。

03小結(jié)

開幕式上表演節(jié)目的洛天依、全年無(wú)休的手語(yǔ)主播、咪咕演播室里的谷愛(ài)凌數(shù)字分身、數(shù)字人版奧林匹克公益宣傳大使REAI、從冬奧開幕前10天就開始播報(bào)天氣的虛擬氣象主持人馮小殊……

在本次冬奧會(huì)現(xiàn)場(chǎng),虛擬人已經(jīng)開始在為人類“打工”。

有業(yè)內(nèi)人士給出了這樣評(píng)價(jià):冬奧會(huì)為虛擬數(shù)字人的應(yīng)用打造了一個(gè)絕佳的契機(jī)。

這場(chǎng)舉國(guó)歡慶的盛事,為虛擬人提供了一個(gè)走向千家萬(wàn)戶的展示舞臺(tái),讓人們知道虛擬人并不僅僅只是紙片人,也不光是智能局限于二次元的娛樂(lè)產(chǎn)物。

虛擬人已然是勢(shì)不可擋。

本文來(lái)自微信公眾號(hào)“科創(chuàng)最前線”(ID:kczqxgzh),作者:科創(chuàng)最前線,36氪經(jīng)授權(quán)發(fā)布。

關(guān)鍵詞:

相關(guān)閱讀:
熱點(diǎn)
圖片 圖片