每經(jīng)記者 可楊 每經(jīng)編輯 張海妮
2月4日晚間，北京2022年冬奧會(huì)開幕式在國家體育場“鳥巢”舉行。本屆冬奧會(huì)期間，虛擬數(shù)字人是重要技術(shù)之一，中央廣播電視總臺(tái)新增了央視新聞AI手語虛擬主播，報(bào)道冬奧會(huì)新聞、準(zhǔn)確及時(shí)地進(jìn)行賽事手語直播。據(jù)悉，這名虛擬數(shù)字人主播是由“百度智能云曦靈”數(shù)字人平臺(tái)打造的首個(gè)AI手語主播。
虛擬數(shù)字人背后，涉及計(jì)算機(jī)圖形學(xué)、圖形渲染、動(dòng)作捕捉、深度學(xué)習(xí)、語音合成等多種技術(shù)。隨著2021年元宇宙概念持續(xù)火熱，虛擬數(shù)字人也作為元宇宙的場景入口和連接紐帶而備受矚目，而冬奧會(huì)上的虛擬數(shù)字人元素，也將讓大眾進(jìn)一步認(rèn)識(shí)這項(xiàng)技術(shù)。
不過，虛擬數(shù)字人要實(shí)現(xiàn)大規(guī)模商業(yè)化，仍有難題待解。百度智能云AI人機(jī)交互實(shí)驗(yàn)室負(fù)責(zé)人李士巖介紹，目前數(shù)字人尚未實(shí)現(xiàn)規(guī)模化產(chǎn)業(yè)落地，主要原因在于數(shù)字人制作技術(shù)門檻高、周期長、成本高。
AI助力聽障人士觀冬奧
據(jù)百度提供的數(shù)據(jù)，全球約有4.3億人患中度及以上聽力障礙，根據(jù)全國第二次殘疾人抽樣調(diào)查數(shù)據(jù)，中國有聽障人士2780萬。而在本次冬奧賽事中，AI手語數(shù)字人將成為他們觀賽的重要橋梁。
百度方面介紹，區(qū)別于傳統(tǒng)翻譯，手語翻譯的難點(diǎn)在于：手語并非按照語言逐字翻譯，而需要根據(jù)語句整體意思進(jìn)行語言精煉和語序調(diào)整，同時(shí)還需實(shí)時(shí)配合表情和唇語，幫助聽障者更好地理解。這就導(dǎo)致AI手語數(shù)字人在信息凝練度、低時(shí)延和精細(xì)化三方面面臨極其復(fù)雜的技術(shù)難題。因此，AI手語主播不僅需要具備高精度的數(shù)字人形象，還需要具備能夠語音識(shí)別、手語翻譯和手語表達(dá)的AI大腦。
據(jù)悉，百度智能云目前建立了規(guī)模龐大的手語動(dòng)作庫，基于《國家通用手語詞典》規(guī)范，結(jié)合動(dòng)作捕捉設(shè)備和真實(shí)手語老師的雙向調(diào)優(yōu)，精修近1萬個(gè)手語動(dòng)作，保證了手語表達(dá)的動(dòng)作準(zhǔn)確性。同時(shí)，通過4D掃描技術(shù)，讓AI手語主播口型生成準(zhǔn)確度達(dá)到98.5%。
而虛擬手語主播的“AI大腦”則依托于百度智能云。通過百度自主研發(fā)的機(jī)器翻譯技術(shù)，百度智能云構(gòu)建出了一套精確的手語翻譯引擎，可懂度達(dá)到85%以上，結(jié)合百度自研的語音識(shí)別技術(shù)，可將冰雪賽事的文字及音視頻內(nèi)容，快速精準(zhǔn)地轉(zhuǎn)化為手語；同時(shí)再通過專為手語優(yōu)化的自然動(dòng)作引擎，完成AI手語主播的動(dòng)作驅(qū)動(dòng)，實(shí)時(shí)演繹為數(shù)字人的動(dòng)作、表情和唇語。據(jù)百度方面介紹，這一虛擬數(shù)字人研發(fā)工作，耗時(shí)不到2個(gè)月。
虛擬數(shù)字人技術(shù)為何能在此次冬奧會(huì)期間成為重要技術(shù)之一，易觀分析互娛行業(yè)高級(jí)分析師王媛婭認(rèn)為，中國很多領(lǐng)域在新技術(shù)應(yīng)用方面很超前，具有很強(qiáng)的創(chuàng)新意識(shí)。在本屆冬奧會(huì)上，虛擬數(shù)字人是為觀眾帶來極致體驗(yàn)的重要方式之一，隨著虛擬數(shù)字人在這幾年受到越來越多的關(guān)注，通過虛擬數(shù)字人來展示內(nèi)容已變得越來越常見。虛擬數(shù)字人不僅能在疫情期間控制現(xiàn)場演員數(shù)量，更能夠用科技演繹藝術(shù)，為觀眾帶來更新穎更多元的表演。
她同時(shí)表示，冬奧會(huì)開幕式是讓大眾了解虛擬數(shù)字人價(jià)值的契機(jī)。目前很多廠商正在布局或者計(jì)劃布局虛擬數(shù)字人賽道，由于虛擬數(shù)字人是基于3D、VR、動(dòng)作捕捉等一些技術(shù)實(shí)現(xiàn)的，隨著科技的進(jìn)步、市場需求的增加和冬奧會(huì)的助推，虛擬數(shù)字人會(huì)越來越成熟，進(jìn)一步進(jìn)入大眾視野。除了直播帶貨和演出，虛擬數(shù)字人會(huì)在更多領(lǐng)域得到商業(yè)化機(jī)會(huì)。
商業(yè)化仍有難題待解
據(jù)元透社發(fā)布的《虛擬數(shù)字人深度產(chǎn)業(yè)報(bào)告》，預(yù)計(jì)2030年，我國虛擬數(shù)字人整體市場規(guī)模將達(dá)到2700億元，而目前市場仍處于前期培養(yǎng)階段。
王媛婭認(rèn)為，目前國內(nèi)虛擬數(shù)字人剛剛從探索期過渡到成長期，成為元宇宙生態(tài)中快速發(fā)展的賽道。最近幾年，虛擬數(shù)字人的應(yīng)用領(lǐng)域逐漸拓寬，功能屬性加強(qiáng)，已不再是二次元專屬，比如現(xiàn)在已經(jīng)有了虛擬KOL、虛擬主持人、虛擬客服等很多角色，商業(yè)價(jià)值也在直播帶貨場景中得到了驗(yàn)證。以“初音未來”為代表的海外頭部虛擬數(shù)字人在探索期已建立全球影響力。同時(shí)，一些國外頭部廠商開始關(guān)注虛擬數(shù)字人在B端的應(yīng)用，并且已經(jīng)推出了一些服務(wù)于B端市場的產(chǎn)品。
百度智能云AI人機(jī)交互實(shí)驗(yàn)室負(fù)責(zé)人李士巖介紹，目前數(shù)字人尚未實(shí)現(xiàn)規(guī)模化產(chǎn)業(yè)落地，主要原因在于數(shù)字人制作技術(shù)門檻高、周期長、成本高。打造一個(gè)高精度、高保真的非特異型虛擬數(shù)字人，動(dòng)輒就需要百萬甚至上千萬的資金投入。
李士巖表示，虛擬數(shù)字人產(chǎn)業(yè)格局中，提供建模、渲染、動(dòng)態(tài)捕捉等服務(wù)于數(shù)字人制作的基礎(chǔ)設(shè)施服務(wù)商已形成穩(wěn)固格局，大多由海外巨頭把持。但在工具、應(yīng)用層，中國企業(yè)已開始嶄露頭角。
不過，數(shù)字人規(guī)模化落地還面臨三大難點(diǎn)：產(chǎn)業(yè)鏈割裂、服務(wù)場景與演藝場景沒有有效打通、滿足高頻需求成本高。
對于虛擬數(shù)字人大規(guī)模商業(yè)化所面臨的難題，王媛婭認(rèn)為，市場對虛擬數(shù)字人的關(guān)注度會(huì)持續(xù)上升，也會(huì)有越來越多的企業(yè)投入打造虛擬數(shù)字人。但是懂技術(shù)、懂美術(shù)、又懂偶像運(yùn)營的公司太少，所以未來需要產(chǎn)業(yè)鏈各方企業(yè)合作聯(lián)合推出虛擬數(shù)字人，或者大型公司聯(lián)合多個(gè)業(yè)務(wù)部門推出。
對于虛擬數(shù)字人未來的發(fā)展，李士巖表示，數(shù)字人產(chǎn)業(yè)有三大核心推動(dòng)力：第一級(jí)是用戶需求與技術(shù)升級(jí)，第二級(jí)是政策支持與資本涌入，第三級(jí)是計(jì)算平臺(tái)的迭代。每一次數(shù)字人發(fā)展本質(zhì)上都是技術(shù)推動(dòng)的，用戶從平面的圖文影音獲取信息與交互，向?qū)崟r(shí)3D交互反饋的需求轉(zhuǎn)變。
百度集團(tuán)副總裁吳甜則表示：“百度已發(fā)布集數(shù)字人生產(chǎn)、內(nèi)容創(chuàng)作、業(yè)務(wù)配置服務(wù)為一體的智能數(shù)字人平臺(tái)百度智能云曦靈，希望通過全棧AI能力，把虛擬數(shù)字人的生產(chǎn)周期縮短到小時(shí)級(jí)別，降低生產(chǎn)成本，并且用AI驅(qū)動(dòng)生成內(nèi)容。”
