大家好,我是Clippp。今天為大家分享的是「虛拟數字人」。這段時間元宇宙概念的大火帶動了很多人對未來的無限遐想,與元宇宙緊密相關的虛拟數字人的熱度也在提升。
現在網絡上經常出現各式各樣的數字人,虛拟偶像、虛拟主播層出不窮,當然伴随着數字人一同出現的還有各種争議…
今天我們就來一起探究虛拟數字人是什麼、具有哪些特征,分為哪幾種類型以及都應用在什麼行業,深入地了解虛拟數字人概念。
虛拟數字人是指具有數字化外形的虛拟人物。與具備實體的機器人不同,虛拟數字人依賴顯示設備存在,我們所知的很多虛拟人都要通過手機、電腦或者智慧大屏等設備才能顯示。
虛拟數字人宜具備以下三方面特征:
一是擁有人的外觀,具有特定的相貌、性别和性格等人物特征;
二是擁有人的行為,具有用語言、面部表情和肢體動作表達的能力;
三是擁有人的思想,具有識别外界環境、并能與人交流互動的能力。
綜合來看,就是具備四方面的能力,即形象能力、感知能力、表達能力和娛樂互動能力。
如果我們下次再看到有公司推出數字人,就可以結合這些特征和能力來判斷這個數字人的可信度,避免被借勢營銷的企業鑽了空子。
知道了什麼是數字人,接下來就要搞清楚數字人到底是怎麼說話、互動的,是背後有真人在操控,還是完全通過技術生成。
面對新興的數字人,相信很多讀者都存在類似的疑問。
數字人的誕生發展和AI人工智能可以說是密不可分,想了解數字人的運作原理,首先要知道數字人的通用系統框架。
虛拟數字人系統一般情況下由人物形象、語音生成、動畫生成、音視頻合成顯示、交互等5個模塊構成。(資料參考: 2020年虛拟數字人發展白皮書)
交互模塊為擴展項,根據其有無,可将數字人分為交互型數字人和非交互型數字人。
首先看一下非交互型數字人:系統依據目标文本生成對應的人物語音及動畫,并合成音視頻呈現給用戶。
交互型數字人根據驅動方式的不同可分為智能驅動型和真人驅動型。
智能驅動型數字人:通過智能系統自動讀取并解析識别外界輸入信息,根據解析結果決策數字人後續的輸出文本,驅動人物模型生成相應的語音與動作來使數字人跟用戶互動。
這種人物模型是預先通過AI技術訓練得到,可通過文本驅動生成語音和對應動畫,業内将此模型稱為TTSA(Text To Speech & Animation)人物模型。
真人驅動型數字人:真人根據視頻監控系統傳來的用戶視頻,與用戶實時語音,同時通過動作捕捉采集系統将真人的表情、動作呈現在虛拟數字人形象上,從而與用戶進行交互。
調研分析當前市場上的數字人,根據人物圖形維度,分為2D和3D兩大類,從外形上可分為卡通、寫實等風格,綜合來看可分為二次元、3D卡通、3D高寫實、真人形象四種類型。
接下來根據每種類型的特點,從外在形象、服飾裝扮、表情動作等方面,結合典型案例來逐一分析虛拟數字人的設計。
虛拟歌手-洛天依
洛天依的職業設定為虛拟歌姬,個性軟萌可愛、溫柔細膩,外貌特征上是灰發、綠瞳,頭戴碧玉發飾。
除了獨特的形象和性格,洛天依還能唱歌、跳舞、直播帶貨,多樣的才藝加持讓人物設定不單薄,受到很多用戶的關注。
公衆号後台回複數字人,領取虛拟數字人網站合集
虛拟助理-度曉曉
度曉曉是基于虛拟人IP的陪伴型虛拟助理。在小度助手的能力基礎上,度曉曉有虛拟人物形象和情感交互系統,具備視覺識别能力,支持自然的交流方式。
在外形裝扮上,度曉曉是紅色短發的甜美可愛風,五官比例偏向二次元風格。根據現有案例來看,度曉曉在眨眼、微笑等面部微動作以及肢體的造型,都很自然、生動,整體設計效果相對較好。
度曉曉定期更新身穿不同主題服裝、擺着各種pose的形象,每套服裝都有一個主題再帶配上各種周邊小配飾,營造出一種清新時尚的效果。
浦發銀行數字員工-小浦
小浦作為銀行的數字員工,主要進行風險評估、要聞播報、投資建議等在線服務。
從外觀上,小浦在形象上無論發型還是五官都足夠拟人化、職業化,穿着銀行職業裝,屬于比較典型的銀行職員形象。
小浦沒有很誇張的面部表情,始終以面帶微笑的狀态面向用戶,給人一種親切感。肢體動作相對較少,沒有特别誇張的動作設定,隻有固定的幾套動作。
虛拟偶像-AYAYI
AYAYI是使用Unreal引擎造出來的特别拟真的Metahuman形象。
外在形象:寫實程度更高,人物整體效果已經和真人十分接近,五官特别精緻、眼睑微斂、銀色短發,散發着一種清冷氣質。
從AYAYI社交賬号的更新來看,目前主要是分享一些AYAYI的擺拍圖片,穿着的服裝、飾品都比較真實、時尚,拍照環境都是休閑、藝術類的場景。
AYAYI人物形象的時尚感和真實感,更容易切入商業化,比如穿着特定品牌的服裝進行擺拍。
高保真數字人-Siren(塞壬)
Siren是高保真、實時、可交互數字人,用到了實時渲染、表情捕捉、動作捕捉、高保真3D掃描等前沿技術,達到了目前業界最高的技術水平。
Siren的面貌細節更加真實,可以很清楚看到皮膚的細節、眼睛的轉動、說話的神态、臉上各種各樣的細紋。不管是毛孔、細紋等皮膚質感,還是神态上的表情,都很像真人。
Siren在說話時嘴唇動作自然,效果真實。
之所以有的數字人看起來不自然,很大一部分原因是因為數字人面部表情不生動,特别是在說話時嘴唇和臉部、牙齒甚至舌頭的聯動,很容易出現動作不聯動、不真實的情況。
新華社AI合成主播-新小浩
“新小浩”是無論外在形象、面部表情、服裝搭配、說話聲音,還是肢體動作上,都是完全基于真實主持人生成。
通過語音合成、唇形合成、表情合成以及深度學習等技術,克隆出具備和真人主播一樣播報能力的“AI 合成主播”。
我們每天都會遇見各種各樣的人,即使臉上最細微的表情,我們都可以感知到,用計算機打造出來的表情,往往缺乏靈氣。
真人形象的虛拟主播的優勢在于,他的特征都是來源于真人,呈現的面貌和狀态更容易被用戶了解。如果不仔細看,可能分辨不出是不是真人。
目前國内市場上已經出現了非常多的虛拟數字人,在各行各業中有着廣泛的應用。
虛拟數字人技術結合實際應用場景領域,切入各類,形成行業應用解決方案,賦能影視、傳媒、遊戲、金融、文旅等領域,根據需求為用戶提供定制化服務。
按照應用場景或行業的不同,已經出現了娛樂型數字人,如虛拟偶像、歌手、網紅、虛拟代言人等;
助手型數字人,如虛拟客服、虛拟導遊、智能助手。
主播型數字人,如虛拟主播、虛拟支持人等。
這裡搜集的案例隻是虛拟數字人的應用的一小部分,還有很多優秀的應用案例等待着大家去一起發現。
國内有很多互聯網平台在研發虛拟數字人,我也從中收獲了大量的信息和資料,這次把這些平台分享給大家:
搜狗AI開放平台
網易伏羲、網易易現
百度AI開放平台
騰訊雲、騰訊NEXT Studios
訊飛開放平台…
,更多精彩资讯请关注tft每日頭條,我们将持续为您更新最新资讯!