揮手、轉身、眨眼、挑眉……體驗者隻需站在普通的攝像頭前,就能被快速捕捉識别面部表情和肢體姿态,并在前方展示屏上的二次元卡通數字人分身上實時呈現、精準複制。
9月1日-3日,在2022世界人工智能大會(WAIC 2022)元宇宙核心展區,快手虛拟演播助手(Kuaishou Virtual Studio,KVS)收獲了頗高人氣,引發行業人士、參展觀衆的駐足。
“太好玩了”、“動作捕捉很靈敏”,展台前的參觀者們表示。
快手虛拟演播助手演示
“這隻是快手虛拟演播助手最基礎的功能,通過實現攝像頭動作捕捉技術,突破場景設備等限制,能快速便捷的實現虛拟人驅動直播;如果對數字人驅動的品質有更高要求,可以通過快手虛拟演播助手連接專業的動作捕捉設備。快手虛拟演播助手能夠滿足不同成本下的數字人直播的需求。”快手Y-tech AI技術中心負責人萬鵬飛在現場向觀察者網等媒體介紹。
快手虛拟演播助手是一款面向PGC(專業内容生産)的虛拟人驅動及開播工具,集成3D虛拟人和虛拟場景的一站式能力、内置自研攝像頭驅動算法、适配多種穿戴式全身動捕硬件設備、提供特效和互動玩法、支持多平台直播推流,幫助客戶打造元宇宙直播間。
快手相關負責人表示,借助短視頻和直播領域的長期技術積累,快手虛拟演播助手此次亮相WAIC,正是着眼于将傳統直播間變成“元宇宙直播間”,為直播電商、虛拟拍攝、智能文娛等帶來新的機遇。
本屆WAIC主題是“智聯世界 元生無界”,元宇宙作為虛實融合的下一代互聯技術,成為大會主角之一。
觀察者網在大會現場看到,元宇宙展區集結了快手、中國聯通、網易、影眸科技、視辰信息科技(視 AR)等多家企業。
快手虛拟演播助手目前有哪些應用場景和落地案例?快手在數字人領域還有哪些新應用?
在大會AI領Show論壇上,萬鵬飛介紹了快手虛拟演播助手、老鐵智播間、移動端混合現實引擎三大應用,以及數字人及XR制作平台、快手虛拟世界互動平台兩大平台的優勢和布局。
萬鵬飛介紹,快手虛拟演播助手作為一款面向“中之人驅動”的數字人一站式直播工具,面向真人表演驅動數字人場景,具備三大優勢:一是支持光學、慣性、攝像頭各種不同類型的捕捉方式,滿足不同層次的主播需求;二是内置了獨家的各種特效,3D場景濾鏡,并支持推流高清視頻到包括快手在内的各個視頻平台;三是打通了快手直播間,讓主播可以和觀衆産生更多的基于虛拟世界的互動玩法。
不同于快手虛拟演播助手,“老鐵智播間”則是一款為客戶提供自動化數字人直播及視頻制作能力的産品,具備三大特點:一是沒有中之人驅動,全靠AI驅動,可以7×24小時直播;二是便捷的管理平台,可以低門檻使用,降低運營成本;三是覆蓋直播、播報、數字員工等豐富應用場景。
而作為行業領先的手機端AR/MR系統,快手“移動端混合現實引擎”可以讓用戶在普通手機上就能體驗到以往在高端設備上才能體驗到的各種AR/MR效果,機型覆蓋率非常高。這秉承了快手一直以來所倡導的技術普惠理念,覆蓋高、中、低端手機機型,同時,該系統不僅可以應用于身體、室内,也可以應用在室外、街區、景區等各種不同尺寸的空間環境。
萬鵬飛在現場展示了快手移動端混合現實引擎在實時場景感知和三維重建、自動識别建築物遮擋等領域的虛實融合技術和效果,在試穿、試戴、試妝等場景的應用價值,以及大空間場景的AR、MR效果與用戶體驗。
此外,“數字人及XR制作平台”通過技術、美術的有機結合和聯合優化,為客戶提供一站式數字人及XR制作服務。“快手虛拟世界互動平台”則是支撐快手在虛拟世界互動領域各種應用的統一的PaaS平台,滿足展覽、社交、遊戲等多種場景需求。
在數字人及XR賽道大熱趨勢下,快手究竟有何優勢?
萬鵬飛認為,一是平台優勢,快手DAU超過3.47億,其中泛二次元内容消費的DAU過億,在用戶需求洞察和價值挖掘方面優勢顯著;二是容易落地,快手不僅為客戶提供了多種門檻的解決方案,滿足其不同階段需求,也實現了用戶設備的高覆蓋率,讓普通用戶通過現有設備就可以參與其中;三是綜合實力儲備,快手為客戶提供了從建模到内容制作的一站式服務,并在技術和美術結合、軟硬件結合方面經驗豐富,做到全鍊路聯合優化,在同樣成本情況下,為客戶提供更加優質的服務。
AI領Show論壇
在日前舉行的快手StreamLake發布會上,快手技術副總裁、AI技術及主站技術負責人王仲遠發布了視頻AI的三大類解決方案:智能視頻創作,智能視頻理解,數字人及XR,以助力各行各業客戶實現視頻化、智能化升級,開放100多種産品功能以及快手研發的1500個AI的能力。
除了展台互動和技術分享等環節外,快手在本屆WAIC上還參與了“攜手同行 共建元宇宙”新平台啟動儀式,這意味着該公司與上海地區的合作再一次升級。
2021年4月,快手曾與上海市政府新聞辦公室達成戰略合作,在城市推廣、産業合作、政務宣傳、媒體融合、人才培養等領域展開全方位合作。本次設立的快手上海研發中心,将作為快手在長三角地區的重要布局,承載快手人工智能技術研發、核心産品研發、遊戲項目制作、創新産品孵化等重要功能。
,更多精彩资讯请关注tft每日頭條,我们将持续为您更新最新资讯!