tft每日頭條

 > 生活

 > 三維重建與人工智能

三維重建與人工智能

生活 更新时间:2024-11-30 10:43:52
如何突破人機交互的局限?

三維重建與人工智能(數字重建技術專家)1

造就第388位講者 吳小毛
  • 粒界科技創始人

我是吳小毛,粒界科技創始人。

今天我們看到很多優秀的作品,有的是影視作品,有的是動漫、遊戲,但大家是否意識到,在過去的幾十年間,我們觀看這些媒體作品的方式,幾乎沒有發生改變:從電視到電腦,再到現在的手機,我們始終依賴着一塊或大或小的屏幕。

這種方式是否能得到變革?人們獲取娛樂的方式是否能更進一步?帶着這些問題,我創辦了粒界科技。

我一直以來都在從事遊戲的技術工作,此前在Crytek德國法蘭克福總部擔任項目技術總監。

在Crytek,我從零開始創建了Cinebox團隊,帶隊研發Cryengine遊戲引擎,參與制作了次世代遊戲《孤島危機》系列及Xbox one首發大作《羅馬之子》。

在制作這些3A級大作的過程中我發現,遊戲的品質越來越高,畫質甚至已經接近CG級别,那我們是否可以運用這些技術來制作影視作品呢?

在過去的8年時間,我便帶着團隊把遊戲技術應用到了影視行業,試圖颠覆動漫和電影的制作方式。雖然這是一個漫長而從未有人開拓過的過程,但我也清楚一個全新的技術對一個行業所意味着的震撼力和革命性。

三維重建與人工智能(數字重建技術專家)2

我也曾帶領團隊參與制作了《猩球崛起》和《移動迷宮》等好萊塢電影的特效,一般來說,每一幀電影級别的影視特效渲染,短則需要30分鐘,長則幾小時乃至幾天。

接下來我給大家演示的這個視頻,就使用了我們的全新技術,是完全使用這種毫秒級的實時渲染實現的。

三維重建與人工智能(數字重建技術專家)3

這個視頻,是我們為玄機動畫和福煦影視制作的動畫作品,今天玄機科技的沈樂平導演也在我們的現場,他是中國乃至全球第一個使用這種技術的導演。

這會是一個曆史性的時刻,當我們使用這種全新的技術來制作動漫作品,原先兩個月一集的制作周期,将縮短至一到兩周。在今年,将會有越來越多的影視制作公司參與進來,一起推動這個進程。

我認為,這個變革将倒逼好萊塢革新其制作流程。

當遊戲技術革新了影視制作之後,下一步會發生什麼呢?這就是我今天要着重和大家探讨的“人機交互”話題。

假設遊戲、影視和VR/AR技術能夠更為緊密的結合,假設科研和産業界能更為緊密的結合,有一個兼具行動力和技術前瞻性的企業,能夠将頂級的技術有機整合起來,并創造出極高的用戶體驗感,那我覺得“人機交互”的未來是可以這樣的。

三維重建與人工智能(數字重建技術專家)4

這是我們團隊用一周時間拍攝制作的一個視頻,模拟的是未來當人們不再需要手機的一種社交方式。

大家可以想象,視頻中的眼鏡其實并不是一個實體,它會是一個電子虛拟眼鏡,你可以非常輕易地戴着它去任何地方,你眼前的畫面都是以數字疊加的方式呈現:

動一下拇指便可滑出一個可縮放的虛拟顯示屏,挪動一下食指便可以複制或切換不同的顯示界面,它也可以随着你的頭部旋轉進行位置同步。

三維重建與人工智能(數字重建技術專家)5

其實我們的腦洞可以再大一點,當手機和屏幕被取代之後,我們還能不能更進一步呢?

這是我對人類與數據交互的一個終極設想:人其實可能就是這樣在被模拟着,所以大家在走路、跑步、開車、坐飛機的時候,極有可能不過是在模拟器裡的沉浸式體驗而已。

更為極端的想法是連皮膚都是模拟的,我們看到的皮膚是一個數字影像,我們看到的和摸到的皮膚都是假的,都是傳感器的一個反饋而已。所以我們也許被包圍在一個與人形狀一樣的容器中,裡面有我們的器官、骨骼、肌肉、經脈和血液。

更進一步極端的想法是,我們可能連這些器官都沒有,而隻有一個接受這些刺激的意識而已。

這些都有待于我們進一步探索和驗證。我認為在我的有生之年,我們的模拟器起碼可以和我們的皮膚接觸,并高密度精确地賦予我們新奇的感覺和體驗,拓展我們的認知及體驗。

所有這些場景的實現,都極度依賴于一個數字模拟的引擎,而目前較為完備的數字模拟引擎便是遊戲引擎。

遊戲引擎的品質往往受限,支持高分辨率、高品質的同時,還需要保證60—90幀每秒的幀率,是一個巨大的挑戰。而我帶領團隊在過去的10年裡在遊戲引擎領域也取得了重大的突破。

有了經過遊戲技術和影視技術的結合,而且又适合下一代交互顯示的數字引擎,我們便可以以毫秒級的速度顯示以假亂真的數字内容。

但為了和我們的現實世界無縫融合,還需要把我們的現實世界還原為數字世界。而目前的還原手段都極其緩慢,完全無法适用于實時的人機交互場景。

我們需要的是一個能夠在可預測時間内逐漸收斂為現實世界1:1的複制版現實世界,并最好還能夠和顯示時間保持同步的更新,或者起碼延遲的時間不超過1—2秒。

即使用超級計算機來進行并行處理,要達到我們需要的交互模型的質量和數量在10年内都難以完成。有沒有解決的方法?有!

“數字重建技術”就是這個課題的核心,舉個例子,如果我想把我眼前的觀衆席編程為一個汪洋大海的話,除了顯示技術之外,我還需要檢測地面的高度、整個劇場的尺寸等等,這些就需要依靠計算機視覺技術,當所有的這些數據收集完成後,我就可以拉入一個大海的“素材”,通過數字重建技術實時實地地模拟海洋。

三維重建與人工智能(數字重建技術專家)6

通過這一技術,我們制作了一個1:1的數字城市,這個是我們幫廣州市制作的100平方公裡的東莞市數字模型項目。裡面所有的道路、湖泊、樹木、車輛、房屋都是按照1:1的比例還原成的數字模型,你可以進行任意的修改,再通過虛拟現實技術進入其中遊玩,比如在街道上開一把極品飛車,或者與你的愛人找一個大廈的天台共進晚餐。

三維重建與人工智能(數字重建技術專家)7

這個是我們和阿裡巴巴ET城市大腦合作的一個項目,我們制作的一個杭州中心城區的數字展示,也是1:1還原的。這裡是環城東路,行駛在上面的汽車全是通過人工智能技術駕駛的數字汽車,不管是交通信号燈的調配,還是政府的智慧管理,都可以用非常直觀的方式實現。

通過剛才的演示,我們可以發現,每一個單點的技術突破都是最前沿的,但是怎麼去把這些技術融合起來,使得我們能夠往“終極未來”方向推卻是非常難的事情。

我們的“終極娛樂”和“生活”是不可分割的。有人問我,吳博士,你為什麼不去做一個遊戲引擎呢?我說,以後的遊戲就是生活,生活就是遊戲,生活和遊戲是完全無縫對接的,沒有任何區别。

我們剛才看到的“數字城市”,當它不斷量産、不斷由政府推動,再加上數字掃描設備和數字重建技術的普及,我們真的可以創造一個“數字地球”,一個融合和平行于現實世界的數字世界,它疊加在現實世界之上,你可以選擇生活在現實世界,也可以選擇活在虛拟世界。

那時,我們每個人都會擁有一個“數字身份證”的概念,我們會和AI共存,這就是我所認為的終極人機交互,也是我所期待的“終極娛樂”形态。

三維重建與人工智能(數字重建技術專家)8

對于我這樣一個長期奔波于上海、廣州、德國的人,我就非常希望有一款設備,讓我跟我的團隊可以跨國實時地面對面交流,觀察他們的表情和說話的語氣,一起修改PPT,跟進項目進度。

另外,由于我的父母和我的姐姐很早就去世了,我的爺爺我也沒有見到過,我就希望有一個設備,可以根據我親人的照片重建他們的形象,讓我能跟他們進行交流,說說話。

經過一些落地的工作和這些情緒的推動、資本的推動,我相信未來人機交互的可行性。一個真正的革命性的提升終将到來,謝謝大家。

編輯:丁一洲

審校:其奇

造就:劇院式演講,發現創造力

更多精彩内容,敬請點擊藍字“了解更多”。

,

更多精彩资讯请关注tft每日頭條,我们将持续为您更新最新资讯!

查看全部

相关生活资讯推荐

热门生活资讯推荐

网友关注

Copyright 2023-2024 - www.tftnews.com All Rights Reserved