英國《泰晤士報》網站近日報道稱，人工智能技術将助益電影配音方式的改進。

阿甘的母親告訴他，生活就像一盒巧克力，你永遠不知道你會得到什麼——除了電影被拙劣地譯制成另外一種語言的時候。

如今，一位英國電影導演正在嘗試利用人工智能（AI）技術徹底改變我們觀看外國電影的方式：通過對演員的面部進行數字編輯，讓他們看起來就好像在說一部電影将要被配音的那種外語一樣。

斯科特·曼在2015年執導了由羅伯特·德尼羅主演的驚悚片《雙面劫匪》，卻被影片的一個配音版本驚得目瞪口呆。他由此受到啟發，創建了自己的初創企業“無瑕”（Flawless）公司。

通過AI技術改進，電影配音能夠更加拟真

這位導演說，在拍攝期間，德尼羅會花費數周時間讨論某一個場景，詢問角色會戴什麼樣的袖扣或穿什麼樣的襪子。然而當影片進行配音時，他的表演卻受到了玷污。41歲的斯科特·曼驚訝地發現，影片中整段整段的對話都經過了修改，以便使外語台詞更接近于德尼羅的口型。

他說：“這令人心碎。我們為劇本糾結了幾個月，争論哪些台詞應該說和應該怎麼說，然後卻看到它的一個外語版本，台詞全被改了。一切都感覺糟透了。”

人工智能讓配音效果走向“無瑕”

在尋找更好解決辦法的過程中，斯科特·曼受到了德國馬克斯·普朗克信息研究所的啟發，後者一直緻力于通過數字化手段重新生成面部形象。

這項研究促成了“無瑕”公司的創建。該公司使用一種人工智能系統研究演員的頭部、頸部和嘴部動作中數以百萬計的細微變化，能夠從每一幀畫面中積累知識。

這種人工智能工具從影片中提取演員的2D面部圖像，将它複制成3D形象。新的頭部形象結合了我們對于人們在使用影片配音語言時嘴部動作的現有了解。

這種工具能夠計算出某名特定演員在說那種語言時的嘴部動作，從而創建出一個新的3D頭部模型用于每一幀畫面。

一旦實現了這一步，配音演員的錄音就會被輸入系統，而圖像也會被重新轉換為2D。接下來的潤色工作則交由一個特效團隊來完成。“無瑕”公司公布的剪輯顯示，湯姆·漢克斯在電影《阿甘正傳》片段中的口型能夠與用日語、西班牙語和德語配音的台詞實現無縫對接，而傑克·尼科爾森在《義海雄風》中與湯姆·克魯斯聊天的口型也幾乎與法語配音完美同步。斯科特·曼說：“這将改變我們以全球化模式消費内容的方式。”

他說：“我們将能夠欣賞到多種語言版本的電影電視，而甚至不會意識到它們原本使用的語言。語言障礙将會消失。”

該公司的聯合創始人尼克·萊恩斯說，這個過程不同于“深度僞造”（deepfake）技術，後者是提取名人的面部2D圖像，然後用它置于其他人的身體和頭部之上。現年46歲的萊恩斯說：“人工智能技術能夠計算出每一位表演者在使用另外一種語言時嘴部動作的特定方式，但會保留他們的獨特風格。”

斯科特·曼說，當他向演員們展示經過人工智能配音後的表演時，他們都被驚呆了。他說：“每個看過我展示的人都說：‘哇，我能說法語。’”

“無瑕”公司說，它正在與電影公司進行接洽，而且正在與最大的流媒體平台之一展開合作。

随着奈飛等流媒體平台的出現，人們對配音的需求激增。在這些平台上，講英語的受衆可以觀看到外國節目，比如法語的《找我經紀人》、西班牙的《紙鈔屋》和丹麥的《權力的堡壘》。

人工智能如何一幀一幀地消除語言障礙

這套系統是通過人工智能結合特效的方式運作的。

人工智能系統會掃描電影中的每一幀畫面，觀察一名演員在說話時的頭部、頸部和嘴部動作。

在了解了這名演員說話的獨特方式後，該系統會創建一個他的頭部3D模型。

然後，工程師們會運行一項程序，該程序了解人們在使用配音語言時的典型嘴部動作，而且能夠計算出這名演員在使用這種特定語言時的獨特嘴部動作。

一名配音演員使用這種新語言的錄音會被輸入該系統。

接下來，該系統會創建一個新的演員頭部3D模型，用于這名演員與這種新語言同步的嘴部和面部動作的每一幀畫面，以确保能夠覆蓋每一個展現他們說話的攝像角度。

這些畫面随後被置于真人表演的版本上。最後的潤色工作則可以交由一個特效團隊來完成。（編譯/王雷）

來源：參考消息網

更多精彩资讯请关注tft每日頭條，我们将持续为您更新最新资讯!