原創 以殷 果殼如果你是熱門綜藝節目《演員請就位》的粉絲,估計你最大的槽點就是,為什麼現在的流量明星們演技如此堪憂?有什麼辦法能夠把導師團那些老戲骨的演技,迅速移植到舞臺上那些流量明星身上?也許,基於人工智慧影象識別/生成技術的Deepfake,能夠提供解決方案。當然,Deepfake技術現階段的名聲不大好,因為最“主流”的應用場景,就是成人色情影像的“明星換臉”。除了這些,Deepfake還有“正道”可行嗎——還真有,今年年初,一名來自芝加哥的龍套男演員劉易斯·惠勒(Lewis D. Wheeler)在新冠疫情橫行,幾乎揭不開鍋的情況下,接到了一份特殊的“演出通告”:麻省理工學院兩位視覺藝術家,佛朗西斯卡·帕內塔(Francesca Panetta)和哈爾西·布根地(Halsey Burgund),請他出演美國前總統理查德·尼克松。
捕捉演員的聲音和動作丨https://moondisaster.org/一到片場,哦不,麻省理工學院的虛擬現實實驗室,惠勒才知道這個通告和自己以往所接到的完全不一樣:自己被看中的原因,並不是因為容貌酷似尼克松,而是因為相似的聲線。而他所要做的,就是一字一句地模仿這位前總統的說話方式,把1969年阿波羅11號登月萬一失敗後,尼克松新聞釋出會將採用的預備演講稿一小段一小段地通讀一遍。同時,惠勒的嘴部動作被研究人員利用動態捕捉技術收集,再與尼克松的臉部模型精確匹配。另外,利用自然語言生成技術和深度學習技術,惠勒朗讀的音訊則與尼克松原本的聲音檔案相混合,聽起來更加流暢自然。隨後,一段完美無缺的“惡搞舊聞”式影片誕生了:尼克松一臉沉重地召開新聞釋出會,宣佈阿波羅11號的登月行動不幸失敗。
“登月者長眠於月球”丨https://moondisaster.org/當然,麻省理工虛擬現實實驗室花了那麼大力氣,並不是為了做個假有聲影片給自己在社交媒體上漲粉,而是在探索如何最佳化人工智慧圖形識別與生成技術,並完美地將視覺效果與聲音融合在一起。畢竟,現有的Deepfake技術也很難實現電影層級的“一鍵換臉”,在手機影片上看到的小缺陷,比如表情和嘴部動作不協調,在大銀幕上會被放大數倍,產生嚴重的違和感,如果非要應用於電影,也需要大量手動的微調才能確保高質量,而價格更是令影視公司望而生畏:高階的視覺效果通常每分鐘要花上數百萬美元——還不如直接請大明星加入卡司呢!直到今年6月,迪士尼的研究人員才展示了第一款具有百萬畫素解析度的Deepfake模型,比傳統模型的256*256解析度高得多,接近逼真效果。但它的功能也相當受限,只能應用於那些人物形象直視鏡頭,光線充足的影片,如果拍攝角度與光線不佳,效果就會大打折扣。
迪士尼的高解析度一鍵換臉丨Disney Research Hub當然,很多獨立視覺藝術家,也在堅持用Deepfake技術結合真人演員,拍攝一些明星與名人的“換臉”短影片,但他們一般會在影片放上Youtube或其他流媒體平臺時,提示觀眾這並不是真實的影像,而是某種“戲仿視覺藝術”。比如一位前衛視覺藝術家巴納比·弗朗西斯(Barnaby Francis)就在instagram上拍攝了一系列名人Deepfake 影片,從英國首相鮑里斯到好萊塢名媛金·卡戴珊,藉助這些名人形象之口,來反思一些尖銳的社會議題,比如網紅應該如何看待“黑粉”,以及網路平臺該為公眾個人隱私的洩露負什麼樣的責任。當然,對於中國網民來說,成熟的Deepfake技術最受歡迎的應用方向,可能就是把國產小鮮肉的臉換到專業演員的臉上來,用以拯救他們的演技。這樣真是一舉兩得,老戲骨們可以重返片場開工,而你的偶像也能瞬間變身演技派,一顰一笑之間回味無窮,追劇再也不用開兩倍速了!