為了讓普通人變身邁克爾·傑克遜,技術宅們又拿出了新武器
技術宅們有一顆不安分的心,尤其是有了 AI 技術作為他們的新玩具之後,世界似乎改變了很多。
加州大學伯克利分校的研究人員嘗試用 AI 技術讓不會跳舞的人瞬間變身舞蹈大師,這聽起來有些不可思議,最終效果有些讓人意外,先來看看這段視頻:
對技術宅來說,跳舞是不可能的,但用 AI 技術既然能偽造聲音和畫面,那讓人學會跳舞似乎也不是很難。早前利用 AI 技術,科學家可以把一個人說話時的嘴型和發言內容,替換到目標任人物上,實現「偽造總統」的目的,那麼這樣的方式理論上同樣適用於跳舞的人。
於是伯克利分校研究人員有了這個大膽的假設,首先利用神經網路對事先錄製好的專業舞蹈視頻進行分析,將舞蹈動作會變成模型信息,這樣的模型最終只保留基本的動作信息,成為類似 CG 製作中的動作捕捉模型。
圖自文末研究論文
利用這套模型,科學家還需要對目標人物進行樣本採集,從而構建出他們獨特的模型信息,之後將動作模型套入真人信息當中,從而「偽造」出真人動作的畫面。
藉助神經網路,將動作模型嵌套在目標人物身上,最終形成以假亂真的效果,這聽起來容易,但背後也有不少難點。首先,舞蹈動作不能動作太大太複雜,一旦運動幅度很大,畫面就會出現不協調的感覺,甚至會有一些明顯的畫面「碎片」,比如視頻最後部分的芭蕾舞蹈。
GIF
另外,由於神經網路不能為鬆散的外套建模,所以視頻中「偽造」的舞者都必須身穿上緊身服,這也是目前很多在 AI 技術上遇到的難點。它並不是百分百完美的複製。
但這項技術的確存在巨大的擴展空間,比如在影視娛樂行業,利用專業舞蹈演員的動作去製作三維動畫,或者通過這種方式打造更具有沉浸感的體感遊戲,聽上去都很有趣,我們之前曾經寫過的遊戲中的尬舞也可以通過這種方式呈現。而且,儘管目前還不能完美複製,但距離變身邁克爾·傑克遜的那天似乎也不太遙遠。
GIF
當然,AI 技術一旦濫用必然會造成一些危害。之前被濫用在色情行業的 AI 換臉技術就讓不少人擔心,這一次複製舞蹈動作似乎更會讓人產生疑慮。好在技術始終都具有兩面性,能用 AI「造假」,也就能用 AI「識真」,也有不少研究者將鑒定 AI 造假作為課題,至少在現階段,這樣的實驗性質項目不會造成太大擔心。
按照團隊的初步想法,他們希望讓每個不會跳舞的人都能找到娛樂的感覺,畢竟不是所有人都能像舞蹈大師那樣,這樣的自娛自樂看起來也倒挺符合極客們自嗨,如果你感興趣,不妨了解一下他們的論文報告。(編輯:高一洋)
論文地址:https://arxiv.org/pdf/1808.07371.pdf
頭圖來自視覺中國

