當前位置:
首頁 > 最新 > AI 造出來個「假」奧巴馬,你聽到的奧巴馬演講可能也是假的

AI 造出來個「假」奧巴馬,你聽到的奧巴馬演講可能也是假的

編者按:AI 能做的事情越來越多的,但是你可能很難想像有人竟然利用 AI 模仿起了奧巴馬,利用現有的奧巴馬聲音和視頻片段,生成非常逼真的「假視頻」。

研究人員介紹說,這項工作將有助於虛擬現實應用程序和加強現實應用程序生成人物的數字模型。

早前,華盛頓大學的計算機科學家們表示,通過對人物圖像的分析,不論是像湯姆漢克斯和施瓦辛格這樣的名人,還是像喬治布希和奧巴馬這樣的公眾人物,他們都能夠生成人物的數字模型。這項工作暗示著,只要網路上有大量的人物照片,創建人物數字模型將會變得非常簡單。

研究者們之所以選擇奧巴馬作為研究對象,是因為網上有很多奧巴馬演講的高清視頻。研究小組用一個神經網路來分析視頻的數百萬幀影像,以判斷奧巴馬在講話時面部的變化,比如他的嘴唇、牙齒,甚至是嘴巴和下巴周圍的皺紋。

在人工神經網路中,被稱為「人工神經元」的組件實際上是輸入的數據。這些組件共同協作來解決類似人臉識別和語音識別這樣的問題。這個神經網路能夠通過改變各個神經元間的關係模式,進而改變神經元的互動方式。經過不斷的反覆,這個神經網路最終就能選擇出一種最有佳的解決方案——一個模仿人類大腦的人工智慧戰略模式。

在新的研究中,神經網路通過對音頻和視頻的分析,了解與聲音匹配的各種口型。研究者們將音頻與視頻的原聲文件對比分析,然後選取與音頻匹配的口型,將它們嫁接到新視頻中。從本質上來說,研究者們是將奧巴馬多年來講話的口型合成為一個新視頻。

專家們表示,通過拍攝人們說話的視頻,然後對聲音和視頻進行分析,進而總結出各種口型以及與之匹配的各種聲音,這樣的研究方式不僅成本高,而且非常單調、耗時。相反,這個神經網路能夠通過對網上大量的視頻文件的分析和研究,幫助我們總結出口型以及與之匹配的聲音。

此項研究合作者、華盛頓大學的Ira Kemelmacher-Shlizerman指出,這項新技術的一個潛在應用是完善視頻會議。視頻會議的視頻內容可能會斷斷續續或不夠清晰,也可能被凍結,但音頻內容一般不會出現這樣的情況。因此,將來的視頻會議可能會直接傳輸人們說話的音頻,然後利用這個軟體將他們說話的聲音與他們可能出現的口型合成,形成一個虛擬的會議視頻。Kemelmacher-Shlizerman表示,這項技術還能幫助人們在虛擬現實應用程序或加強現實應用程序中與數字虛擬人物進行交談。

研究專家們指出他們合成的視頻現在來說還不夠完美。舉例來說,當奧巴馬在目標視頻中稍微轉過了臉,他的臉的3D模型就會產生缺陷,這也將導致他的部分嘴巴超出臉的範圍,與背景相重疊。

研究團隊表示他們的工作雖然可以模仿人的說話方式,但並不能模仿出人的感情。所以合成視頻中的奧巴馬的面部表情可能會出現與場合不相稱的情況,比如在嚴肅的演講中表情過於高興。但是他們也表明,如果他們的神經網路能夠從音頻中預測人物的情緒狀態,進而生成相應的視頻,那麼這將是非常有趣的研究成果。

研究者們在合成視頻時,會盡量避免在新視頻中出現奧巴馬不曾涉及過的言論。研究的主要研究員,同時也是華盛頓大學的計算機科學家的Supasorn Suwajanakorn表示,這樣的「假視頻」是可能即將發生的。

然而,這項新研究同時也提出了未來檢測「假視頻」的方法。例如,研究人員進行的視頻操作會模糊人物的嘴巴和牙齒。Suwajanakorn說:「人的肉眼可能很難發現這些細微的變化,但是將嘴部模糊部分與視頻中其餘部分作對比,程序能夠輕易地識別出。」

研究者們推測,在某種程度上,口型與說話方式之間的聯繫可能對所有人都是普遍通用的。這就表明,經奧巴馬和其他公眾人物的視頻訓練的神經網路能夠適用於很多不同的普通人。

喜歡這篇文章嗎?立刻分享出去讓更多人知道吧!

本站內容充實豐富,博大精深,小編精選每日熱門資訊,隨時更新,點擊「搶先收到最新資訊」瀏覽吧!


請您繼續閱讀更多來自 36氪 的精彩文章:

被唱衰的「百度貼吧」,二次元會是它的突破點嗎?
再現風口,小麥便利店首輪融資1.25億
富力介入萬達融創收購交易,6折接手萬達77家酒店
8點1氪:央視點名批蘇寧投資海外足球;微軟百度聯合研發自動駕駛;谷歌眼鏡回來了

TAG:36氪 |

您可能感興趣

奧特曼:當聽到百慕拉的口頭禪,能看出他就是初代奧特曼
奧特曼說話你們都聽到過,可是你看過奧特曼張開嘴嗎?
皇馬內訌?伊斯科:我不想再聽到C羅了,不會再理他了!
為什麼在巴基斯坦,巴鐵們一聽到中國就搖頭,是不願待見我們嗎?
朱亞文:一聽到他說「我要你」,瞬間就腿軟了
曾軼可《三的顏色》,能聽到和聽懂你的歌是我們的福氣
泰迪聽到主人叫吃飯後,它跑過來的姿勢我能笑一年!就是可憐了金毛!
聽到這些經典台詞就能想到的動漫,你能想到幾個
阿德托昆博:你聽到帕克這個名字,就會想到馬刺
完了,聽到泰倫盧這個「決定」,詹姆斯說啥都要離開了
有三句聽起來特別好客的話,如果你去做客剛好聽到了,趕緊離開吧
「你就是這樣養大的,不也挺好!」,再聽到就這樣懟回去
斯大林:來來來,我講個笑話給你聽,有人聽到一半當場嚇昏
孫紅雷叫「巴巴」,有誰注意熱巴說了啥?網友聽到後都沉默了
聽到「殺馬特」這個詞,你只是想笑感覺很低級,但你的哥哥姐姐們曾經都是殺馬特
孕媽最討厭聽到的8句話,一聽就可能炸毛,你碰了幾句
網友在家唱歌,貓咪聽到後跑過來伸出貓爪,喵:別唱了,難聽
泰迪聽到母親的呼喚,立馬伸出狗爪,接下來的一幕暖人心:這狗真的成精了!
我們看到的,聽到的,就都是真相嗎
泰迪聽到主人在叫它,立馬伸出爪爪,網友:這真的是條狗?