程式控制教育學院

你離工程師的距離只差一個關注

在這個數據爆炸的時代，收集數據本身是不夠的。它需要被加工，切片和切割，以獲得經營和發展業務的洞察力。不幸的是，當今世界上大多數可用的數據是非結構化的和隱藏的，使得在沒有顯著的人類參與的情況下難以處理。媒體行業的大部分數據都屬於這一類，但已經開始改變。

任何視頻文件，並將大量的非結構化數據交織在其結構中這需要密切的人類參與才能理解和解碼。它需要人力來完成內容管理，處理，解釋，質量檢查等最基本的工作，然後才能標記為可供分發。有趣的是，人工智慧和ML演算法，特別是深度學習，現在達到了與人類精確度相當的水平，以大規模地執行大部分這些任務。人工智慧處於有利位置，既可以自動執行工作流程活動，也可以從隱藏資產「數據」中獲得巨大的洞察力。因此，媒體行業目睹了自然語言處理（NLP），面部識別，異常檢測等領域的幾位獲獎者，其中人工智慧以其無與倫比的效率實現大規模自動化。2107標誌著人工智慧在廣播中開始收穫豐厚紅利的重要一年，內容管理，後期製作，廣告和更多垂直行業。他們說，這只是AI之旅的開始！

預測分析和深度學習

預測分析使用了一個重要的假設，即未來的行為可能受過去趨勢的影響，並且在大多數情況下，它在一段時間內保持良好。在這些預測模型的基礎上，一組假設將多個獨立變數結合在一起（例如，對於內容個性化的變數——如年齡、性別、財務狀況、教育、內容興趣），以建立統計相關性。正是這些相關性的集體強度和程度，可以預測未來的行為。在這裡閱讀更多關於預測分析的知識。最近，利用神經網路來產生人類大腦般的分析能力的深度學習正在使機器學習到更高的認知水平。通過模擬人腦對情境的反應，深度學習帶來了從舊學校暴力決策樹到更真實的事物的顯著轉變。

媒體和娛樂行業的機器學習重點領域

過去幾十年來，AI和ML一直在學術和研發領域，直到最近幾年，真正的產業整合才開始取而代之。人工智慧帶來的技術可以自動執行大部分人力密集的任務，並且具有可擴展性，計算速度和可重複性等優點。通過自動化內容管理，媒體操作中的現有任務以及改善客戶參與度和體驗，它有很大的潛力來實現嚴重的成本節約。例如，AI可以自動執行複雜的音頻/視頻同步工作，從而節省大量的人工人力，並減少人為錯誤。以下是媒體和娛樂行業進入前十大AI轉型領域。

1、深入的視頻分析，翻譯，轉錄和標記-? AI花了幾年的時間來完善手寫識別並迅速轉向自然語言理解（NLU）。現在它已經加速超越自然語言和元數據處理，深入深入分析內容。機器主導的自動化將口述音頻轉換成可讀文本，轉錄變得近乎實時。我們都看到了Alexa，Cortana和Google語音的早期到來。神經網路訓練系統正在取代傳統的單詞轉換，通過增加新的情境和意圖相關維度。預計未來3年，AI將完全接管轉錄和翻譯活動，並將駐留在日常使用的音頻設備上。

深度視頻分析是另一個有趣的領域，通過學習場景變化，位置參考，語音，面部和物體識別，導致視頻見解的多方面擴展。這種智能在豐富內容分類和適當標記內容方面有很長的路要走，這提高了內容鏈接，搜索和關聯的準確性。在這裡，人工智慧通過機器驅動索引，元數據標記，編目等方式顯著改變整個內容管理環境，將手動流程轉變為高度自動化的工作流程。視頻翻譯為多種語言和方言以及多語言字幕，有助於將內容的可定址市場擴大到比以往更多的受眾。

2、基於語音的虛擬助理-?在過去的兩年中，像Alexa，Google家庭和語音遙控器（如Siri和Roku）的語音助理已經開始通過完善基本的菜單導航功能來消除笨重的電視遙控器。接下來是在用戶跟進命令的幫助下進行內容搜索和發現的情報。使用監督式學習演算法的人工智慧現在可以為虛擬助手提供動力，將消費者的知識圖，地理坐標，語音輸入和豐富的內容元數據（演員表，摘要，報價，位置等）結合起來提供個性化推薦。虛擬助手了解語言特徵，情感和用戶意圖的能力使他們更智能，直觀和成熟的對話系統增加了更好的客戶體驗。隨著個人數字關係變得更加深刻，

3、優化的視頻編碼和傳輸-引入自適應比特率（ABR）流後，視頻流有一個主要的優點。ABR編碼將原始文件的小塊創建為不同的比特率，以基於可用帶寬為客戶端提供服務（請閱讀此處以了解更多關於流媒體）。通過引入技術來提高固定比特率分塊到基於場景的編碼，人工智慧正在付出更多的努力。人工智慧通過學習多個質量度量的場景複雜度，可以確定所需的壓縮級別並給出編碼視頻，系統可以確定幀級複雜度和最佳壓縮參數，同時保持質量跟蹤。Netflix掌握了這項技術，即使在比特率較低的情況下，也可以生成精確的編碼流。這種新的編碼方式正在徹底改變為不斷增長的新興經濟體觀眾提供不間斷視頻的方式，在這些新興經濟體中，手機上的低帶寬網路是觀看視頻的最主要平台。人工智慧還通過根據觀眾位置，網路擁塞等優化所需比特率來提高在線媒體播放器的性能。

4、視覺識別-面部識別?和物體識別是一個重視視覺處理的AI區域。它涉及視頻和靜止圖像中個人和物體的識別以及隨時間的相對變化。雖然這種視覺處理對人類來說是自然而然的，但是機器能夠壓縮大量數據變化以達到期望的精度水平，這是一項艱巨的任務。最近，人工智慧和機器學習越來越能夠掌握視覺感知 - 面部和模式識別，為內容編輯和自動化內容創作開闢了豐富的途徑。想知道Facebook和眾多照片應用程序如何用你的朋友的照片標籤做出驚人的工作; 這是所有AI和ML在製作中

5、異常檢測-?在過去的幾年中，在線視頻不成比例地增長。YouTube，Facebook和在線網路為業餘愛好者和專業人士成為內容創作者並接觸大眾觀眾創造了無限的機會。今天，對於每秒鐘產生的視頻和圖像數量來說，監控和標記不適當的內容（盜版，暴力，成人等）變得人力不可能。這再次是機器學習服務，在這個領域證明了這一點，大多數網路在上傳時創建了基於AI的自動檢測工具。Google的雲視覺API就是這樣一種服務，它可以為標記內容做出適當的改進。雖然假冒內容的創作已經成為人工智慧越來越大的威脅，但是這種人工智慧技術在限制惡意行為方面來拯救

6、內容指紋識別-?根據捕獲樣本內容片段的原則，為識別創建獨特的指紋，內容指紋識別在媒體行業已經走過了很長的路要走。隨著內容繼續隨著多渠道分布而不斷增長，基於AI的指紋識別技術在應用中發揮了重要作用。一些用例是

通過有效的搜索找到精確和類似的配置文件媒體，Shazam是一個現場模型

使用區塊鏈對內容進行微許可進行付款和跟蹤使用情況

識別和跟蹤消費者觀看行為，衡量廣告

廣播監視來驗證事件發生

內容保護音頻，視頻和圖像，追蹤未經授權的分發

7.視頻質量評估-?視頻壓縮對視頻實現合理的傳輸速率至關重要。但是，壓縮是有損的，會引入損傷和偽像等工件。視頻質量評估一直是內容分發之前的關鍵過程，並且隨著多通道分布而逐漸擴大。傳統上採用兩種標準方法，無論是單獨使用還是聯合使用都用於質量評估。通過播放內容和檢查錯誤以及使用VQM，PSNR，MSE，SSIM等指標進行更加自動化的基於參考的評估，實現基於人工的可視化分析。雖然前者需要大量的人力，但後來在準確性，非實時性以及對參考模型的依賴方面面臨挑戰。人工智慧和機器學習正在通過掌握基於非參考的視頻質量評估來改變這一切。人工智慧使用廣泛的功能集和從錯誤模式中學習能夠提供接近實時的質量評估。在視頻工作流程中實現質量控制自動化的巨大潛力，並在縮短內容發布時間表方面帶來無與倫比的效率

8.虛擬現實和增強現實?--AR / VR市場潛力巨大，但由於成本，內容成熟度和易用性方面的挑戰，該技術在很大程度上表現不佳。雖然虛擬現實（VR）專註於創造360度身臨其境的體驗，但增強現實技術（AR）處理計算機圖形元素與真實世界元素的疊加。對於很大一部分VR / AR應用程序和服務仍然非常粗糙，AI通過提高數據質量和決策制定來帶來新的能源。人工智慧幫助圖像準確無誤，更好地理解用戶輸入和意圖，內容關聯，情景化以及內容創作，為用戶打造更加身臨其境的體驗

9.後期製作-?大量的創作過程基於定義的規則和技巧，因此可以通過機器學習演算法掌握。人工智慧系統可以自動進行劇情識別，場景選擇，腳本等各種創作過程所需的地面工作。聽說 摩根？去年9月發行的一部基於人工智慧的科幻電影與電影主題本身有共同之處。電影預告片雖然由人工編輯完成，但由AI使用IBM Watson提出。在這裡，沃森被訓練從相似主題的預告片中學習，並選擇電影中的關鍵場景，後來將它們縫合在一起製作最終預告片。一個很好的例子，AI可以選擇場景，插入視覺效果，並建立一個令人信服的人類編輯像拖車。以下是AI進入的更多領域

對視頻內容進行結構和語義分析，以幫助創建短片視頻片段，用於新聞，視頻分割以及用於粉絲參與的特殊興趣內容。

腳本打樣，內容清理，場景排序和電影編輯的第一通。給定一個腳本上下文，創建多個具有評分的場景表演供選擇

在緩慢移動內容捕捉中進行視頻瀏覽以創建僅供參考的內容

最近IBM與美國公開賽合作，通過認識重要比賽時刻來提供體育亮點。人工智慧能夠在體育和新聞中快速識別內容並聚合相關內容，這可以徹底改變體育和新聞報道的業務，因為它現在已經存在

10.內容製作

內容結構和基於對象的分析已經開啟了人工智慧協助實際內容開發的新途徑。從屏幕上角色的行為，走動，談話和所有可能的面部表情的細節中學習，AI系統可以創建虛擬表演。看到如何創造像真正的表演這樣的生活真是令人驚訝 - 檢查美國總統奧巴馬的一個他從未給出的演講剪輯，留下的想像力很少。人工智慧在內容創作領域仍然在不斷努力，並且在許多領域它可以使生產過程受益

通過學習流行名人的流行特徵，表情，角色和風格，創建虛擬人物角色（僅限數字化身）

使動畫電影中的計算機圖形工作自動化，取代人為密集的角色動畫，但效率更高

概要

人工智慧和機器學習有潛力影響基於一系列規則的任何事情，以及機器可以建立和學習模式的地方。AI和ML技術有其自己尚未探索的領域和障礙，但是為實現更大的目標而定位，並承諾具有無與倫比的能力。隨著金融服務，高科技和電信業迅速採用人工智慧，媒體和娛樂行業在自動化工作流程方面也不甘落後。

程式控制課程大綱

長按識別與十萬工程師共同成長

喜歡這篇文章嗎？立刻分享出去讓更多人知道吧！