英特爾詳解5G將如何助力VR的未來發展

原標題：英特爾詳解5G將如何助力VR的未來發展

來源：億歐智庫

摘要：英特爾中國研究院通過重點研究通信和計算融合的方式，解釋了5G在面對巨大數據洪流時數據處理和傳輸的方式，通過邊緣計算的新方法，使VR達到傳輸要求。打造一個高效的通信和計算系統，通往我們設想的遠程沉浸式互動的未來。

通信架構實驗室主要是致力於無線通信基礎架構的研究，我們主要是採用通信和計算結合的方式打造高效的端到端的通信系統，提升用戶體驗。今天我給大家介紹的主題主要是彙報我們 5G 和 VR 結合的工作——「通信和計算融合，引領VR未來」。

主要介紹三個部分：

第一，5G 主要面對的數據洪流，從架構上怎麼支持 5G 的數據洪流。

第二，介紹研究院對於遠程沉浸式互動的願景。

第三，通信與計算融合解決移動 VR 關鍵問題。

我們研究工作的重點主要是通信和計算融合的方式，為什麼需要通信和計算融合呢？大家如果從互聯網廠商的角度可能認為通信系統基本上對我來說是透明的，我不需要知道你通信到底做了哪些事情，只需要把信息從一端傳到另一端就可以，為什麼通信和計算要結合起來，有什麼好處？

丨5G 如何應對龐大的數據流

主要的出發點是數據，怎麼處理數據和傳輸數據，特別是 5G 將來所要面對的數據洪流 。大家肯定都是對摩爾定律非常熟悉，宋院長（英特爾中國研究院院長宋繼強）也介紹摩爾定律如何實現每18個月我們晶元的能力翻一番。

而在通信領域，通信系統通信速率的發展以及我們對移動通信數據的需求，甚至是超過了摩爾定律。比如說 2016 年全球的移動數據通信量是增長了 63%，如果按照這個速度下去，兩年實際上就翻了 2.5 倍左右。它的增長速率甚至超越了摩爾定律的發展。為什麼？借用十九大的一句話，滿足我們日益增長的對美好文化生活的需求。這是一個指數定律。

今天圍繞的主題是VR和5G，為什麼VR需要特別大的數據容量，為什麼VR在數據洪流里會佔據大量的流量呢？目前互聯網的最主要的傳輸內容是視頻，將來VR是代表更高質量視頻的未來。

我們主要研究系統架構，在5G系統架構裡面怎麼樣滿足一個速率洪流的要求，主要是採用計算和網路融合的方式，在端到端的部署、計算和網路系統來滿足數據處理和傳輸的要求。

在3G、4G時代，網路是網路，數據和雲計算是雲計算功能，對於一個雲計算的應用來說，網路基本上是透明的，它的傳輸容量在接入網端的傳輸容量和核心網的傳輸容量，骨幹網的傳輸容量是一致的，你發的任何一個請求都會到雲計算中心處理，然後再把結果返回給你，這樣在整個容量是一個一致的管道的容量。

在4G的後半期我們已經引入了邊緣計算，邊緣計算的目的主要是應對在網路邊緣的數據傳輸和處理的要求。我們加入邊緣計算，可以對很多邊緣產生的數據進行實時的處理和反饋，比如智能汽車產生的數據，智能工廠產生的數據，這樣就不需要把所有的數據傳到雲計算中心再進行處理。 它有兩點非常明顯的好處，第一是時延非常低，滿足物聯網的應用。第二是減少核心網的帶寬。 雖然我們的5G會將邊緣的容量擴展得很大，比如說100倍到1000倍左右，核心網不可能擴展到1000倍。

在5G和下一代會是什麼樣？會發生什麼呢？ 在第三階段的時候，我們認為它的計算能力會進一步的下移到智能終端 。比如，車或者手機實際上就是一個智能終端，家裡的感測器和路上的感測器很多都可以連到智能終端上，5G的網路會把整個物聯網設備、智能終端和邊緣計算的能力、雲計算的能力統一起來，所以我們能夠打造一個端到端的網路，同時也是一個端到端的計算平台，來應對5G的數據洪流。

中國研究院也有非常多的智能機器人方面的研究，我們把網路和機器人連接起來，同時機器人能夠把360度視頻和聲音實時的傳輸到客戶端，你可以對機器人進行控制和真實的世界進行互動。這能達到什麼效果呢？ 就好像在任何時間你都會瞬間的轉移到世界上任何一個角落，和一個真實的環境進行互動，這是我們設想的一個超越目前AR和VR遠程沉浸式互動的未來。

能支持什麼樣的應用呢？我們覺得非常多的應用，像遠程購物，你現在是在北京，你可以一下子就跑到美國的超市裡進行購物，從貨架上親自把你想要的東西選下來，你就再也不用擔心假貨。還有遠程的旅遊，比如說你在一個你喜歡的時間和地點，比如說慕田峪剛下過雪，或者夕陽西下的時候，一下子跑到那裡，可以親自體驗一下那個美景。

還有社交的功能，大家回家都非常少，在外地工作的時候，有了我們這個系統可以瞬間轉移到你的家裡，和你的父母進行聊天，好像你真的回到家裡身臨其境一樣，這是我們設想的遠程沉浸式互動的未來。我們用什麼樣的技術實現呢？下面跟大家介紹一下。

VR最主要的肯定是要做內容，我們剛才也說目前的VR內容2K、4K，它的清晰度還差得很遠，我們怎麼樣產生高質量VR的內容呢。如果你體驗過VR的視頻可能會有一些體驗，目前的VR視頻除了是好萊塢製作的大片，基本上VR視頻內容都是2D的，因為3D VR視頻生成是非常複雜的，製作難度也大。

所以，我們英特爾中國研究院研究的目標聚焦兩點：

第一，3D VR視頻能實時合成，能夠產生高質量的內容。

第二，怎麼實時產生內容滿足我們對遠程沉浸式未來的要求。

我們的設備大家可以看到它有非常多的攝像頭，有17個，每個攝像頭是2K的解析度，為什麼需要這麼多的攝像頭，實際上主要是為了在水平方向能夠在任意方向差值生成一個3D的內容，需要每個攝像頭之間有比較多的重合區域，所以需要非常多的攝像頭。

3D VR的合成演算法非常複雜，特別是產生一個沒有瑕疵的3D視頻，你要消除它的鬼影效應，消除拼接的瑕疵，採用非常複雜的光流演算法，即使是目前最強大的伺服器和最強大的台式機也很難完成實時性的功能。

我們開發了分散式的處理平台，是非常高密度的分散式處理平台，是2.5U高的機箱，在這裡可以插入12個至強CPU卡，同時插入12塊FPGA卡，中間有600G左右的互聯能力。 對視頻VR處理來說，對實時合成來說一個主要的功能就是怎麼樣實現精準的同步，從處理的角度實現精準的同步，這個平台也可以支持 。 通過我們演算法的研究，通過實時處理的加強，希望我們能夠真正的達到產生一個非常高質量的，比如說現在產生8K的高清的內容，滿足將來的要求。

我們有了內容之後，下一個面臨的問題是怎麼樣把這些內容傳輸到客戶端。剛才說了VR的傳輸要求是非常高，整個的帶寬需要是100兆到1Gbps。同時，延遲需要非常低，只有十幾毫秒到二十多毫秒。目前的網路基本上是沒有辦法滿足這個要求，所有移動的網路是有接入網，有核心網，有骨幹網，所以在任何的兩個用戶之間傳輸，即使你是在離得很近的兩個用戶傳輸，實際上要走一大圈，中間需要經過非常多的設備，即使優化得很好，最好的效果只能達到50毫秒到100毫秒。

丨這樣有兩個特別顯著的好處：

一是通過通信和計算結合的方式，採用邊緣伺服器能夠顯著降低從移動到顯示的時延，本來是50到100毫秒，現在只是10到20毫秒。

二是能夠大大降低無線通信帶寬的需求。如果不採用這種方法需要1Gbps帶寬，採用這種方法可以降低2到3倍。通過這種方法我們能夠打造一個高效的5G網路傳輸系統。

還有一點比較重要的：可靠性。 因為VR的傳輸它對數據傳輸的可靠性要求非常高 。一個視頻如果離得很遠，看電視的時候突然有一些瑕疵可能感覺比較明顯，但不會感覺特別不舒服，但是如果一個VR眼鏡在顯示一個視頻的時候，如果突然感覺有一幀丟失了，就需要很長的時間才能恢復出來，這時候會感覺到特別的不舒服。

怎麼樣滿足這個要求呢？當然，如果我們僅僅從通信設計的角度去設計一個速率非常高，延時非常低，同時容錯性非常好的系統，這也是可以做得到的，但是整個的成本和效率就會非常低。我們也提出用通信和計算結合的方式，我們把整個頭顯端的計算功能增強，在頭顯端做一些容錯性處理，比如把非同步時間扭曲的功能加到頭顯端。

舉個例子，通過邊緣伺服器或者是個人的筆記本，把視頻、遊戲傳到頭顯端，第一幀會正確接收，當第二幀傳輸失敗的時候，頭顯端會用前一幀的內容根據目前頭顯的位置信息和視角信息進行旋轉，重新生成第二幀的內容，這時候用戶對整個傳輸失敗的感覺不會太明顯，甚至沒有丟失的感覺，這樣用戶體驗會大大提升。我們將這種增強非同步時間扭曲的功能加入到移動VR頭顯端，特別是加入到手機端。通過增強頭顯端和手機端的功能，提高整個系統的可靠性和體驗，顯著的降低VR帶寬的需求和整個設計的難度。

這是我們錄的兩段視頻，左邊是英特爾的移動VR系統，右邊是第三方的系統。可以看到左邊的系統是我們用手機拍攝下來的，是非常流暢，但是右邊因為是完全靠這種PC的功能，手機端的功能比較弱，會顯得非常卡頓。

還有另外一點最重要的，也是做研究經常容易忽略的一件事情，你的應用在哪裡來。如果我們做了一個VR系統，所有的應用要重新寫，所有的內容要重新生成，那是沒有辦法建立起一個生態系統的。

最後總結一下，我們通信架構實驗室主要是在5G和VR結合方面的研究，通過通信和計算融合的方式打造一個高效的通信和計算系統，能夠將來解決一些移動VR端的關鍵問題，通往我們所設想的遠程沉浸式互動的未來。

喜歡這篇文章嗎？立刻分享出去讓更多人知道吧！