當前位置:
首頁 > 知識 > 更快的機器學習即將來到 Linux 內核

更快的機器學習即將來到 Linux 內核

更快的機器學習即將來到 Linux 內核


一項開發了很久的內存管理技術將會給機器學習和其它 GPU 驅動的程序很大幅度的提升,而它也將在接下來的幾個版本中進入 Linux 內核。 -- Serdar Yegulalp

編譯自: http://www.infoworld.com/article/3196884/linux/faster-machine-learning-is-coming-to-the-linux-kernel.html

作者: Serdar Yegulalp

譯者: alim0x

Linux 內核新增的異構內存管理將解鎖加速 GPU 的新途徑,並挖掘其它的機器學習硬體的潛能

一項開發了很久的內存管理技術將會給機器學習和其它 GPU 驅動的程序很大幅度的提升,而它也將在接下來的幾個版本中進入 Linux 內核。

異構內存管理(HMM)可以允許設備驅動為在其自身內存管理下的進程鏡像地址空間。正如紅帽的開發者 Jér?me Glisse 所解釋的[1],這讓像 GPU 這樣的硬體設備可以直接訪問進程內存,而不用花費複製帶來的額外開銷。它還不違反現代操作系統提供的內存保護功能。

一類會從 HMM 中獲益最多的應用是基於 GPU 的機器學習。像 OpenCL 和 CUDA 這樣的庫能夠從 HMM 中獲得速度的提升。HMM 實現這個的方式和加速基於 GPU 的機器學習[2]相似,就是讓數據留在原地,靠近 GPU 的地方,在那裡直接操作數據,儘可能少地移動數據。

像這樣的加速對於 CUDA(英偉達基於 GPU 的處理庫)來說,只會有益於在英偉達 GPU 上的操作,這些 GPU 也是目前加速數據處理的主要硬體。但是,OpenCL 設計用來編寫可以針對多種硬體的代碼——CPU、GPU、FPGA 等等——隨著這些硬體的成熟,HMM 能夠提供更加廣泛的益處。

要讓 Linux 中的 HMM 處於可用狀態還有一些阻礙。第一個是內核支持,在很長一段時間裡都受到限制。早在 2014[3]年,HMM 最初作為 Linux 內核補丁集提出,紅帽和英偉達都是關鍵開發者。需要做的工作不少,但是開發者認為代碼可以提交上去,也許接下來的幾個內核版本就能把它包含進去。

第二個阻礙是顯卡驅動支持,英偉達一直在自己單獨做一些工作。據 Glisse 的說法,AMD 的 GPU 可能也會支持 HMM,所以這種特殊優化不會僅限於英偉達的 GPU。AMD 一直都在嘗試提升它的 GPU 市場佔有率,有可能會將 GPU 和 CPU 整合[4]到同一模具。但是,軟體生態系統依然更青睞英偉達;要使其兌現,還需要更多的像 HMM 這樣的中立項目,以及讓 OpenCL 提供和 CUDA 相當的性能。

第三個阻礙是硬體支持,因為 HMM 的工作需要一項稱作可重現頁面故障replayable page faults的硬體特性。只有英偉達的帕斯卡系列高端 GPU 才支持這項特性。從某些意義上來說這是個好消息,因為這意味著英偉達只需要提供單一硬體的驅動支持就能讓 HMM 正常使用,工作量就少了。

一旦 HMM 到位,對於提供 GPU 實例的公有雲提供商就會面臨壓力,他們需要支持最新最好一代的 GPU[5]。這並不是僅僅將老款的開普勒架構顯卡換成最新的帕斯卡架構顯卡就行了,因為後續的每一代顯卡都會更加優秀,像 HMM 這樣的支持優化將提供戰略優勢。

(題圖:Thinkstock)



via: http://www.infoworld.com/article/3196884/linux/faster-machine-learning-is-coming-to-the-linux-kernel.html

作者:Serdar Yegulalp[6] 譯者:alim0x 校對:wxy

本文由 LCTT 原創編譯,Linux中國 榮譽推出

  • [1]: 所解釋的 - https://lkml.org/lkml/2017/4/21/872

  • [2]: 加速基於 GPU 的機器學習 - http://www.infoworld.com/article/3195437/machine-learning-analytics-get-a-boost-from-gpu-data-frame-project.html

  • [3]: 早在 2014 - https://lwn.net/Articles/597289/

  • [4]: 將 GPU 和 CPU 整合 - http://www.infoworld.com/article/3099204/hardware/amd-mulls-a-cpugpu-super-chip-in-a-server-reboot.html

  • [5]: 支持最新最好一代的 GPU - http://www.infoworld.com/article/3126076/artificial-intelligence/aws-machine-learning-vms-go-faster-but-not-forward.html

  • [6]: Serdar Yegulalp - http://www.infoworld.com/author/Serdar-Yegulalp/

喜歡這篇文章嗎?立刻分享出去讓更多人知道吧!

本站內容充實豐富,博大精深,小編精選每日熱門資訊,隨時更新,點擊「搶先收到最新資訊」瀏覽吧!


請您繼續閱讀更多來自 Linux技術 的精彩文章:

教職人員是否可以運用維基百科教學?
掌握 Git 之美
Linux 基金會宣布在華建立正式分支機構
AWS 雲服務大全(71 種)
軟體定義存儲(SDS)的發展:十個你應當知道的項目

TAG:Linux技術 |

您可能感興趣

Adobe正在使用機器學習來更輕鬆地找到被PS的圖像
利用flask將機器學習模型嵌入到web系統中
Juniper Network 並了Cyphort 之後,機器學習偵測惡意連線的能力變得更強大了
Boston Dynamics 的機器人正在練習室外慢跑,以及機器狗能自行導航了
機器學習與Scikit Learn學習庫
Python與機器學習
Leslie Valiant:機器學習所面臨的挑戰
學界 | 谷歌的機器翻譯模型 Transformer,現在可以用來做任何事了
怎樣快速學會Python機器學習與深度學習,來自AI一線大咖的建議
開源機器學習伺服器——PredictionIO
用Google Colab,怎樣讓機器學習圖表動起來?
圖靈獎得主 Judea Pearl:機器學習是有局限的,AI 已經分化了
機器學習的「hello,world」
瀏覽器端機器學習—brain.js
scikit-learn機器學習初體驗
機器學習為Photoshop和Premiere帶來智能化突破
Learn with Google AI:谷歌開放更多免費AI及機器學習在線資源
微軟機器學習Machine Learning Studio學習筆記
用Python進行機器學習
Windows10將使用機器學習來防止更新導致的工作丟失