在嵌入式設備上做深度學習，這家公司讓攝像頭更像人眼

隨著終端設備大規模接入互聯網，在終端設備上產生的海量數據在提供商業價值的同時，也對數據處理提出挑戰。由於網路帶寬有限，又要滿足實時響應的需求，邊緣計算成為發展的新趨勢之一。

當邊緣計算遇上深度學習會是怎麼樣？

在嵌入設備等終端設備上做深度學習有幾個天然的優勢，第一就是在沒有網路的情況下嵌入設備上也能直接做計算，第二就是直接在嵌入設備上計算避免了延遲的問題，不需要擔心由於網路傳輸帶來的延遲問題，第三就是數據存儲在終端解決了一大部分的隱私問題。

當然目前一般只是把推理（Inference）部分放在終端設備，訓練(training)部分還是可以在雲端完成。

不過由於終端設備上計算能力和計算帶寬有限，需要特殊的深度學習演算法，探長最近採訪了一家計算機視覺領域的創業公司Pilot AI Labs，他們就提供基於深度學習的嵌入式設備的計算機視覺的解決方案。

Pilot AI Labs的創始團隊

Pilot AI Labs的聯合創始人兼首席執行官Jonathan Su是個連續創業者，擁有斯坦福大學計算機博士學位，在數值優化和高性能計算方面擁有豐富的專業知識。

他是PhiSix時裝實驗室的首席執行官和聯合創始人，於2014年出售給eBay。他在eBay擔任工程總監，並在MetaMind擔任高級數據科學家。

Pilot AI Labs創始團隊來自於斯坦福和MetaMind，Jonathan和其他核心成員是同事、同學，其中還有多年的室友。

專註於嵌入設備的計算機視覺

Pilot AI Labs目前公司團隊約三十人，丹華資本領投了種子輪，而NEA領投A輪融資。

Pilot AI Labs專註於構建基於深度學習的計算機視覺平台，該平台已經過優化，可在嵌入式設備上實時運行。 他從創業之初就選擇了深度學習領域的創業，而且明確的選擇了視覺作為創業方向，一方面是他們在這方面有相當的積累，另一方面則是學術界和工業界的研究和應用已經有了一定的基礎。

Pilot AI Labs希望把計算機視覺的能力裝入嵌入型晶元，直接應用在很多小型的攝像頭裡，比如 GoPro。Pilot.ai 能在非 GPU設備（比如ARM）上完成深度學習演算法的部署，這可以大範圍應用或者後裝(retro-fit)於計算能力有限的一體機上，比如無人機、VR/AR 設備、安防攝像頭、運動相機等，如此一來，Pilot.ai 可以讓自己的使用門檻大大降低，即使沒有高性能的硬體，客戶也可以直接將 Pilot 的模塊嵌入到自己的產品中，這對他們的市場推廣有著極大優勢。

Pilot AI Labs他們有特殊的經過收縮(shrink)的深度神經網路演算法，不同於一般意義的將神經網路進行剪裁(pruning)，收縮（shrink)後的神經網路能夠在大部分計算能力和計算帶寬比較受限的環境下運行，此外，他們也有比較獨特的數據訓練方式，最大化利用訓練數據。

他們還開發了自己的深度學習框架和工具，可以相對通用的用於計算機視覺的各個領域，他們的解決方案也融合了傳統的計算機視覺方法。

以無人機為切入

Pilot AI Labs技術上比較強於跟蹤(tracking)和檢測(detecting)，他們評估了計算機視覺的各種可能應用場景，最終選擇無人機作為切入口，利用視覺來實現自動跟隨等功能。

Pilot.ai 將為無人機做視覺追蹤降低門檻。對於無人機廠商來說，直接購買嵌入了 Pilot.ai 演算法的晶元就可以獲得其計算機視覺識別能力，無需GPS 追蹤定位。

他們的解決方案可以在多人的環境下依然比較好的實現跟蹤。

Pilot AI Labs是目前少有的基於深度學習的可用的無人機視覺方案，他們的已經收到超過800萬美元的訂單，已經被廣泛應用於工業界。

拓展到更多行業

Pilot AI Labs目前的應用還包括零售行業的店內客流分析等場景。

另外一個已經被應用的場景則是輔助司機的駕駛以及疲勞檢測等，比如，將攝像頭安裝在汽車正面擋風玻璃上，用來識別司機和乘客的情況，這可用於Uber等共享出行服務。

目前他們的年收入超過一千萬美元，並且在創辦一年內就實現了贏利，並準備進入移動設備、安防、智能家居、工業自動化等更多的領域，目標是實現一個億美元的年收入。

讓計算機視覺無處不在

視覺作為人類認知世界的重要手段，人的大腦皮層的活動， 大約70%是在處理視覺相關信息。視覺就相當於人腦的大門。

Jonathan對矽谷密探表示希望他們的解決方案能夠應用於物理世界中廣泛存在於的通用攝像頭中，讓任何地方的攝像頭都能夠主動識別周圍的環境，用於人們的日常生活和提高工作效率。

（Pilot.ai利用攝像頭做實時的距離估測）

在很多場景下，僅僅使用通用攝像頭就能解決很多問題，當然如果結合更多的感測器則威力更大。

（Pilot.ai利用攝像頭做實時的定位）

Pilot AI Labs目前專註於嵌入設備和移動設備上應用計算機視覺，在這個領域深度耕耘並擁有先發優勢，現在也有越來越多的大公司注意到這個領域，Jonathan表示未來將和更多公司合作開發這個領域，目前，在美國，Pilot.ai 正在和某大型電子消費品牌進行合作，由其線下零售商店來幫助 Pilot.ai 快速進入各大線下超市。

長期來說，計算機視覺會在越來越多的場景下取代人的「看」的功能，會解放出大量的生產力、時間和精力投入，未來還會在更多的領域得到應用，這個市場大有可為。