IBM深度學習重大突破：消化數據時間從數天縮短到數小時

轉自 雲頭條

新浪科技訊 北京時間8月8日下午消息，IBM一直在努力促使計算機變得更智能化、更人性化。本周該公司宣布，已經開發出一種技術，可以大幅縮短處理海量數據並得出有用結論的時間。

IBM使用的「深度學習」技術是人工智慧（AI）的一個分支，可模仿人腦的工作原理。它也是微軟、Facebook、亞馬遜和谷歌的重大關注焦點。

IBM的目標是將深度學習系統消化數據所需要的時間從數天縮短到數小時。IBM研究所的IBM研究員和系統加速及記憶主管希拉里·亨特（Hillery Hunter）說，這些改進可以幫助放射學家更快、更準確地找到病變部位，並讀取大量醫學圖像。

到目前為止，深度學習主要是在單一伺服器上運行的，因為在不同計算機之間移動大量數據的過程太過複雜。而且，如何在許多不同伺服器和處理器之間保持數據同步也是一個問題。

IBM在周二的公告中說，已經開發出了能夠將這些任務分配到64台伺服器的軟體，這些伺服器總共有256個處理器，可在速度方面取得巨大飛躍。凡是擁有IBM Power系統伺服器的用戶，以及其他想要測試的技術人員，均可獲得這項技術。

IBM使用了64個自主開發的Power 8伺服器，每一個都將通用的英特爾微處理器和英偉達圖形處理器連接起來，並使用快速的NVLink連接，以促進兩種晶元之間的數據流傳輸。

在此之上，IBM採用了技術人員所說的集群技術來管理所有這些移動部件。集群技術可在給定伺服器的多個處理器和其他63個伺服器中的處理器之間充當通信警察。

如果流量管理不正確，一些處理器就會閑置，處於「吃不飽」的狀態。每個處理器都有自己的數據集，同時還需要來自其他處理器的數據，以獲得更大的圖像。亨特解釋說，如果處理器不同步，它們就學不到任何東西。

亨特告訴《財富》雜誌:「我們的想法是改變你訓練深度學習模式的速度，並真正提高你的工作效率。」

亨特說，將深度學習從一個帶有8個處理器的伺服器擴展到64個伺服器，每個伺服器有8個處理器，可以將性能提高50-60倍。

Pund-IT公司創始人查爾斯·金（Charles King）對IBM的項目印象深刻，他說後者已經找到了一種「擴大」系統的方法，額外增加的處理器能提高性能。

例如，在理論上，將處理器擴容100%應該獲得100%的性能提升。但實際上，由於複雜的管理和連接問題，這種效益永遠不會發生。

但IBM稱，其系統通過由加州大學伯克利分校創建的「咖啡因」深度學習框架，在256個處理器之間實現了95%的擴展效率。之前的記錄是由Facebook人工智慧研究公司創造的，擴展效率達到了89%。

「IBM最新95%的擴展效率似乎太好了，不可能是真的，」帕特里克·莫海德（Patrick Moorhead）說，他是德克薩斯州奧斯丁市一家研究公司的總裁和創始人。

IBM表示，在圖像識別方面，IBM系統再次使用了「咖啡因」框架，在7個小時內識別了750萬張圖片，準確率達到了33.8%。微軟之前的記錄是29.8%，而達到這一準確率花了10天時間。

用外行人的話來說，IBM聲稱已經開發出了比現有深度學習技術更快、更精確的技術。當然，它還需要使用IBM的Power系統硬體和集群軟體。

除了「咖啡因」框架，IBM還表示，流行的谷歌TensorFlow框架同樣可以在這種新技術上運行。莫海德說，值得注意的是，IBM在運用自己在高性能計算方面的專業知識，同時，也採納諸如Tensorflow和「咖啡因」之類的外部資源，這種做法有助於該項技術更廣泛地適用於一系列深度學習應用。（斯眉）