IBM宣布深度學習取得重大突破 大幅降低處理時間
IBM一直在努力促使計算機變得更智能化、更人性化。本周該公司宣布,已經開發出一種技術,可以大幅縮短處理海量數據並得出有用結論的時間。
IBM使用的「深度學習」技術是人工智慧(AI)的一個分支,可模仿人腦的工作原理。它也是微軟、Facebook、亞馬遜和谷歌的重大關注焦點。
IBM的目標是將深度學習系統消化數據所需要的時間從數天縮短到數小時。IBM研究所的IBM研究員和系統加速及記憶主管希拉里·亨特(Hillery Hunter)說,這些改進可以幫助放射學家更快、更準確地找到病變部位,並讀取大量醫學圖像。
到目前為止,深度學習主要是在單一伺服器上運行的,因為在不同計算機之間移動大量數據的過程太過複雜。而且,如何在許多不同伺服器和處理器之間保持數據同步也是一個問題。
IBM在周二的公告中說,已經開發出了能夠將這些任務分配到64台伺服器的軟體,這些伺服器總共有256個處理器,可在速度方面取得巨大飛躍。凡是擁有IBM Power系統伺服器的用戶,以及其他想要測試的技術人員,均可獲得這項技術。
IBM使用了64個自主開發的Power 8伺服器,每一個都將通用的英特爾微處理器和英偉達圖形處理器連接起來,並使用快速的NVLink連接,以促進兩種晶元之間的數據流傳輸。
在此之上,IBM採用了技術人員所說的集群技術來管理所有這些移動部件。集群技術可在給定伺服器的多個處理器和其他63個伺服器中的處理器之間充當通信警察。
如果流量管理不正確,一些處理器就會閑置,處於「吃不飽」的狀態。每個處理器都有自己的數據集,同時還需要來自其他處理器的數據,以獲得更大的圖像。亨特解釋說,如果處理器不同步,它們就學不到任何東西。
亨特告訴《財富》雜誌:「我們的想法是改變你訓練深度學習模式的速度,並真正提高你的工作效率。」
亨特說,將深度學習從一個帶有8個處理器的伺服器擴展到64個伺服器,每個伺服器有8個處理器,可以將性能提高50-60倍。
Pund-IT公司創始人查爾斯·金(Charles King)對IBM的項目印象深刻,他說後者已經找到了一種「擴大」系統的方法,額外增加的處理器能提高性能。
例如,在理論上,將處理器擴容100%應該獲得100%的性能提升。但實際上,由於複雜的管理和連接問題,這種效益永遠不會發生。
但IBM稱,其系統通過由加州大學伯克利分校創建的「咖啡因」深度學習框架,在256個處理器之間實現了95%的擴展效率。之前的記錄是由Facebook人工智慧研究公司創造的,擴展效率達到了89%。
「IBM最新95%的擴展效率似乎太好了,不可能是真的,」帕特里克·莫海德(Patrick Moorhead)說,他是德克薩斯州奧斯丁市一家研究公司的總裁和創始人。
IBM表示,在圖像識別方面,IBM系統再次使用了「咖啡因」框架,在7個小時內識別了750萬張圖片,準確率達到了33.8%。微軟之前的記錄是29.8%,而達到這一準確率花了10天時間。
用外行人的話來說,IBM聲稱已經開發出了比現有深度學習技術更快、更精確的技術。當然,它還需要使用IBM的Power系統硬體和集群軟體。
除了「咖啡因」框架,IBM還表示,流行的谷歌TensorFlow框架同樣可以在這種新技術上運行。莫海德說,值得注意的是,IBM在運用自己在高性能計算方面的專業知識,同時,也採納諸如Tensorflow和「咖啡因」之類的外部資源,這種做法有助於該項技術更廣泛地適用於一系列深度學習應用。
※全球研究顯示80%的企業未能從持續測試中充分獲益
※SmartX成為唯一同時進入兩份市場報告的中國超融合產品廠商
※紐西蘭最大的私人醫院MercyAscot藉助Qlik提高病患護理水平
※在re:Invent陰影的籠罩下 VMworld已然「過家家」
TAG:ZD至頂網 |
※三星重新取得增長,華為增速大幅放緩年內奪取全球老大或成空
※再次打破國際封鎖,渦扇15取得重大突破,殲20戰力大幅提升
※為何近一百年來基礎物理學沒有取得重大突破?
※Micro LED技術取得重大突破,下半年將實現量產
※用基因編輯逆轉癌細胞,中國科學家取得重大突破
※DARPA「終身學習機器」項目取得重大進展
※為什麼最近百年內基礎科學沒有取得重大突破?
※Micro LED技術已取得重大突破,下半年將實現量產
※C羅已接近完成加盟尤文,未來48小時將取得重大突破!
※快速射電暴研究取得巨大突破 進一步接近真相
※中國晶元取得重大突破!設計水平更提升不少
※AMD攻勢減弱,Intel業績取得快速增長
※史上最強!清華大學碳納米管纖維取得重大突破
※一天之內,3則好消息接踵而來,這3大領域我國相繼取得重大突破
※印度LCA艦載機研發工作取得重大突破,可惜仍難挽救慘淡前景
※黃土10Be定量重建亞洲季風降水變化研究取得重要突破
※中國率先美國一步,OICW方面取得重大突破,如今已應用到實戰中
※轟-20研發取得重大進展,大國重器橫空出世,但也不能過於激動
※中國存儲三大陣營相繼導入試產,兩年後或開始取得話語權;挖礦晶元需求降溫,台積電二度下調預期;中芯國際或更快獲得EUV
※殲15B取得重大突破,這一能力比F35優越,將造幾十架