IBM宣布深度學習取得重大突破 大幅降低處理時間

2021-09-23 06:48:05 字數 1660 閱讀 6135

ibm一直在努力促使計算機變得更智慧型化、更人性化。本週該公司宣布,已經開發出一種技術,可以大幅縮短處理海量資料並得出有用結論的時間。

ibm使用的「深度學習」技術是人工智慧(ai)的乙個分支,可模仿人腦的工作原理。它也是微軟、facebook、亞馬遜和谷歌的重大關注焦點。

ibm的目標是將深度學習系統消化資料所需要的時間從數天縮短到數小時。ibm研究所的ibm研究員和系統加速及記憶主管希拉莉·亨特(hillery hunter)說,這些改進可以幫助放射學家更快、更準確地找到病變部位,並讀取大量醫學影象。

到目前為止,深度學習主要是在單一伺服器上執行的,因為在不同計算機之間移動大量資料的過程太過複雜。而且,如何在許多不同伺服器和處理器之間保持資料同步也是乙個問題。

ibm在周二的公告中說,已經開發出了能夠將這些任務分配到64臺伺服器的軟體,這些伺服器總共有256個處理器,可在速度方面取得巨大飛躍。凡是擁有ibm power系統伺服器的使用者,以及其他想要測試的技術人員,均可獲得這項技術。

ibm使用了64個自主開發的power 8伺服器,每乙個都將通用的英特爾微處理器和英偉達圖形處理器連線起來,並使用快速的nvlink連線,以促進兩種晶元之間的資料流傳輸。

在此之上,ibm採用了技術人員所說的集群技術來管理所有這些移動部件。集群技術可在給定伺服器的多個處理器和其他63個伺服器中的處理器之間充當通訊警察。

如果流量管理不正確,一些處理器就會閒置,處於「吃不飽」的狀態。每個處理器都有自己的資料集,同時還需要來自其他處理器的資料,以獲得更大的影象。亨特解釋說,如果處理器不同步,它們就學不到任何東西。

亨特告訴《財富》雜誌:「我們的想法是改變你訓練深度學習模式的速度,並真正提高你的工作效率。」

亨特說,將深度學習從乙個帶有8個處理器的伺服器擴充套件到64個伺服器,每個伺服器有8個處理器,可以將效能提高50-60倍。

pund-it公司創始人查爾斯·金(charles king)對ibm的專案印象深刻,他說後者已經找到了一種「擴大」系統的方法,額外增加的處理器能提高效能。

例如,在理論上,將處理器擴容100%應該獲得100%的效能提公升。但實際上,由於複雜的管理和連線問題,這種效益永遠不會發生。

但ibm稱,其系統通過由加州大學伯克利分校建立的「咖啡因」深度學習框架,在256個處理器之間實現了95%的擴充套件效率。之前的記錄是由facebook人工智慧研究公司創造的,擴充套件效率達到了89%。

「ibm最新95%的擴充套件效率似乎太好了,不可能是真的,」派屈克·莫海德(patrick moorhead)說,他是德克薩斯州奧斯丁市一家研究公司的總裁和創始人。

ibm表示,在影象識別方面,ibm系統再次使用了「咖啡因」框架,在7個小時內識別了750萬張,準確率達到了33.8%。微軟之前的記錄是29.8%,而達到這一準確率花了10天時間。

用外行人的話來說,ibm聲稱已經開發出了比現有深度學習技術更快、更精確的技術。當然,它還需要使用ibm的power系統硬體和集群軟體。

除了「咖啡因」框架,ibm還表示,流行的谷歌tensorflow框架同樣可以在這種新技術上執行。莫海德說,值得注意的是,ibm在運用自己在高效能計算方面的專業知識,同時,也採納諸如tensorflow和「咖啡因」之類的外部資源,這種做法有助於該項技術更廣泛地適用於一系列深度學習應用。

原文發布時間為:

2023年8月8日

IBM奈米技術取得兩項重大突破

近日,ibm公司的科學家們在美國 科學 雜誌宣布了兩項原子尺度的科學突破 第一項是在了解單個原子保持一定的磁方向 從而使其具備適合未來資料儲存應用的能力方面所邁出的重要一步 第二項是乙個分子內不同原子之間及不同分子彼此之間的乙個邏輯開關,它們是分子計算機的潛在構造單元。這兩項重大突破為研製原子尺度的...

鋰電池研究取得重大突破

中國清華大學 tsinghua university 的研究人員最近發表一種基於石墨烯奈米結構的鋰金屬電極材料,可用於抑制鋰金屬電池中的枝晶生長,進一步提公升其電化學效能。目前廣泛使用的鋰離子電池越來越難以滿足可攜式電子產品和電動車 ev 日益增加的儲能要求。諸如鋰硫電池 li s 與鋰空氣電池 l...

我國新型儲存器材料研發取得重大突破

儲存器是積體電路最重要的技術之一,能否開發自主智財權的儲存器晶元事關國家資訊保安。目前,國際上通用的儲存器材料是 鍺銻碲 近年來,消費電子產品的普及對儲存器晶元的功耗 壽命 尺寸 持久力等各項效能指標均提出了更高要求,世界各國科學家都在加緊攻關儲存器晶元的製造材料。宋志棠團隊通過第一性理論計算與分子...