有了這款可擴(kuò)展、分布式的深度學(xué)習(xí)軟件,IBM就能和AI巨人一起共舞
IBM公司在21世紀(jì)早期引進(jìn)了Watson,從而進(jìn)入了人工智能現(xiàn)在的周期,并且從那時(shí)候開始在不斷加大力度。最近,IBM發(fā)布了PowerAI,IBM的軟件工具包解決方案與OpenPower系統(tǒng)配合使用,針對(duì)那些不想完全從頭開始開發(fā)自己的AI解決方案,但是仍然希望定制滿足自己特定深度學(xué)習(xí)需求的企業(yè)。如今,IBM Research公布了一項(xiàng)新突破,這將只會(huì)進(jìn)一步加強(qiáng)PowerAI和其它的AI產(chǎn)品,這是一個(gè)在過(guò)去六個(gè)月中我所看到的突破性的分布式深度學(xué)習(xí)軟件。
擺脫單點(diǎn)瓶頸
所有一直關(guān)注人工智能的人都知道,深度學(xué)習(xí)在近幾年才真正發(fā)展起來(lái)。它為商業(yè)領(lǐng)域和消費(fèi)者的百個(gè)應(yīng)用程序提供支持,并且在持續(xù)增加。然而,阻礙深度學(xué)習(xí)進(jìn)一步激增的最大問(wèn)題之一是可擴(kuò)展性問(wèn)題,F(xiàn)在大多數(shù)AI服務(wù)器只是一個(gè)單一的系統(tǒng),而不是多個(gè)系統(tǒng)的組合。最流行的開源深度學(xué)習(xí)軟件框架在多個(gè)服務(wù)器上表現(xiàn)不佳,造成了一個(gè)耗時(shí)的瓶頸。換句話說(shuō),盡管許多數(shù)據(jù)科學(xué)家已經(jīng)可以訪問(wèn)4到8個(gè)GPU服務(wù)器,他們不能利用它擴(kuò)展到單個(gè)節(jié)點(diǎn)之外,到目前為止,這個(gè)軟件并不是為此而設(shè)計(jì)的。
輸入IBM DDL庫(kù):這個(gè)庫(kù)使用IBM Research的獨(dú)特集群方式構(gòu)建,連接到領(lǐng)先的開源AI框架(如:TensorFlow, Caffee, Torch, 和Chainer)。通過(guò)DDL,這些框架能擴(kuò)展到數(shù)十臺(tái)IBM服務(wù)器,利用數(shù)百個(gè)GPU—一種舊的晝夜不同的處理模型。為了描繪一張照片,當(dāng)IBM最初試圖用 ImageNet-22K 數(shù)據(jù)集來(lái)訓(xùn)練一個(gè)模型時(shí),使用ResNet-101模型,在一臺(tái)Power “Minsky” 服務(wù)器上,加上4臺(tái)英偉達(dá)P100 GPU加速器,花費(fèi)16天。16天的訓(xùn)練意味著大大延遲了洞察力,以及嚴(yán)重阻礙生產(chǎn)力。
IBM稱DDL為“深度學(xué)習(xí)的噴氣式引擎”—一個(gè)吸引人的名字,確實(shí)不太離譜。IBM表示,使用DDL技術(shù),能夠在64臺(tái)Power “Minsky”服務(wù)器上,一共256個(gè)英偉達(dá)的P100GPU,將相同的流程縮減到7個(gè)小時(shí)。讓我重申一下:16天縮減到7個(gè)小時(shí)。如果這些結(jié)果精確的話,那么為什么IBM認(rèn)為它可以真正的改變游戲規(guī)則?在7個(gè)小時(shí)內(nèi),IBM的新的圖像識(shí)別準(zhǔn)確度33.8%的記錄,超過(guò)了微軟在業(yè)界創(chuàng)立的10天精確度29.9%的記錄。為了完成這一切,IBM表示,DDL可以高效擴(kuò)展,上升到256個(gè)GPU,Caffe深度學(xué)習(xí)框架的效率提升到95%。
測(cè)試版已經(jīng)上線
開發(fā)者不用非要等到嘗試這項(xiàng)新技術(shù)。IBM research正在為IBM系統(tǒng)提供一個(gè)DDL測(cè)試版,IBM系統(tǒng)現(xiàn)在已經(jīng)發(fā)布了新版本IBM PowerAI (TensorFlow 和 Caffe, Torch 和 Chainer 即將推出)的第四個(gè)版本。我認(rèn)為這將是IBM電源系統(tǒng)的一個(gè)重要的補(bǔ)充,他被稱作“瑞士軍刀加速器”—標(biāo)準(zhǔn)PCI Express、CAPI和NVLink標(biāo)準(zhǔn),都被封裝在一個(gè)平臺(tái)上。
關(guān)于DDL,另外一個(gè)需要特別注意的是,它將不僅可以在本地使用,還可以在云端使用—通過(guò)云端服務(wù)商N(yùn)imbix提供。今天的異構(gòu)環(huán)境,靈活性是顯而易見的。開發(fā)者能夠在Nimbix者在IBM Power系統(tǒng)服務(wù)器上,使用測(cè)試版本。
總結(jié)
很有意思的事情是,這項(xiàng)新技術(shù)是來(lái)自于IBM,而不是其它如谷歌或者Facebook,這樣更大更響亮的AI組件支持者。看起來(lái),IBM能夠繼續(xù)攜“第一”到桌面上,IBM不僅是企業(yè)領(lǐng)的主要參與者,還在深度學(xué)習(xí)領(lǐng)域也是。DDL和OpenPOWER是秘密資源—我相信未來(lái)將給IBM所需要的結(jié)果—大大縮短訓(xùn)練時(shí)間,提高精確度和效率。我認(rèn)為消除了瓶頸,DDL有潛力去實(shí)現(xiàn)打開深度學(xué)習(xí)的門閘。這對(duì)IBM、PowerAI和OpenPOWER是真正改變游戲規(guī)則。

發(fā)表評(píng)論
請(qǐng)輸入評(píng)論內(nèi)容...
請(qǐng)輸入評(píng)論/評(píng)論長(zhǎng)度6~500個(gè)字
您提交的評(píng)論過(guò)于頻繁,請(qǐng)輸入驗(yàn)證碼繼續(xù)
最新活動(dòng)更多
-
3月27日立即報(bào)名>> 【工程師系列】汽車電子技術(shù)在線大會(huì)
-
4月30日立即下載>> 【村田汽車】汽車E/E架構(gòu)革新中,新智能座艙挑戰(zhàn)的解決方案
-
5月15-17日立即預(yù)約>> 【線下巡回】2025年STM32峰會(huì)
-
即日-5.15立即報(bào)名>>> 【在線會(huì)議】安森美Hyperlux™ ID系列引領(lǐng)iToF技術(shù)革新
-
5月15日立即下載>> 【白皮書】精確和高效地表征3000V/20A功率器件應(yīng)用指南
-
5月16日立即參評(píng) >> 【評(píng)選啟動(dòng)】維科杯·OFweek 2025(第十屆)人工智能行業(yè)年度評(píng)選
推薦專題
- 1 UALink規(guī)范發(fā)布:挑戰(zhàn)英偉達(dá)AI統(tǒng)治的開始
- 2 北電數(shù)智主辦酒仙橋論壇,探索AI產(chǎn)業(yè)發(fā)展新路徑
- 3 降薪、加班、裁員三重暴擊,“AI四小龍”已折戟兩家
- 4 “AI寒武紀(jì)”爆發(fā)至今,五類新物種登上歷史舞臺(tái)
- 5 國(guó)產(chǎn)智駕迎戰(zhàn)特斯拉FSD,AI含量差幾何?
- 6 光計(jì)算迎來(lái)商業(yè)化突破,但落地仍需時(shí)間
- 7 東陽(yáng)光:2024年扭虧、一季度凈利大增,液冷疊加具身智能打開成長(zhǎng)空間
- 8 地平線自動(dòng)駕駛方案解讀
- 9 封殺AI“照騙”,“淘寶們”終于不忍了?
- 10 優(yōu)必選:營(yíng)收大增主靠小件,虧損繼續(xù)又逢關(guān)稅,能否乘機(jī)器人東風(fēng)翻身?