此外,飛槳的工程師建議,因?yàn)椴杉�端只有一路視頻,所以,后端處理業(yè)務(wù)要既保證性能穩(wěn)定性,又能兼顧將來(lái)業(yè)務(wù)擴(kuò)展,疊加更多的智能分析功能。新的設(shè)備上線后,每日3公里巡檢2次,單次僅僅能積累約200張圖片素材,為了提高識(shí)別精度和更多數(shù)據(jù)的訓(xùn)練積累,飛槳工程師建議對(duì)于巡檢點(diǎn)的視頻進(jìn)行截圖回傳,這樣可以增加數(shù)據(jù),再結(jié)合自動(dòng)和人工標(biāo)注加入訓(xùn)練集,提高識(shí)別效率。

“在飛槳的幫助下,我們?nèi)�流程學(xué)習(xí)了一次AI的實(shí)施落地。我們發(fā)現(xiàn),飛槳的一大優(yōu)點(diǎn)就是開(kāi)發(fā)部署的學(xué)習(xí)難度很低,即使我們的工程師經(jīng)驗(yàn)并不豐富,但由于飛槳的開(kāi)發(fā)套件成熟度高,實(shí)際上比我們預(yù)料的上線時(shí)間縮短70%以上,這大大的增加了我們以后進(jìn)一步利用AI來(lái)改造設(shè)備的勇氣。我們希望把那些單價(jià)上億的自動(dòng)采煤機(jī),都通過(guò)百度的AI升級(jí)成智能機(jī)器人”,高強(qiáng)博士說(shuō):“以前我們說(shuō)自己是一家機(jī)器人公司,但現(xiàn)在我們可以說(shuō)自己是一家智能機(jī)器人公司,兩字之差,跨越了一個(gè)時(shí)代!”

事實(shí)上,這種團(tuán)隊(duì)規(guī)模中等、有一定技術(shù)底蘊(yùn)的團(tuán)隊(duì),比之前文所說(shuō)的“先行者模式”,更容易接受像開(kāi)發(fā)套件這樣的“重武器”,從而提升整體戰(zhàn)斗力,從一個(gè)“工作坊”變成企業(yè)的AI發(fā)動(dòng)機(jī)。

但并不是每個(gè)“工作坊”都有完備的團(tuán)隊(duì),吳甜回憶過(guò)一個(gè)工業(yè)企業(yè)的AI落地情景,當(dāng)初接洽時(shí),初步了解到對(duì)方已經(jīng)有一支12人的隊(duì)伍,覺(jué)得大有希望——這是典型的“工作坊”式團(tuán)隊(duì)啊。

然而,經(jīng)過(guò)實(shí)際接觸才發(fā)現(xiàn),這個(gè)12個(gè)人的AI團(tuán)隊(duì),只有1名AI專業(yè)研發(fā)人員能夠理解深度學(xué)習(xí)算法的大致原理,并且達(dá)到了能自己動(dòng)手使用飛槳算法類套件進(jìn)行深度學(xué)習(xí)算法訓(xùn)練的程度。

如何最快的讓這些沒(méi)有AI背景、甚至沒(méi)有計(jì)算機(jī)背景的工程師能夠在AI研發(fā)中形成合力?顯然,從頭學(xué)習(xí)是不現(xiàn)實(shí)的,而必須有工具。

被稱為產(chǎn)業(yè)級(jí)深度學(xué)習(xí)平臺(tái)的飛槳,之所以能夠異軍突起,在短短5年的時(shí)間內(nèi),在中國(guó)深度學(xué)習(xí)平臺(tái)的市場(chǎng)綜合份額上超過(guò)谷歌和Facebook,靠的就是和中國(guó)產(chǎn)業(yè)界的高度適配。

就拿剛才的問(wèn)題來(lái)說(shuō),同一支團(tuán)隊(duì)、不同背景、不同經(jīng)驗(yàn)甚至不同悟性,飛槳都準(zhǔn)備了不同的工具。通過(guò)模型研發(fā)深度的階梯式、多層次產(chǎn)品,來(lái)應(yīng)對(duì)企業(yè)團(tuán)隊(duì)中人員背景多樣的問(wèn)題。

在一次論壇分享中,吳甜自信的說(shuō):“無(wú)論企業(yè)研發(fā)團(tuán)隊(duì)中的能力和經(jīng)驗(yàn)如何,總能在飛槳平臺(tái)上找到一種當(dāng)前適用的產(chǎn)品形態(tài),并可以不斷學(xué)習(xí)精進(jìn),逐漸攀升使用更靈活更自主的產(chǎn)品。”

簡(jiǎn)單來(lái)說(shuō),飛槳平臺(tái)就相當(dāng)于一個(gè)巨大的模型工廠,能直接基于框架開(kāi)發(fā)模型的AI工作者,是最高階的,相當(dāng)于米其林的三星級(jí)大廚。

僅僅有“工廠”還不夠,還得有具體的“產(chǎn)品線”,這其中,又可以分為場(chǎng)景類開(kāi)發(fā)套件和算法類開(kāi)發(fā)套件,來(lái)適配不同的應(yīng)用環(huán)境,能夠運(yùn)用開(kāi)發(fā)套件的,也是AI應(yīng)用人員中的行家里手。

當(dāng)然,對(duì)于AI基礎(chǔ)薄弱的人員,尤其是沒(méi)有系統(tǒng)的學(xué)過(guò)編程的人員來(lái)說(shuō),最便捷的方式就是無(wú)代碼的開(kāi)發(fā)方式。同樣以“模型工廠”里的大量模型為從基礎(chǔ),飛槳提供了前面介紹過(guò)的EasyDL。你可以理解為像使用美圖秀秀這樣簡(jiǎn)單,只要做一些拖拽、填寫一些參數(shù)、上傳一些數(shù)據(jù),甚至不用寫一行代碼,就可以快速上手AI開(kāi)發(fā),吳甜曾稱之為“讓大家找找AI開(kāi)發(fā)的感覺(jué)”。

為了包容不同類型的開(kāi)發(fā)者,飛槳在便利性上做足功夫。

飛槳封裝隱藏了編譯自定義算子過(guò)程中不必要的框架底層概念,并且打通了訓(xùn)練和推理體系,這樣就可以讓更多非AI專業(yè)人員通過(guò)飛槳平臺(tái)更靈活、更簡(jiǎn)單地在自己的領(lǐng)域應(yīng)用深度學(xué)習(xí)技術(shù)。

言歸正傳,說(shuō)到前面那支背景多樣的團(tuán)隊(duì),在百度飛槳和團(tuán)隊(duì)帶頭人的持續(xù)幫助下,能力有了全面的提升,使得團(tuán)隊(duì)的技術(shù)結(jié)構(gòu)已經(jīng)發(fā)生了變化——有人能使用飛槳可視化界面開(kāi)發(fā),有人能使用場(chǎng)景化套件,一些人甚至擁有了應(yīng)用配置化開(kāi)發(fā)的算法類套件深入進(jìn)行深度學(xué)習(xí)算法的開(kāi)發(fā)的能力,而這支團(tuán)隊(duì)的成長(zhǎng),就是處在AI工作坊階段并不斷進(jìn)階的一個(gè)AI團(tuán)隊(duì)的縮影。

但這,也不過(guò)是飛槳的探險(xiǎn)之旅中的一個(gè)環(huán)節(jié)。

3

乘上星際飛船,探索AI宇宙

說(shuō)起AI進(jìn)入工業(yè)大生產(chǎn),人們一定非常興奮,腦中一定會(huì)出現(xiàn)非常壯麗的圖景,但在實(shí)際落地中,這種工作的組織難度是非常高的。

以一個(gè)大型的互聯(lián)網(wǎng)企業(yè)為例, 有涉及視覺(jué)、語(yǔ)音、推薦等數(shù)百個(gè)AI場(chǎng)景建模的需求,有應(yīng)用開(kāi)發(fā)、算法調(diào)優(yōu)、平臺(tái)開(kāi)發(fā)等多種類型的AI研發(fā)工作,有MPI、機(jī)器學(xué)習(xí)和深度學(xué)習(xí)等數(shù)千并發(fā)任務(wù),整個(gè)企業(yè)用了近十年向AI底座遷移,這才是真正的工業(yè)大生產(chǎn)。

而參與項(xiàng)目的技術(shù)人員、使用這些服務(wù)的企業(yè)員工,數(shù)量高達(dá)數(shù)千;在資源上,這些任務(wù)需要GPU、CPU、FGPA等異構(gòu)計(jì)算的數(shù)萬(wàn)張卡,可謂是波瀾壯闊。

“這種多人多任務(wù)高并發(fā)度協(xié)同,是最考驗(yàn)平臺(tái)能力的,因?yàn)樗�不僅是一個(gè)工程問(wèn)題,更是一個(gè)工程管理問(wèn)題,它考驗(yàn)飛槳能否幫助AI在一個(gè)龐大體系落地的能力和效率,這是目前步入AI工業(yè)大生產(chǎn)的‘入門考試’�！痹谝淮喂�開(kāi)論壇中,吳甜這樣形容。

而面對(duì)這樣復(fù)雜的需求,飛槳開(kāi)展了兩方面的核心工作來(lái)支持,一類是面向資源算力層面,項(xiàng)目需要高效的算力管理與調(diào)度,以應(yīng)對(duì)大規(guī)模AI應(yīng)用時(shí)需要的算力基礎(chǔ)設(shè)施提供、管理、調(diào)度等。

為此,飛槳構(gòu)建了作業(yè)及工作流調(diào)度系統(tǒng),從這個(gè)角度來(lái)看,再次顯現(xiàn)了飛槳的“產(chǎn)業(yè)級(jí)”特性,那就是能夠支持大量并行任務(wù)同時(shí)開(kāi)展,對(duì)模型和服務(wù)進(jìn)行了科學(xué)有序的管理,提升整體的研發(fā)效率。

這樣的大型項(xiàng)目中,很多都是基于人工智能的通用模型打造,而一般來(lái)說(shuō),打造一個(gè)通用模型直到它成熟,需要許許多多次的嘗試——很多通用模型在設(shè)計(jì)的時(shí)候其實(shí)都是一次對(duì)于資源的冒險(xiǎn),需要調(diào)動(dòng)成千上萬(wàn)的GPU。

而飛槳在這樣的大場(chǎng)景中解決的,就常常包含去嘗試不同的超大模型,并通過(guò)卓越的泛化能力,再產(chǎn)生出更多個(gè)適用不同場(chǎng)景的更優(yōu)化的小模型,我們可以把飛槳看做是“用AI生產(chǎn)出AI的體系”,它是AI的工作母機(jī),是人類探索AI的星際飛船。

而正是因?yàn)轱w槳不斷的嘗試這樣的大場(chǎng)景、通用模型和泛化,所以,對(duì)于飛槳產(chǎn)品(模型)已經(jīng)完善的場(chǎng)景,或者有一定研發(fā)能力的企業(yè),企業(yè)中的AI團(tuán)隊(duì)在飛槳產(chǎn)品的輔助下就可以獨(dú)立完成很多出色的應(yīng)用項(xiàng)目,而且速度越來(lái)越快。

這其實(shí)就涉及到人們熱衷于討論的一個(gè)問(wèn)題,對(duì)于越來(lái)越分散的場(chǎng)景,是不是需要無(wú)限的投入人力資源去定制服務(wù),答案顯然并非全部如此,飛槳的選擇就是通過(guò)不斷挑戰(zhàn)大場(chǎng)景,不斷的進(jìn)行模型優(yōu)化,使得模型的通用性越來(lái)越強(qiáng),再配合以各種專用的套件,就能不斷加速AI落地的速度。

例如,百度飛槳的合作伙伴里,就有專門生產(chǎn)AI產(chǎn)品及應(yīng)用解決方案的企業(yè),有一個(gè)企業(yè),就基于Paddle Detection目標(biāo)檢測(cè)套件中的YOLOv2算法,打造了適用于煉鋼廠的鋼坯位置的檢測(cè)方案。在這個(gè)項(xiàng)目中,由于PaddleDetection已經(jīng)趨于成熟,企業(yè)團(tuán)隊(duì)成員能力較強(qiáng),整體過(guò)程比較順利,基本沒(méi)遇到什么問(wèn)題。而且,當(dāng)下次、下下次遇到類似的鋼坯檢測(cè)問(wèn)題時(shí),部署的速度會(huì)十倍、百倍的提升,這就是一個(gè)能夠用數(shù)據(jù)沉積智慧、經(jīng)驗(yàn)和模型,從而不斷自我完善的閉環(huán),它們才是通向大工業(yè)時(shí)代真正的底層引擎。

如果說(shuō)這篇文章僅僅是從AI落地的角度解讀AI從先行者階段向工業(yè)大生產(chǎn)時(shí)代的邁進(jìn),那它還是不夠全面的,因?yàn)锳I落地不僅僅取決于以上的技術(shù)、工程、管理方面的要素,它還需要更大體系的支持。

其中,人才的培養(yǎng)是非常重要的。雖然我們看到,很多工程師都可以邊學(xué)邊干,在實(shí)踐中培養(yǎng)AI能力,但這不能掩蓋我國(guó)AI人才嚴(yán)重缺乏的現(xiàn)實(shí)。而且,這種缺乏是全面的,從開(kāi)創(chuàng)性的領(lǐng)軍人物到最基層的用無(wú)代碼開(kāi)發(fā)工具的應(yīng)用人才,都有巨大的缺口。

為此,飛槳非常重視復(fù)合型AI人才培養(yǎng)的工作,始終在輸出業(yè)務(wù)、算法、工程三位一體的人才培養(yǎng)理念,強(qiáng)調(diào)跨越邊界,學(xué)以致用。當(dāng)前已經(jīng)建立起成熟完善的產(chǎn)業(yè)級(jí)復(fù)合型AI人才培養(yǎng)體系,包括面向一線算法工程師的“AI快車道”,面向技術(shù)負(fù)責(zé)人的“AI私享會(huì)”和面向CTO、架構(gòu)師層級(jí)的“AICA首席AI架構(gòu)師培養(yǎng)計(jì)劃”等等。

生態(tài)的建立也至關(guān)重要。飛槳是一個(gè)平臺(tái)級(jí)的存在,平臺(tái)有平臺(tái)的優(yōu)勢(shì),也有平臺(tái)的劣勢(shì),特別是針對(duì)垂直場(chǎng)景和分散化的場(chǎng)景。

吳甜在多次對(duì)外溝通中反復(fù)強(qiáng)調(diào),AI落地應(yīng)用勢(shì)必是要面對(duì)分散化的場(chǎng)景需求,如何在業(yè)務(wù)場(chǎng)景中發(fā)現(xiàn)問(wèn)題、解決問(wèn)題需要懂得業(yè)務(wù)邏輯的人學(xué)會(huì)結(jié)合AI技術(shù),飛槳豐富的產(chǎn)品體系能夠滿足不同要求和特點(diǎn)的使用者,例如前面提到的零代碼可視化界面客戶端、場(chǎng)景類開(kāi)發(fā)套件、算法類開(kāi)發(fā)套件、模型庫(kù)、深度學(xué)習(xí)框架。

此外,飛槳還提供了企業(yè)級(jí)的平臺(tái)型產(chǎn)品BML,發(fā)布了首個(gè)易被集成的云原生機(jī)器學(xué)習(xí)核心系統(tǒng)PaddleFlow,可以為企業(yè)的AI平臺(tái)開(kāi)發(fā)者提供資源管理調(diào)度等核心能力,賦能更多細(xì)分場(chǎng)景和深度定制的AI平臺(tái),同時(shí)解決企業(yè)AI研發(fā)協(xié)作效率的問(wèn)題。

但從更長(zhǎng)遠(yuǎn)的角度看,飛槳應(yīng)該有更多生態(tài)伙伴,就像我們前面提到的,為企業(yè)提供AI產(chǎn)品和方案的公司,基于飛槳進(jìn)行豐富多樣的AI生產(chǎn)創(chuàng)造,協(xié)同加速千行百業(yè)的智能化升級(jí)。