深度學(xué)習(xí)三巨頭之Yoshua Bengio暢談AI如何才能說“人話”
在人工智能深度學(xué)習(xí)的研究中,科學(xué)家們發(fā)現(xiàn)語言學(xué)習(xí)是其中最為復(fù)雜的領(lǐng)域,語言本身可表達(dá)表層意思,也能表達(dá)深層語義,因此機(jī)器的語言理解能力不僅包括描述能力,也包括解讀和舉一反三的能力,語言的復(fù)雜性與人類文明的演變息息相關(guān),因此科學(xué)家們?cè)跇?gòu)建語言學(xué)習(xí)模型的同時(shí),也開始將研究焦點(diǎn)從語言本身擴(kuò)展到語言的歷史、文明的演進(jìn)等方面,本期焦點(diǎn)人物YoshuaBengio正是該領(lǐng)域的佼佼者。
本期編譯文章來自于Yoshua Bengio于2018年發(fā)表的關(guān)于“人工智能如何理解語言”的演說。Yoshua Bengio將會(huì)講述人工智能在語言理解方面達(dá)到人類水平的要點(diǎn),并且介紹了他引以為豪的“人工智能娃娃游戲平臺(tái)”,且看他獨(dú)樹一幟的學(xué)術(shù)觀點(diǎn)!
oshuaBengio是深度學(xué)習(xí)三大學(xué)術(shù)巨頭最純粹的學(xué)術(shù)派泰斗級(jí)人物,蒙特利爾大學(xué)計(jì)算機(jī)科學(xué)與運(yùn)算研究系教授、蒙特利爾大學(xué)算法學(xué)院MILA院長, “人工智能娃娃游戲平臺(tái)(BabyAIgame)”發(fā)起人。
【算力觀點(diǎn)】
語言學(xué)習(xí)面臨兩大主要難題:缺乏高度接近人腦思維的訓(xùn)練模型以及所需算力成本高。Bengio博士提出的“意識(shí)先驗(yàn)”模型了模仿人腦的認(rèn)知系統(tǒng)并且過濾不參與思考過程的信息,有望突破語言學(xué)習(xí)模型的瓶頸以及拓寬人工智能在語言學(xué)習(xí)領(lǐng)域的應(yīng)用范圍。
強(qiáng)人工智能的實(shí)現(xiàn)當(dāng)然離我們很遠(yuǎn),但關(guān)于人工智能的道德倫理問題的討論從來沒有停止過,當(dāng)人工智能也擁有“意識(shí)”時(shí)將引出兩方面的問題,首先是人工智能在法律意義上的社會(huì)身份,其次是它帶來的潛在威脅,需要全社會(huì)共同關(guān)注。
機(jī)器學(xué)習(xí)人類語言的步驟:先搞懂歷史,再學(xué)習(xí)語言
一直以來人們都嚴(yán)重低估了處理語言學(xué)習(xí)的難度,甚至有一些研究已經(jīng)在往錯(cuò)誤的方向發(fā)展——依靠非常龐大的語料庫。
僅僅在語料庫的基礎(chǔ)訓(xùn)練深度學(xué)習(xí)模型是不夠的,造成的后果是,很多模型訓(xùn)練的效果只能是“捕獲”粗糙的信息,翻譯出來的句子意思詞不達(dá)意,而優(yōu)秀的深度學(xué)習(xí)可以預(yù)測(cè)基于句子中的其他部分。
在語言理解能力的層次上,初級(jí)和高級(jí)之間的深層差異是“常識(shí)”,以威諾格拉德模式測(cè)試(圖靈測(cè)試的另一個(gè)版本)為例,通過提問的方式測(cè)試機(jī)器是否具備人類的思維能力,比如解讀句子,針對(duì)“女人停止吃藥因?yàn)樗齻儜言辛恕,問題將會(huì)是‘“她們”指的是什么?是女人還是藥?’,而如果將“懷孕”改為“患了癌癥”,答案將會(huì)不一樣。
機(jī)器達(dá)到和人類同等水平的語言理解能力是有可能的,但我們首先要明白當(dāng)我們?nèi)ダ斫饩渥踊蛘呶臋n的時(shí)候,我們的大腦到底經(jīng)歷了什么?
根據(jù)研究發(fā)現(xiàn),答案是“知識(shí)”,但現(xiàn)有的方法仍然存在局限性。
以學(xué)習(xí)外星人的語言為例,學(xué)習(xí)外星語言的過程通常是觀察他們的互動(dòng)以及構(gòu)建學(xué)習(xí)模型——關(guān)于他們的互動(dòng)和語言文本關(guān)系的模型,但僅僅憑零碎的單詞或者詞組信息是不夠的,必須理解它們的語境和意圖。
解決的方法是通過結(jié)合語境升級(jí)訓(xùn)練模型,把信息的前因后果考慮進(jìn)去。但這將會(huì)是難度極高的語言學(xué)習(xí)模型!因?yàn)槲覀冞需要去理解外星人的社會(huì)形態(tài)。
基于這個(gè)邏輯,需要首先搭建模擬外部世界的學(xué)習(xí)模型,用于理解人與人之間的互動(dòng)行為,理解外部世界是如何運(yùn)作的,最后再回到語言學(xué)習(xí)的部分,最終將模糊語言與實(shí)體世界結(jié)合起來。
外部世界模型和語言學(xué)習(xí)模型的搭建應(yīng)同步進(jìn)行,原因是來自人類文明史的啟發(fā),在人類發(fā)展的進(jìn)程中文明和語言密不可分,初級(jí)社會(huì)向高級(jí)社會(huì)演變的同時(shí),語言也從個(gè)體化走向社區(qū)化,語言的體系也變得更加的復(fù)雜多樣,反過來也促進(jìn)著人類社會(huì)的進(jìn)步。
機(jī)器也要“快思慢想”:構(gòu)造仿人腦的認(rèn)知系統(tǒng)
諾貝爾經(jīng)濟(jì)學(xué)家Kahenman在《快思慢想》中提出人腦的認(rèn)知系統(tǒng)分為一類認(rèn)知系統(tǒng)和二類認(rèn)知系統(tǒng)。
一類認(rèn)知系統(tǒng)負(fù)責(zé)完成可以快速完成的、無意識(shí)的動(dòng)作,比如口渴時(shí)把水杯拿起來喝水,但某些情況下可能導(dǎo)致結(jié)果不嚴(yán)謹(jǐn),由于一類認(rèn)知系統(tǒng)不處理語言信息,只能識(shí)別出眼前的電話,而不能解釋為什么認(rèn)為它是電話。
二類認(rèn)知系統(tǒng)則相反,負(fù)責(zé)耗時(shí)長、有意識(shí)的動(dòng)作,所以下至語言,上至編程,它都能Hold得住。人類在學(xué)習(xí)計(jì)算機(jī)科學(xué)和邏輯學(xué)當(dāng)中正是大量的用到了二類認(rèn)知系統(tǒng),而基于符號(hào)學(xué)的人工智能正往二類認(rèn)知系統(tǒng)的方向靠攏。
兼具兩個(gè)系統(tǒng)優(yōu)點(diǎn)的人工智能是我們要實(shí)現(xiàn)的,這樣的系統(tǒng)是接地氣的語言學(xué)習(xí)模型,它將是未來研究的主要方向,簡單來說,這樣的學(xué)習(xí)模型在信息覆蓋面方面是無死角的,通過細(xì)致入微的觀察周邊環(huán)境以及人的活動(dòng),將這些外部信息和語言聯(lián)系在一起。
圖片來源:論文《Grounded Language Learning in a Simulated 3D World》(如圖:人工智能體接收到文本指令后,在不同的場(chǎng)景中嘗試完成指定任務(wù))
大家?guī)缀醵荚谔剿鳌白罱拥貧狻钡恼Z言學(xué)習(xí)模型,比如通過深度強(qiáng)化學(xué)習(xí)模型,人工智能體在虛擬場(chǎng)景下接受指令完成各類任務(wù),智能體將模糊語言和具體實(shí)體場(chǎng)景聯(lián)系起來的能力越來越強(qiáng),意味著語言能力也越來越強(qiáng)。
人工智能體在訓(xùn)練中會(huì)主動(dòng)觀察,而且它的行為基本不被干預(yù),訓(xùn)練的效果只是被實(shí)驗(yàn)者持續(xù)觀察,這樣的框架將是未來語言學(xué)習(xí)模型的主流方向。
但這方面的語言學(xué)習(xí)研究因?yàn)檫停留在虛擬環(huán)境實(shí)施而備受質(zhì)疑,批評(píng)者認(rèn)為不在真實(shí)環(huán)境中測(cè)試的研究都是耍流氓。
實(shí)際上很多人操之過急了,真正懂“人話”的人工智能離我們還十分遙遠(yuǎn),這可是人類的終極目的呀。
我們步子不應(yīng)該邁太大,小目標(biāo)是搭建通用的學(xué)習(xí)機(jī)制和框架,讓人工智能在虛擬環(huán)境中應(yīng)對(duì)自如之后(走路),長遠(yuǎn)再考慮于實(shí)際環(huán)境中執(zhí)行(跑步)的分步走實(shí)施才是上上策。

發(fā)表評(píng)論
請(qǐng)輸入評(píng)論內(nèi)容...
請(qǐng)輸入評(píng)論/評(píng)論長度6~500個(gè)字
最新活動(dòng)更多
-
6月20日立即下載>> 【白皮書】精準(zhǔn)測(cè)量 安全高效——福祿克光伏行業(yè)解決方案
-
7月3日立即報(bào)名>> 【在線會(huì)議】英飛凌新一代智能照明方案賦能綠色建筑與工業(yè)互聯(lián)
-
7月22-29日立即報(bào)名>> 【線下論壇】第三屆安富利汽車生態(tài)圈峰會(huì)
-
7.30-8.1火熱報(bào)名中>> 全數(shù)會(huì)2025(第六屆)機(jī)器人及智能工廠展
-
7月31日免費(fèi)預(yù)約>> OFweek 2025具身機(jī)器人動(dòng)力電池技術(shù)應(yīng)用大會(huì)
-
免費(fèi)參會(huì)立即報(bào)名>> 7月30日- 8月1日 2025全數(shù)會(huì)工業(yè)芯片與傳感儀表展
推薦專題
- 1 AI 眼鏡讓百萬 APP「集體失業(yè)」?
- 2 大廠紛紛入局,百度、阿里、字節(jié)搶奪Agent話語權(quán)
- 3 深度報(bào)告|中國AI產(chǎn)業(yè)正在崛起成全球力量,市場(chǎng)潛力和關(guān)鍵挑戰(zhàn)有哪些?
- 4 上海跑出80億超級(jí)獨(dú)角獸:獲上市公司戰(zhàn)投,干人形機(jī)器人
- 5 一文看懂視覺語言動(dòng)作模型(VLA)及其應(yīng)用
- 6 國家數(shù)據(jù)局局長劉烈宏調(diào)研格創(chuàng)東智
- 7 下一代入口之戰(zhàn):大廠為何紛紛押注智能體?
- 8 百億AI芯片訂單,瘋狂傾銷中東?
- 9 Robotaxi新消息密集釋放,量產(chǎn)元年誰在領(lǐng)跑?
- 10 格斗大賽出圈!人形機(jī)器人致命短板曝光:頭腦過于簡單