人工智能已到瓶頸!院士“聯(lián)名”反深度學(xué)習(xí) 并指出AI未來發(fā)展方向
前言:
本文引用地址:http://www.ex-cimer.com/article/201807/382700.htm在剛剛結(jié)束的CCF-GAIR大會上,來自清華、加州大學(xué)伯克利、斯坦福、哈工大等多所國內(nèi)外頂級理工科院校的院士齊聚深圳,分享了自己最新的研究。雖然各自研究的細(xì)分領(lǐng)域有所不同,但是透過貫穿始終的技術(shù)講演,避不開的事實是,多位院士都在或直接或間接的去“批判”深度學(xué)習(xí)算法。
演講中,他們再次明確指出深度學(xué)習(xí)的缺陷,進(jìn)而點出,在可以預(yù)見的未來里,隨著研究的推進(jìn),當(dāng)下的深度學(xué)習(xí)算法將會逐步被拉下神壇。
不過,順著學(xué)術(shù)界走入產(chǎn)業(yè)應(yīng)用,會發(fā)現(xiàn)產(chǎn)業(yè)界的關(guān)注重點是在技術(shù)的落地。所謂落地,本質(zhì)上就是無數(shù)應(yīng)用場景的聚合。所以對于AI企業(yè)而言,對業(yè)務(wù)的探索和用恰當(dāng)?shù)募夹g(shù)去解決實際問題才是首當(dāng)其沖的。
因此,深度學(xué)習(xí)存在缺陷,這一問題短期內(nèi)并不會妨礙AI當(dāng)下不可阻擋的發(fā)展之勢,技術(shù)的局限也不意味著AI公司們將會無事可做。
但陽春白雪的研究始終引領(lǐng)著AI產(chǎn)業(yè)的技術(shù)走向,也是企業(yè)盈利和產(chǎn)業(yè)變革的關(guān)鍵驅(qū)動力。
所以,在深度學(xué)習(xí)被過度炒熱的當(dāng)下,我們理應(yīng)試著站在院士們的“肩膀”上,看的更遠(yuǎn)。而企業(yè)家們在腳踏實地的同時,也應(yīng)當(dāng)不忘仰望星空。
盡管這已不是什么新鮮的話題,但是行業(yè)內(nèi)一直沒有可以解決問題的辦法。本文旨在傳達(dá)學(xué)術(shù)界研究者們提供的一些新思路。
機(jī)器學(xué)習(xí)的弊?。涸从趯Α按蟆钡恼`解
當(dāng)下,最常被提起的名詞就是機(jī)器學(xué)習(xí)、深度學(xué)習(xí)和神經(jīng)網(wǎng)絡(luò),用數(shù)學(xué)上集合里的概念去理解這三者之間的聯(lián)系,他們之間依次是包含的關(guān)系,即機(jī)器學(xué)習(xí)包含深度學(xué)習(xí),深度學(xué)習(xí)包含神經(jīng)網(wǎng)絡(luò)。其中,四層以上的神經(jīng)網(wǎng)絡(luò)就可以稱之為深度學(xué)習(xí),而深度學(xué)習(xí)是一種典型的機(jī)器學(xué)習(xí)。
上世紀(jì)五十年代,神經(jīng)網(wǎng)絡(luò)這一算法結(jié)構(gòu)出現(xiàn),當(dāng)時,它的正式名稱應(yīng)叫做感知機(jī),但已經(jīng)包含了輸入層、隱含層和輸出層這一經(jīng)典的通用結(jié)構(gòu),并且隨著隱含層層數(shù)的加深,對事情的描述就愈加精準(zhǔn)。
但是,神經(jīng)網(wǎng)絡(luò)是一種以輸入為導(dǎo)向的算法,所以優(yōu)質(zhì)的結(jié)果一定取決于接近“無窮”量級的數(shù)據(jù)。因而,在2000年互聯(lián)網(wǎng)革命沒有爆發(fā)之前,它一直都處在無人問津的階段。
正如大家所知道的,互聯(lián)網(wǎng)時代積累的大量數(shù)據(jù)和云計算帶來的算力的大幅提升,極大地釋放了深度學(xué)習(xí)算法(深層的神經(jīng)網(wǎng)絡(luò))的潛力,因而也讓人工智能時代全面爆發(fā),產(chǎn)業(yè)應(yīng)用得以蓬勃發(fā)展。數(shù)據(jù)顯示,2017年我國人工智能市場規(guī)模達(dá)到216.9億元,同比增長52.8%,預(yù)計2018年市場規(guī)模將達(dá)到339億元。
然而,隨著產(chǎn)業(yè)應(yīng)用的成熟,以及大家對真正“智能”的渴求,讓算力和深度學(xué)習(xí)算法本身的局限性,顯露無疑。
“老百姓概念里的‘大數(shù)據(jù)’和我們所認(rèn)為的大數(shù)據(jù)是完全不一樣的,就拿圖像處理來說,數(shù)十億的數(shù)據(jù)量看似量級很高,但對我們來說,它其實是‘小樣本’。因為真正能夠訓(xùn)練出好的模型的數(shù)據(jù)量,應(yīng)當(dāng)是趨于無窮的,所以即便是擁有了大量數(shù)據(jù)去訓(xùn)練模型,和理想的智能模型之間,也有著本質(zhì)的差別?!睆乃惴ㄐ再|(zhì)出發(fā),加州大學(xué)伯克利分校電子工程與計算機(jī)系教授馬毅也點出了當(dāng)下這項火熱技術(shù)的局限性。
因而從學(xué)者、投資人到AI頭部企業(yè),尋找新的技術(shù)和方向成為了現(xiàn)在的重點。
在會議的開場報告中,清華大學(xué)張鈸院士呼吁大家思考的“如何走向真正的人工智能”成為了為期三天會議的基調(diào),同時也反映了行業(yè)發(fā)展至當(dāng)下階段,眾人的訴求。
新方向探索:數(shù)據(jù)處理方法、基本思想和技術(shù)思路
·數(shù)據(jù)處理層面,語義向量空間或進(jìn)一步拓寬入口
看見了技術(shù)的“天花板”,很多專家學(xué)者開始提出“小數(shù)據(jù)”的概念,然而清華大學(xué)人工智能學(xué)院院長張鈸院士卻不認(rèn)為數(shù)據(jù)量的大小是當(dāng)下的根本問題所在,他指出,傳統(tǒng)的人工智能三要素將不能帶來真正的智能。
“評價人工智能獲得的成果,我們可以從這五件事來看:深藍(lán)打敗人類國際象棋冠軍;IBM 在電視知識競賽中打敗了美國的前兩個冠軍;2015 年微軟在ImageNet 上做圖象識別,誤識率略低于人類;百度、訊飛也都宣布在單句的中文語音識別上識別準(zhǔn)確度略低于人類和AlphaGo 打敗了李世石。前兩件事歸為一類,后三件事可歸為另一類。大家一致認(rèn)為,這五件事得以發(fā)生的三要素是:大數(shù)據(jù)、算力的提升和非常好的人工智能算法。但我認(rèn)為大家忽略了一項因素,就是這所有的成果必須建立在一個合適的場景下?!?/p>
換言之,當(dāng)下人工智能的發(fā)展避不開種種限制條件,因而智能的機(jī)器也只能夠照章辦事,沒有任何靈活性,也達(dá)不到人們想要的智能,而這也就是當(dāng)下AI的發(fā)展?fàn)顟B(tài)。
“我們現(xiàn)在的人工智能基本方法有缺陷,而我們必須走向具有理解能力的AI,這才是真正的人工智能?!睆堚撛菏吭谘葜v中指出。
那解決辦法是什么呢?通過循序漸進(jìn),張院士在演講中給出了思路,并指明語義向量空間這一技術(shù)方向。
“首先,需要明確的是,現(xiàn)有的機(jī)器缺乏推理能力的原因在于他沒有常識?!?/p>
張鈸院士通過實驗驗證,常識的建立確實會極大程度的提升機(jī)器的性能。而為機(jī)器建立常識庫也成為人工智能企業(yè)進(jìn)一步提升系統(tǒng)性能的第一步?!懊绹?984 年就搞了這樣一個常識庫的工程,做到現(xiàn)在還沒完全做出來??梢?,要走向真正的人工智能,有理解的人工智能,是一條很漫長的路?!?/p>
但即使在建立常識庫的基礎(chǔ)上,做到有理解能力的人工智能依然不容易。想要提升智能的第二步,在張院士看來,就是將感性和知識的世界統(tǒng)一起來,而這將為人工智能的發(fā)展帶來一次質(zhì)的飛躍。
“深度學(xué)習(xí)之所以能夠極大的促進(jìn)人工智能的發(fā)展,技術(shù)上的關(guān)鍵在于人們能夠?qū)@取的標(biāo)量數(shù)據(jù)轉(zhuǎn)變?yōu)橄蛄?,從而用到機(jī)器上。但至今為止,將行為(特征向量)和數(shù)據(jù)(符號向量)結(jié)合起來使用始終是科研的難點,而這就限制了機(jī)器變得更‘智能’?!?/p>
不僅如此,從安全層面來看,純數(shù)據(jù)驅(qū)動的系統(tǒng)也存在很大問題——魯棒性很差,易受到很大的干擾。因而,在大量樣本的訓(xùn)練下,系統(tǒng)仍會犯重大的錯誤。如商湯、曠視等頭部企業(yè)也表示,即便訓(xùn)練出的系統(tǒng)模型準(zhǔn)確率高達(dá)99%,但在實際應(yīng)用中,系統(tǒng)仍然會犯很多“弱智”的錯誤。
“我們現(xiàn)在想出的解決辦法是這樣的,就是把這特征向量空間和符號向量投射到一個空間去,這個空間我們把它叫做語義向量空間?!?/p>
怎么做?
張院士指出,第一,要通過Embedding(嵌入)把符號變成向量,盡量保持語義不丟失;第二就是Raising(提升),結(jié)合神經(jīng)學(xué)科,把特征空間提升到語義空間。
“只有解決這些問題,我們才能夠建立一個統(tǒng)一的理論。因為在過去,對感知和認(rèn)知的處理方法是不同的,因而兩者不在同一維度,無法統(tǒng)一處理。但如果我們能夠?qū)⒏兄驼J(rèn)知投射到同一空間,我們就可以建立一個統(tǒng)一的理論框架,并在語義向量空間里解決理解問題。這是我們的目標(biāo),但是這項工作是非常艱巨?!?/p>
·基本思想的顛覆,模糊計算或是未來
“無論是知識圖譜,語義向量空間還是當(dāng)下的其他深度學(xué)習(xí)訓(xùn)練,它們都是基于概率統(tǒng)計理論,而模糊邏輯不是,它是以模糊集理論為基礎(chǔ)的?!狈浅4竽懙?,從思想層面,美國猶他州立大學(xué)計算機(jī)系終身教授承恒達(dá)給出了顛覆性的想法。
其實模糊邏輯并非全新的概念。1931年,Kurt Godel發(fā)表論文證明了形式數(shù)論(即算術(shù)邏輯)系統(tǒng)的“不完全性定理”,模糊邏輯誕生。而在1965年,美國加州大學(xué)的L.A.Zadeh博士發(fā)表的關(guān)于模糊集的論文,標(biāo)志著人類首次用數(shù)學(xué)理論成功描述了不確定性。
“現(xiàn)在的計算機(jī)領(lǐng)域,不是0就是1,而我們描述的是0到1之間的很多不確定性成分,其實,這一過程描述的是導(dǎo)致結(jié)果的原因。以兩瓶水為例,一瓶水上標(biāo)記‘是純凈水的概率是0.91’,而另一瓶水上標(biāo)記的是‘水的純凈程度是0.91’,你會選擇哪一瓶呢?顯然,你會選擇后者。這里的思考判斷過程就是模糊邏輯,因為后者對于程度的描述本質(zhì)上就是模糊的。”
目前,類似于經(jīng)典邏輯體系(微積分、線性代數(shù)、生物學(xué)等衍生學(xué)科),模糊邏輯也逐步形成了自己的邏輯體系。
然而再好的技術(shù),都需要結(jié)合應(yīng)用去展現(xiàn)它的優(yōu)勢。在這一方面,承教授也是格外重視,于是他選擇了乳腺癌的早期診斷研究領(lǐng)域?!暗侥壳盀橹?,我們的設(shè)計樣本已經(jīng)被全世界二十多個國家,五十多個團(tuán)隊用來使用?!?/p>
在承教授看來,現(xiàn)有的技術(shù)存在著非常明顯的不足,需要大家沉下心來去分析問題,從而探索到改進(jìn)的方法?!艾F(xiàn)在大家都在模擬腦波中的電信號,但其實大腦里存在的不僅僅是電信號,還有化學(xué)反應(yīng)。而很多人在做的醫(yī)學(xué)圖像處理,實際上只是做圖像處理,卻不是醫(yī)學(xué)圖像處理,它們之間是有著非常大的不同?!?/p>
·技術(shù)思路:大繁至簡
當(dāng)下,面對技術(shù)的毫無進(jìn)展,AI公司的焦慮顯而易見。不同于上面院士教授們給出的具體技術(shù)思路,馬毅教授更像是科技界的“魯迅”,他用PPT中一張張演講稿中的優(yōu)質(zhì)論文做例,只為重新喚醒大家對于AI的思考。
“神經(jīng)網(wǎng)絡(luò),導(dǎo)入的數(shù)據(jù)有一個很小的改動,分類就會有很大的變化,這不是什么新發(fā)現(xiàn),2010年,大家就遇到這樣的問題,但至今沒有解決?!毖葜v一開始,馬毅就拎出了“老生常談”,毫不留情的將一盆冷水澆到了眾多對AI盲目樂觀的人身上。
對技術(shù)的不正確認(rèn)知,馬毅也在極力得糾正。
“在人臉識別領(lǐng)域,要讓算法具有魯棒性,比寫個AlphaGo要困難千倍?!?/p>
“都說神經(jīng)網(wǎng)絡(luò)越大越好,這簡直是胡說八道?!?/p>
嬉笑怒罵間,從事研究數(shù)年,馬毅給出了自己的思考方向:“真正的優(yōu)質(zhì)算法一定是最簡單的,比如迭代、遞歸,還有經(jīng)典的ADMM,這些簡單的算法就很好,也很有用?!?/p>
結(jié)語
接下來,人工智能技術(shù)的發(fā)展并不會樂觀,尤其是產(chǎn)業(yè)發(fā)展將進(jìn)入一個平緩期,但是這并不意味著學(xué)術(shù)界和產(chǎn)業(yè)界將無事可做。
正如張鈸院士指出的,“我們正在通往真正AI 的路上,現(xiàn)在走得并不遠(yuǎn),在出發(fā)點附近。但人工智能永遠(yuǎn)在路上,大家要有思想準(zhǔn)備,而這也就是人工智能的魅力。”
評論