
??新智元報(bào)道??來源:wired編輯:肖琴【新智元導(dǎo)讀】谷歌AI負(fù)責(zé)人Jeff Dean近日接受《連線》專訪,透露谷歌正在嘗試構(gòu)建具有通用智能、而非高度專業(yè)化智能的系統(tǒng)。盡管更大規(guī)模的計(jì)算系統(tǒng),尤其是為機(jī)器學(xué)習(xí)量身定做的系統(tǒng)仍然有很大的潛力,但谷歌正在試圖用更少的數(shù)據(jù)和更少的計(jì)算力來做機(jī)器學(xué)習(xí)。戳右邊鏈接上?新智元小程序?了解更多!
無論計(jì)算機(jī)將在未來社會中扮演何種角色,Jeff Dean都將對其結(jié)果產(chǎn)生重大影響。作為谷歌龐大的人工智能研究團(tuán)隊(duì)的領(lǐng)導(dǎo)者,他的工作涉及方方面面,從自動(dòng)駕駛汽車到家用機(jī)器人,再到谷歌強(qiáng)大的在線廣告業(yè)務(wù),無所不包。
《連線》(Wired)雜志近日在AI頂會NeurIPS上與Jeff Dean討論了他的團(tuán)隊(duì)的最新探索,以及谷歌如何試圖對其設(shè)置道德限制。
Jeff Dean
Jeff Dean:谷歌正在用更少的數(shù)據(jù)、更少的計(jì)算做機(jī)器學(xué)習(xí)
《連線》:你做了一個(gè)關(guān)于構(gòu)建新型計(jì)算機(jī)以推動(dòng)機(jī)器學(xué)習(xí)發(fā)展的研究報(bào)告。Google正在測試哪些新想法呢?
Jeff Dean:一個(gè)是將機(jī)器學(xué)習(xí)用于芯片上電路的布線。設(shè)計(jì)芯片時(shí),在設(shè)計(jì)了一堆新電路后,你必須以一種高效的方式將電路放在芯片上,以優(yōu)化面積、功率使用和其他許多參數(shù)。通常,人類專家需要花數(shù)周的時(shí)間完成這一任務(wù)。
我們可以讓一個(gè)機(jī)器學(xué)習(xí)模型去學(xué)習(xí)芯片布線這個(gè)游戲,而且效果非常好。AI可以得到與人類專家相當(dāng)甚至更好的結(jié)果。我們一直在使用谷歌內(nèi)部的不同芯片做這件事情,比如TPU(Google研發(fā)的自定義機(jī)器學(xué)習(xí)芯片)。
《連線》:更強(qiáng)大的芯片是AI最近取得進(jìn)展的關(guān)鍵。但Facebook的AI主管最近表示,這種策略很快就會陷入困境。本周,Google的一位頂級研究人員也敦促在該領(lǐng)域探索新的想法。
Jeff Dean:構(gòu)建更高效、更大規(guī)模的計(jì)算系統(tǒng),尤其是為機(jī)器學(xué)習(xí)量身定做的系統(tǒng),仍然有很大的潛力。我認(rèn)為在過去的五六年里所做的基礎(chǔ)研究仍然有很大的應(yīng)用空間。我們將與谷歌產(chǎn)品的同事合作,將這些研究投入實(shí)際應(yīng)用。
但我們也在考慮,基于我們今天能做什么和不能做什么,未來可能要面對的主要問題是什么。我們想構(gòu)建一個(gè)可以泛化到新任務(wù)的系統(tǒng)。用更少的數(shù)據(jù)和更少的計(jì)算做事情,將會變得十分有趣而且重要。
《連線》:在NeurIPS受到關(guān)注的另一個(gè)挑戰(zhàn)是,一些AI應(yīng)用程序提出了倫理問題。一年多前,在五角大樓的一項(xiàng)名為Maven的AI項(xiàng)目遭到抗議后,谷歌宣布了AI研究的七大原則。自那以后,谷歌的AI研究工作發(fā)生了怎樣的變化?
Jeff Dean:我認(rèn)為Google的所有人對如何將這些原則付諸實(shí)施都有了更好的理解。我們有一個(gè)流程,通過這個(gè)流程,考慮以某種方式使用機(jī)器學(xué)習(xí)的產(chǎn)品團(tuán)隊(duì)可以在設(shè)計(jì)整個(gè)系統(tǒng)之前獲得早期的意見,比如,你應(yīng)該如何收集數(shù)據(jù),以確保數(shù)據(jù)沒有偏見。
當(dāng)然了,我們還在繼續(xù)推動(dòng)在研究方向中體現(xiàn)這些原則。我們在關(guān)于偏見、公平、隱私和機(jī)器學(xué)習(xí)方面做了很多工作。
《連線》:這些原則排除了武器方面的工作,禁止將人工智能技術(shù)應(yīng)用在武器上,但允許與政府和軍方開展業(yè)務(wù)合作,包括國防項(xiàng)目。自Maven項(xiàng)目以來,谷歌有沒有啟動(dòng)過新的軍事項(xiàng)目?
Jeff Dean:我們很樂意以符合我們的原則的方式與軍方或其他政府機(jī)構(gòu)合作。因此,比如說我們想幫助提高海岸警衛(wèi)隊(duì)人員的安全,那是我們樂意做的事情。云計(jì)算團(tuán)隊(duì)更多參與其中,因?yàn)檫@確實(shí)是他們的業(yè)務(wù)范圍。
《連線》:穆斯塔法·蘇萊曼(Mustafa Suleyman)是DeepMind的聯(lián)合創(chuàng)始人,DeepMind是谷歌母公司Alphabet的一部分,也是機(jī)器學(xué)習(xí)研究的主要參與者之一。蘇萊曼最近跳槽到了谷歌。他說他將與你,以及谷歌的最高法律和政策執(zhí)行官Kent Walker一起工作。你們將與蘇萊曼一起做什么?
Jeff Dean:蘇萊曼在AI政策相關(guān)問題上有著廣闊的視野。他也參與了谷歌AI原則的制定和審查過程,所以我認(rèn)為他將把大部分時(shí)間集中在AI倫理和政策相關(guān)的工作上。我真心希望蘇萊曼自己評論一下他將具體做什么。
Kent的團(tuán)隊(duì)正在研究的一個(gè)領(lǐng)域是,應(yīng)該如何完善人工智能原則,以便為那些正在考慮在谷歌產(chǎn)品中使用諸如面部識別等AI技術(shù)的團(tuán)隊(duì)提供更多指導(dǎo)。
《連線》:你這周做了一個(gè)關(guān)于機(jī)器學(xué)習(xí)如何幫助社會應(yīng)對氣候變化的主題演講。在這方面機(jī)器學(xué)習(xí)有哪些機(jī)會?機(jī)器學(xué)習(xí)項(xiàng)目本身有時(shí)會耗費(fèi)大量能量,這又該如何解釋呢?
Jeff Dean:有很多機(jī)會可以將機(jī)器學(xué)習(xí)應(yīng)用到這個(gè)問題上。我的同事John Platt是最近一篇探討這一問題的論文的20多位作者之一,這篇論文有100多頁長。例如,機(jī)器學(xué)習(xí)可以幫助提高交通運(yùn)輸?shù)男?,或者使氣候模型更加精確,因?yàn)閭鹘y(tǒng)的模型計(jì)算量非常大,限制了空間分辨率。
我主要關(guān)注的是碳排放與機(jī)器學(xué)習(xí)。我見過的一些關(guān)于機(jī)器學(xué)習(xí)能源使用的論文并沒有考慮能源的來源。在Google數(shù)據(jù)中心,我們滿足全年所有計(jì)算需求的能源使用都是100%可再生的。
《連線》:除了氣候變化之外,你們團(tuán)隊(duì)明年還會拓展哪些研究領(lǐng)域?
Jeff Dean:一個(gè)是多模式學(xué)習(xí):這類任務(wù)有不同類型的模式,比如視頻和文本或視頻和音頻。我們的AI研究社區(qū)在這方面做的還不夠多,這個(gè)領(lǐng)域未來可能會變得更加重要。
機(jī)器學(xué)習(xí)在醫(yī)療領(lǐng)域的研究也是我們做了大量工作的領(lǐng)域。另一項(xiàng)是使設(shè)備上的機(jī)器學(xué)習(xí)模型更好,這樣我們就可以把更多有趣的功能加入到智能手機(jī)和其他設(shè)備中。
參考鏈接:https://www.wired.com/story/googles-ai-chief-do-more-less-data/