分布式機(jī)器學(xué)習(xí):算法、理論與實(shí)踐
人工智能和大數(shù)據(jù)時(shí)代,解決最有挑戰(zhàn)性問題的主流方案是分布式機(jī)器學(xué)習(xí)!本書旨在全面介紹分布式機(jī)器學(xué)習(xí)的現(xiàn)狀,深入分析其中的核心技術(shù)問題,并且討論該領(lǐng)域未來的發(fā)展方向。
由微軟亞洲研究院機(jī)器學(xué)習(xí)核心團(tuán)隊(duì)潛心力作!鄂維南院士、周志華教授傾心撰寫推薦序!
本書旨在全面介紹分布式機(jī)器學(xué)習(xí)的現(xiàn)狀,深入分析其中的核心技術(shù)問題,并且討論該領(lǐng)域未來的發(fā)展方向。
全書共12章。第1章是緒論,向大家展示分布式機(jī)器學(xué)習(xí)這個(gè)領(lǐng)域的全景。第2章介紹機(jī)器學(xué)習(xí)的基礎(chǔ)知識。第3章到第8章是本書的核心部分,向大家細(xì)致地講解分布式機(jī)器學(xué)習(xí)的框架及其各個(gè)功能模塊。其中第3章給出整個(gè)分布式機(jī)器學(xué)習(xí)框架的綜述,而第4章到第8章則分別針對其中的數(shù)據(jù)與模型劃分模塊、單機(jī)優(yōu)化模塊、通信模塊、數(shù)據(jù)與模型聚合模塊加以介紹。接下來的三章是對前面內(nèi)容的總結(jié)與升華。其中第9章介紹由分布式機(jī)器學(xué)習(xí)框架中不同選項(xiàng)...
人工智能和大數(shù)據(jù)時(shí)代,解決最有挑戰(zhàn)性問題的主流方案是分布式機(jī)器學(xué)習(xí)!本書旨在全面介紹分布式機(jī)器學(xué)習(xí)的現(xiàn)狀,深入分析其中的核心技術(shù)問題,并且討論該領(lǐng)域未來的發(fā)展方向。
由微軟亞洲研究院機(jī)器學(xué)習(xí)核心團(tuán)隊(duì)潛心力作!鄂維南院士、周志華教授傾心撰寫推薦序!
本書旨在全面介紹分布式機(jī)器學(xué)習(xí)的現(xiàn)狀,深入分析其中的核心技術(shù)問題,并且討論該領(lǐng)域未來的發(fā)展方向。
全書共12章。第1章是緒論,向大家展示分布式機(jī)器學(xué)習(xí)這個(gè)領(lǐng)域的全景。第2章介紹機(jī)器學(xué)習(xí)的基礎(chǔ)知識。第3章到第8章是本書的核心部分,向大家細(xì)致地講解分布式機(jī)器學(xué)習(xí)的框架及其各個(gè)功能模塊。其中第3章給出整個(gè)分布式機(jī)器學(xué)習(xí)框架的綜述,而第4章到第8章則分別針對其中的數(shù)據(jù)與模型劃分模塊、單機(jī)優(yōu)化模塊、通信模塊、數(shù)據(jù)與模型聚合模塊加以介紹。接下來的三章是對前面內(nèi)容的總結(jié)與升華。其中第9章介紹由分布式機(jī)器學(xué)習(xí)框架中不同選項(xiàng)所組合出來的各式各樣的分布式機(jī)器學(xué)習(xí)算法,第10章討論這些算法的理論性質(zhì),第11章則介紹幾個(gè)主流的分布式機(jī)器學(xué)習(xí)系統(tǒng)(包括Spark MLlib 迭代式MapReduce系統(tǒng),Multiverso參數(shù)服務(wù)器系統(tǒng),TensorFlow數(shù)據(jù)流系統(tǒng))。最后的第12章是全書的結(jié)語,在對全書內(nèi)容進(jìn)行簡要總結(jié)之后,著重討論分布式機(jī)器學(xué)習(xí)這個(gè)領(lǐng)域未來的發(fā)展方向。
本書基于微軟亞洲研究院機(jī)器學(xué)習(xí)研究團(tuán)隊(duì)多年的研究成果和實(shí)踐經(jīng)驗(yàn)寫成,既可以作為研究生從事分布式機(jī)器學(xué)習(xí)方向研究的參考文獻(xiàn),也可以作為人工智能從業(yè)者進(jìn)行算法選擇和系統(tǒng)設(shè)計(jì)的工具書。
人工智能大潮中,市場上已有許多機(jī)器學(xué)習(xí)書籍,但是分布式機(jī)器學(xué)習(xí)的專門書籍還很少見。本書是希望學(xué)習(xí)和了解分布式機(jī)器學(xué)習(xí)的讀者的福音。
劉鐵巖
微軟亞洲研究院副院長。劉博士的先鋒性研究促進(jìn)了機(jī)器學(xué)習(xí)與信息檢索之間的融合,被國際學(xué)術(shù)界公認(rèn)為“排序?qū)W習(xí)”領(lǐng)域的代表人物。近年來在深度學(xué)習(xí)、分布式學(xué)習(xí)、強(qiáng)化學(xué)習(xí)等方面也頗有建樹,發(fā)表論文200余篇,被引用近兩萬次。多次獲得最佳論文獎(jiǎng)、最高引用論文獎(jiǎng)、Springer十大暢銷華人作者、Elsevier 最高引中國學(xué)者等。被聘為卡內(nèi)基-梅隆大學(xué)(CMU)客座教授,諾丁漢大學(xué)榮譽(yù)教授,中國科技大學(xué)教授、博士生導(dǎo)師;被評為國際電子電氣工程師學(xué)會(huì)(IEEE)會(huì)士,國際計(jì)算機(jī)學(xué)會(huì)(ACM)杰出會(huì)員。
陳薇
微軟亞洲研究院機(jī)器學(xué)習(xí)組主管研究員,研究機(jī)器學(xué)習(xí)各個(gè)分支的理論解釋和算法改進(jìn),尤其關(guān)注深度學(xué)習(xí)、分布式機(jī)器學(xué)習(xí)、強(qiáng)化學(xué)習(xí)、博弈機(jī)器學(xué)習(xí)、排序?qū)W習(xí)等。2011年于中國科學(xué)院數(shù)學(xué)與系統(tǒng)科學(xué)研究院獲得博士學(xué)位,同年加入微軟亞洲研究院,負(fù)責(zé)機(jī)器學(xué)習(xí)理論項(xiàng)目,先...
劉鐵巖
微軟亞洲研究院副院長。劉博士的先鋒性研究促進(jìn)了機(jī)器學(xué)習(xí)與信息檢索之間的融合,被國際學(xué)術(shù)界公認(rèn)為“排序?qū)W習(xí)”領(lǐng)域的代表人物。近年來在深度學(xué)習(xí)、分布式學(xué)習(xí)、強(qiáng)化學(xué)習(xí)等方面也頗有建樹,發(fā)表論文200余篇,被引用近兩萬次。多次獲得最佳論文獎(jiǎng)、最高引用論文獎(jiǎng)、Springer十大暢銷華人作者、Elsevier 最高引中國學(xué)者等。被聘為卡內(nèi)基-梅隆大學(xué)(CMU)客座教授,諾丁漢大學(xué)榮譽(yù)教授,中國科技大學(xué)教授、博士生導(dǎo)師;被評為國際電子電氣工程師學(xué)會(huì)(IEEE)會(huì)士,國際計(jì)算機(jī)學(xué)會(huì)(ACM)杰出會(huì)員。
陳薇
微軟亞洲研究院機(jī)器學(xué)習(xí)組主管研究員,研究機(jī)器學(xué)習(xí)各個(gè)分支的理論解釋和算法改進(jìn),尤其關(guān)注深度學(xué)習(xí)、分布式機(jī)器學(xué)習(xí)、強(qiáng)化學(xué)習(xí)、博弈機(jī)器學(xué)習(xí)、排序?qū)W習(xí)等。2011年于中國科學(xué)院數(shù)學(xué)與系統(tǒng)科學(xué)研究院獲得博士學(xué)位,同年加入微軟亞洲研究院,負(fù)責(zé)機(jī)器學(xué)習(xí)理論項(xiàng)目,先后在NIPS、ICML、AAAI、IJCAI等相關(guān)領(lǐng)域頂級國際會(huì)議和期刊上發(fā)表文章30余篇。
王太峰
螞蟻金服人工智能部總監(jiān)、資深算法專家。在螞蟻金服負(fù)責(zé)AI算法組件建設(shè),算法工作服務(wù)于螞蟻金服的支付、國際、保險(xiǎn)等多條業(yè)務(wù)線。在加入螞蟻之前在微軟亞洲研究院工作11年,任主管研究員,他的研究方向包括大規(guī)模機(jī)器學(xué)習(xí)、數(shù)據(jù)挖掘、計(jì)算廣告學(xué)等。在國際頂級的機(jī)器學(xué)習(xí)會(huì)議上發(fā)表近20篇的論文,在大規(guī)模機(jī)器學(xué)習(xí)工具開源方面也做出過很多貢獻(xiàn),在微軟期間主持開發(fā)過DMTK的開源項(xiàng)目。
高飛
微軟亞洲研究院副研究員,主要從事分布式機(jī)器學(xué)習(xí)和深度學(xué)習(xí)的研究工作,并在國際會(huì)議上發(fā)表多篇論文。2014年設(shè)計(jì)開發(fā)了當(dāng)時(shí)規(guī)模最大的主題模型算法和系統(tǒng)LightLDA。他還開發(fā)了一系列分布式機(jī)器學(xué)習(xí)系統(tǒng),并通過微軟分布式機(jī)器學(xué)習(xí)工具包(DMTK)開源在GitHub上。
