大數(shù)據(jù)處理框架Apache Spark設計與實現(xiàn)（全彩）
近年來，以Apache Spark為代表的大數(shù)據(jù)處理框架在學術界和工業(yè)界得到了廣泛的使用。本書以Apache Spark框架為核心，總結了大數(shù)據(jù)處理框架的基礎知識、核心理論、典型的Spark應用，以及相關的性能和可靠性問題。本書分9章，主要包含四部分內(nèi)容。第一部分 大數(shù)據(jù)處理框架的基礎知識（第1～2章）：介紹大數(shù)據(jù)處理框架的基本概念、系統(tǒng)架構、編程模型、相關的研究工作，并以一個典型的Spark應用為例概述Spark應用的執(zhí)行流程。第二部分 Spark大數(shù)據(jù)處理框架的核心理論（第3～4章）：介紹Spark框架將應用程序轉化為邏輯處理流程，進而轉化為可并行執(zhí)行的物理執(zhí)行計劃的一般過程及方法。第三部分 典型的Spark應用（第5章）：介紹迭代型的Spark機器學習應用和圖計算應用。第四部分 大數(shù)據(jù)處理框架性能和可靠性保障機制（第6～9章）：介紹Spark框...
近年來，以Apache Spark為代表的大數(shù)據(jù)處理框架在學術界和工業(yè)界得到了廣泛的使用。本書以Apache Spark框架為核心，總結了大數(shù)據(jù)處理框架的基礎知識、核心理論、典型的Spark應用，以及相關的性能和可靠性問題。本書分9章，主要包含四部分內(nèi)容。第一部分 大數(shù)據(jù)處理框架的基礎知識（第1～2章）：介紹大數(shù)據(jù)處理框架的基本概念、系統(tǒng)架構、編程模型、相關的研究工作，并以一個典型的Spark應用為例概述Spark應用的執(zhí)行流程。第二部分 Spark大數(shù)據(jù)處理框架的核心理論（第3～4章）：介紹Spark框架將應用程序轉化為邏輯處理流程，進而轉化為可并行執(zhí)行的物理執(zhí)行計劃的一般過程及方法。第三部分 典型的Spark應用（第5章）：介紹迭代型的Spark機器學習應用和圖計算應用。第四部分 大數(shù)據(jù)處理框架性能和可靠性保障機制（第6～9章）：介紹Spark框架的Shuffle機制、數(shù)據(jù)緩存機制、錯誤容忍機制、內(nèi)存管理機制等。
許利杰
現(xiàn)任中國科學院軟件研究所副研究員、碩士生導師，于中科院軟件所獲得博士學位。當前主要從事大數(shù)據(jù)系統(tǒng)方面的研究工作，已在國際權威會議如VLDB、ICDCS、IPDPS、ISSRE、ICAC等發(fā)表論文10余篇，主持多項國家自然科學基金，以及華為、京東、聯(lián)想等企業(yè)的合作研發(fā)項目。
曾為Apache Spark和Hadoop修復多個內(nèi)核代碼嚴重錯誤，編寫的SparkInternals技術文檔被社區(qū)廣泛關注，獲得四千多顆星。
博士期間曾在微軟亞洲研究院、阿里巴巴、騰訊擔任客座研究學生。目前還擔任中國計算機學會系統(tǒng)軟件專委會委員、中國科學院青年創(chuàng)新促進會會員。
方亞芬
現(xiàn)任中國科學院軟件研究所工程師，于南開大學獲得學士學位、中科院軟件所獲得碩士學位。
當前主要從事大數(shù)據(jù)系統(tǒng)、操作系統(tǒng)方面的研發(fā)工作，參與多項國家自然科學基金、國家重點研發(fā)計劃，以及華為、騰訊...
許利杰
現(xiàn)任中國科學院軟件研究所副研究員、碩士生導師，于中科院軟件所獲得博士學位。當前主要從事大數(shù)據(jù)系統(tǒng)方面的研究工作，已在國際權威會議如VLDB、ICDCS、IPDPS、ISSRE、ICAC等發(fā)表論文10余篇，主持多項國家自然科學基金，以及華為、京東、聯(lián)想等企業(yè)的合作研發(fā)項目。
曾為Apache Spark和Hadoop修復多個內(nèi)核代碼嚴重錯誤，編寫的SparkInternals技術文檔被社區(qū)廣泛關注，獲得四千多顆星。
博士期間曾在微軟亞洲研究院、阿里巴巴、騰訊擔任客座研究學生。目前還擔任中國計算機學會系統(tǒng)軟件專委會委員、中國科學院青年創(chuàng)新促進會會員。
方亞芬
現(xiàn)任中國科學院軟件研究所工程師，于南開大學獲得學士學位、中科院軟件所獲得碩士學位。
當前主要從事大數(shù)據(jù)系統(tǒng)、操作系統(tǒng)方面的研發(fā)工作，參與多項國家自然科學基金、國家重點研發(fā)計劃，以及華為、騰訊、中國郵政等企業(yè)的合作研發(fā)項目。
曾在阿里巴巴等擔任客座研究學生，目前是華為openEuler社區(qū)樹莓派項目負責人。