電子書(shū)丨《大數(shù)據(jù)處理框架Apache Spark設(shè)計(jì)與實(shí)現(xiàn)》

近年來(lái)，以Apache Spark為代表的大數(shù)據(jù)處理框架在學(xué)術(shù)界和工業(yè)界得到了廣泛的使用。本書(shū)以Apache Spark框架為核心，總結(jié)了大數(shù)據(jù)處理框架的基礎(chǔ)知識(shí)、核心理論、典型的Spark應(yīng)用，以及相關(guān)的性能和可靠性問(wèn)題。

本書(shū)分9章，主要包含四部分內(nèi)容。

第一部分 大數(shù)據(jù)處理框架的基礎(chǔ)知識(shí)（第1～2章）：介紹大數(shù)據(jù)處理框架的基本概念、系統(tǒng)架構(gòu)、編程模型、相關(guān)的研究工作，并以一個(gè)典型的Spark應(yīng)用為例概述Spark應(yīng)用的執(zhí)行流程。

第二部分 Spark大數(shù)據(jù)處理框架的核心理論（第3～4章）：介紹Spark框架將應(yīng)用程序轉(zhuǎn)化為邏輯處理流程，進(jìn)而轉(zhuǎn)化為可并行執(zhí)行的物理執(zhí)行計(jì)劃的一般過(guò)程及方法。

第三部分 典型的Spark應(yīng)用（第5章）：介紹迭代型的Spark機(jī)器學(xué)習(xí)應(yīng)用和圖計(jì)算應(yīng)用。第四部分 大數(shù)據(jù)處理框架性能和可靠性保障機(jī)制（第6～9章）：介紹Spark框架的Shuffle機(jī)制、數(shù)據(jù)緩存機(jī)制、錯(cuò)誤容忍機(jī)制、內(nèi)存管理機(jī)制等。