1. Spark是什么

Apache Spark是一個在集群上運行的統(tǒng)一計算引擎以及一組并行數(shù)據(jù)處理軟件庫。

Spark是目前最流行的開源大數(shù)據(jù)處理引擎。
它支持多種編程語言(eg: Scala, Java, Python, R)
提供支持SQL, 流處理, 機(jī)器學(xué)習(xí)等多種任務(wù)的軟件庫。

Spark的組件架構(gòu)圖