數(shù)據(jù)計算層：
MapReduce是Hadoop的核心組成部分，可以結(jié)合Hive通過SQL的方式進行數(shù)據(jù)的離線計算，當然也可以單獨編寫MapReduce應用程序進行計算。Storm用于進行數(shù)據(jù)的實時計算，可以非常容易地實時處理無限的流數(shù)據(jù)。Flink提供了離線計算庫和實時計算庫兩種，離線計算庫支持FlinkML（機器學習）、Gelly（圖計算）、基于Table的關(guān)系操作，實時計算庫支持CEP（復雜事件處理），同時也支持基于Table的關(guān)系操作。