小象學(xué)院 Hadoop大數(shù)據(jù)應(yīng)用實(shí)踐
Hadoop核心組件
Hadoop由四個(gè)主要模塊組成:
Hadoop Common: 一組工具和庫,可補(bǔ)充其他模塊并確保與用戶計(jì)算機(jī)系統(tǒng)的兼容性;
Hadoop Distributed File System (HDFS):提供可對(duì)應(yīng)用數(shù)據(jù)進(jìn)行高吞吐量訪問的分布式文件系統(tǒng)。;
Hadoop YARN(Yet Another Resource Negotiator):作業(yè)調(diào)度和集群資源管理框架;
Hadoop MapReduce:基于YARN的大數(shù)據(jù)集并行處理系統(tǒng),從數(shù)據(jù)庫讀取,轉(zhuǎn)換和分析數(shù)據(jù)。
Hadoop生態(tài)系統(tǒng)
標(biāo)簽: