Hadoop基础教程：Hadoop的整体框架组成

文章来源：更新时间:2016/7/12 16:43:10

在线老师点击咨询：

最新学讯：近期OCP认证正在报名中，因考试人员较多请尽快报名获取最近考试时间，报名费用请联系在线老师，甲骨文官方认证，报名从速！

我要咨询

Hadoop基础教程：Hadoop的整体框架组成，Hadoop由HDFS、MapReduce、HBase、Hive和ZooKeeper等成员组成，其中最基础最重要的两种组成元素为底层用于存储集群中所有存储节点文件的文件系统HDFS(Hadoop Distributed File System)和上层用来执行MapReduce程序的MapReduce引擎。

Pig是一个基于Hadoop的大规模数据分析平台，Pig为复杂的海量数据并行计算提供了一个简易的操作和编程接口

Chukwa是基于Hadoop的集群监控系统，由yahoo贡献

hive是基于Hadoop的一个工具，提供完整的sql查询功能，可以将sql语句转换为MapReduce任务进行运行

ZooKeeper：高效的，可扩展的协调系统,存储和协调关键共享状态

HBase是一个开源的，基于列存储模型的分布式数据库

HDFS是一个分布式文件系统。有着高容错性的特点，并且设计用来部署在低廉的硬件上，适合那些有着超大数据集的应用程序

MapReduce是一种编程模型，用于大规模数据集(大于1TB)的并行运算

下图是一个典型的Hadoop试验集群的部署结构。

Hadoop各组件之间是如何依赖共存的呢?下图为你展示：