hadoop的核心是分布式文件系统hdfs和什么?

hadoop的核心是分布式文件系统hdfs和MapReduce。HDFS为海量的数据提供了存储,而MapReduce则为海量的数据提供了计算。

hadoop的核心是分布式文件系统hdfs和什么?

Hadoop是一7 2 S f |个由Apache基金会所开- y 0 N c发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,A V 6 6 { + | 2 G开发分布式程序。充分利用Z v ! n W集群的威力进行高速运算和存储。

Hadoop实现了一个分布式文件系统(Hadoop Dist- , b Wributed FilC U s z ? = be System),其中一个组z c /c : d ( ^是HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量x u u(high throughput)来访问应用程序的数据,适合那些有着超大数据集(large data set)的应用程序。

HDFS放宽了(rq / V ( u 9 3 3 =elax)POSIX的要求,可以以流的形式访问(streaming access)文件系统中的数据。

Hadoop的框架最核心的设计就是:HDFG a @ t fS和MapReduce。HDFS为海量的数据提供了存储,而MapReduce则为海量的数据提供了计算。

Hadoos L $ Z h | 5p 由许多元素构成。其最底部是 Hadoop Distributedb [ e 9 r ( File System(HDFS),B & 5它存储 Hadoop 集群中所, e u & g ( u /有存储节点上的文件。HDFS的上一层是MapReduce 引擎,该引擎由 JobTW S m Jrackers 和 Ta8 K S gskTrackers 组成。通过对H? V p ~ Iadoop分布式计算平台4 9 1 ( / D B &最核心的分布式文件系统HDFS、MapReduce处理过程,以及数据仓库工具Hive和分布式数据n 6 h库Hbase的介绍,基本涵盖了Q | J _ ` T . - Hadoof & ; 7 H x ?p分q 5 D P X D ~ u布式平台的所有技术核心。

更多相关知识,请访问:PHP中文网!

以上就是hadoop的核心是分布式文件系统hdfs和什么?的详细内容。