Hadoop是什么

简介: Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。

Hadoop是一个由Apache基金会所开发的分布式系统基础架构。

用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。

[1] Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(high throughput)来访问应用程序的数据,适合那些有着超大数据集(large data set)的应用程序。HDFS放宽了(relax)POSIX的要求,可以以流的形式访问(streaming access)文件系统中的数据。

Hadoop的框架最核心的设计就是:HDFS和MapReduce。HDFS为海量的数据提供了存储,则MapReduce为海量的数据提供了计算。

 

相关介绍文章:

http://os.51cto.com/art/201207/346023.htm

 

http://www.cnblogs.com/skyme/archive/2011/10/26/2223984.html

目录
相关文章
|
存储 分布式计算 Java
Hadoop使用(一)
hadoop框架 Hadoop使用主/从(Master/Slave)架构,主要角色有NameNode,DataNode,secondary NameNode,JobTracker,TaskTracker组成。
861 0
|
分布式计算 资源调度 Hadoop
|
存储 分布式计算 Hadoop
Hadoop
Hadoop是一个由Apache基金会所开发的分布式系统基础架构。
|
SQL 分布式计算 大数据
应该在什么时候使用Hadoop
版权声明:本文为博主chszs的原创文章,未经博主允许不得转载。 https://blog.csdn.net/chszs/article/details/12114845 应该在什么时候使用Hadoop 作者:chszs,转载需注明。
886 0
|
SQL 存储 分布式计算
hadoop的特点
hadoop的特点
|
存储 分布式计算 资源调度
Hadoop构成
Hadoop构成
47 0
|
存储 编解码 分布式计算
Hadoop I/O
版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/qq1010885678/article/details/51318453 HDFS中的数据完整性 HDFSZ在写入数据的时候会计算数据的校验和,针对每个由dfs.
795 0
|
分布式计算 算法 大数据
|
存储 分布式计算 资源调度
Hadoop1.X 与 Hadoop2.X比较
鉴于好久没有更新博客,且最近开始找工作,所以对以往的相关知识进行整理 一:Haddop版本介绍 0.20.x版本最后演化成了现在的1.0.x版本 0.23.x版本最后演化成了现在的2.
1425 0

热门文章

最新文章

相关实验场景

更多