hdfs体系结构
2016-12-13 21:34:01 0 举报
HDFS(Hadoop Distributed File System)是Hadoop项目的核心子项目,是分布式计算中数据存储管理的基础,是基于流数据模式访问和处理超大文件的需求而开发的。它采用了主从(Master/Slave)结构模型,包括一个NameNode和若干个DataNode。NameNode负责管理文件系统的元数据,如命名空间、文件目录树、文件到块的映射关系等;而DataNode则负责存储和管理数据块,每个数据块在集群中以多个副本的形式进行冗余备份,以提高数据的可靠性和容错性。同时,HDFS还支持数据块的动态调整和负载均衡,以满足不同场景下的性能需求。