Hadoop源码目录树
1、NameNode
创新互联公司成立于2013年,我们提供高端重庆网站建设、成都网站制作、成都网站设计、网站定制、全网营销推广、微信平台小程序开发、微信公众号开发、seo优化排名服务,提供专业营销思路、内容策划、视觉设计、程序开发来完成项目落地,为成都岗亭企业提供源源不断的流量和订单咨询。
---FSNamesystem:
------FSDirectory 目录树
---------INodeDirectory节点目录
------------List
---------------INodeDirectory
---------------INodeFile
------------------BlockInfo[]文件块(一个文件块包括所有的DataNode 存储信息)
---------------------Object[] triplets 存储(DatanodeStorageInfo包话{DatanodeDescriptor,DatanodeStorage})
---------------------BlockCollection保存的是INodeFile
---------------INodeSymlink
---------INodeMap
------BlockManager hdfs块管理器
---------DatanodeManager(注册、删除、添加)
------------HostFileManager 读取include/exclude 文件,精细化管理DataNode上架,下架
------------NetworkTopology 网络拓扑图,用于机架感知
---------HeartbeatManager 心跳包管理器,与DataNode 保持通信
---------BlockTokenSecretManager 块安全验证管理器
---------BlocksMap 块映射[BlockInfo]存储所有块的信息
------LeaseManager 租约管理器
---NameNodeRpcServer 对外提供的所有RPC接口调用
---NameNodeHttpServer 对外提供的web 访问
---HAContext{NameNodeHAContext}用于NameNode HA 高可用性
---HAState包括ActiveState、BackupState、StandbyState 三种状态
2、DataNode
---BlockPoolManager
------List
---------BPServiceActor 注册、心跳、接收块、删除块、更新块、坏块报告等
---FsDatasetSpi {FsDatasetImpl}数据节点,对所有目录数据块文件操作
---DataXceiverServer 数据节点,数据接收、发送服务
---DataBlockScanner 数据节点块扫描器
---DirectoryScanner 数据节点目录扫描器
---BlockPoolTokenSecretManager
---HttpServer2 对外提供的Web访问
网站名称:Hadoop源码目录树
转载来源:http://azwzsj.com/article/jpogci.html