Hadoop源码目录树-创新互联

1、NameNode

公司主营业务:网站建设、网站设计、移动网站开发等业务。帮助企业客户真正实现互联网宣传,提高企业的竞争能力。创新互联建站是一支青春激扬、勤奋敬业、活力青春激扬、勤奋敬业、活力澎湃、和谐高效的团队。公司秉承以“开放、自由、严谨、自律”为核心的企业文化,感谢他们对我们的高要求,感谢他们从不同领域给我们带来的挑战,让我们激情的团队有机会用头脑与智慧不断的给客户带来惊喜。创新互联建站推出西平免费做网站回馈大家。

---FSNamesystem:

------FSDirectory 目录树

---------INodeDirectory节点目录

------------List children子节点)

---------------INodeDirectory

---------------INodeFile

------------------BlockInfo[]文件块(一个文件块包括所有的DataNode 存储信息)

---------------------Object[] triplets 存储(DatanodeStorageInfo包话{DatanodeDescriptor,DatanodeStorage})

---------------------BlockCollection保存的是INodeFile

---------------INodeSymlink

---------INodeMap

------BlockManager hdfs块管理器

---------DatanodeManager(注册、删除、添加)

------------HostFileManager 读取include/exclude 文件,精细化管理DataNode上架,下架

------------NetworkTopology 网络拓扑图,用于机架感知

---------HeartbeatManager 心跳包管理器,与DataNode 保持通信

---------BlockTokenSecretManager 块安全验证管理器

---------BlocksMap 块映射[BlockInfo]存储所有块的信息

------LeaseManager 租约管理器

---NameNodeRpcServer 对外提供的所有RPC接口调用

---NameNodeHttpServer 对外提供的web 访问

---HAContext{NameNodeHAContext}用于NameNode HA 高可用性

---HAState包括ActiveState、BackupState、StandbyState 三种状态

2、DataNode

---BlockPoolManager

------List

---------BPServiceActor 注册、心跳、接收块、删除块、更新块、坏块报告等

---FsDatasetSpi {FsDatasetImpl}数据节点,对所有目录数据块文件操作

---DataXceiverServer 数据节点,数据接收、发送服务

---DataBlockScanner 数据节点块扫描器

---DirectoryScanner 数据节点目录扫描器

---BlockPoolTokenSecretManager

---HttpServer2 对外提供的Web访问

另外有需要云服务器可以了解下创新互联scvps.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。


本文题目:Hadoop源码目录树-创新互联
新闻来源:http://scjbc.cn/article/diigsp.html

其他资讯