NameNode和DataNode启动

来源:互联网 发布:职业证书报考网站域名 编辑:程序博客网 时间:2024/06/04 19:41

       NameNode的启动方式有:format、regular、upgrade、rollback、finalize、import六种,DataNode的启动方式有:regular、rollback两种。


       NameNode regular启动时会先创建Server,Server是RPC服务器端的实现,它主要负责和远程的客户端进行通信,反序列化和序列化远程调用中的参数和返回值,然后再创建FSNamesystem,namesystem保存了所有的关于文件的元数据信息,还包括操作日志,负责数据的持久化来保证系统的可恢复性,加载所有的元数据信息到内存,这个过程是相当耗费时间的,所以NameNode节点启动之后,其它的DataNode也不能马上就启动。接下来NameNode开启Server远程调用服务,NameNode节点马上进入安全模式,等待DataNode节点的注册(调用DatanodeProtocol协议向NameNode进行注册),以及统计DataNode节点上报的数据块Block信息。当没有DataNode节点的注册和Block报告,NameNode就回离开安全模式。


      DataNode regular 启动是在NameNode节点的Server服务开启之后,DataNode才启动。对于DataNode主要负责以下四个模块:DataStorage保存数据块信息,DataNodeProtocol负责调用NameNode的服务,DataXceiverServer负责数据的传输,Server为客户端和其它DataNode节点服务。


 

原创粉丝点击