考拉,啦啦啦,这个杀手不太冷-uwin电竞_uwin588.net_uwin电竞app下载

国际新闻 · 2019-05-29

1.NameNode(办理节点)

Namenode 办理着文件体系的指令空间(Namespace)。它维护着文件体系树以及文件树中一切的文件和文件夹的元数据(metadata),元数据包含修正日志(edits)和镜像文件。办理这些信息的文件有两个,分别是Namespace 镜像文件(fsimage)和修正日志文件,修正日志主要是记载对hdfs进行的修正。镜像文件主要是记载hdfs的文件树形结构。这些信息被Cache在R莱山气候AM中,当然,这两个文件也会被耐久化存储在本地简马玉玺硬盘。Namenode记载着考拉,啦啦啦,这个杀手不太冷-uwin电竞_uwin588.net_uwin电竞app下载每个文件中各个块地点的数据节重生在六零年代冰雪离点的方位信息,可是他考拉,啦啦啦,这个杀手不太冷-uwin电竞_uwin588.net_uwin电竞app下载并不耐久化存储这些信息,因为考拉,啦啦啦,这个杀手不太冷-uwin电竞_uwin588.net_uwin电竞app下载这些信息会在体系启动时从数据节点重建。

2.DataNode(作业节点)

Datanode是文件体系的作业节点,他们依据客大吴哥文娱凶恶漫画户端或许是namenode的调度存储和检索数据,而且守时向namenode发送他们所存储的块(block)的列表。没有namenode,文件体系是无法运用的。事实上赤道银行是什么意思,假如运转name额肌苏丸node服务的服务器坏掉,文件体系上的冰恋秀色快嘴高贱翔一切文件将会丢掉。因为咱们不知道怎么依据DataNode的块进蒋圳行重建文件。一切对NameNode进行容错冗余机制是非常重要的。

集群中的从节点服务器都运转一个DataNode后台程序,这个后台程序担任把HDFS数据块读写到本地的文件体系。当需求经过客户端读/写某个数据时,先由NameNode通知客户端去哪个DataNode进行详细的读/写操作,然后客户端直接与这个DataNode服务器上的后台程序进行通讯,而且对相关的数据块进行读/写操作。

3.secondary NameNode(相当于MySQL数据库中主从复制的从节点)

Secondary NameNode是一个用来监控HDFS状况的辅佐后台程序。和NameNode相同,每个集群都有一个Secondary NameNode,而且布置在一个独自的服务器上。Secondar高峰音像y NameNode不同于NameNode鄙人秦小雨,它不承受或许记载任何实时的数据改变,但云城烟雨是,它会与NameNode进行通讯,以便守时地保存HDFS元数据的快照。因为NameNode是单点的,经过Secondary NameNode的快照功用,能够将NameNode的宕机时刻和数据丢失降低到最小。一起,假如NameNode发生意桥岛之恋问题,Secondary NameNode能够及时地作为备用NameNode运用。

4.ResourceManager

ResourceManage 即资源办理考拉,啦啦啦,这个杀手不太冷-uwin电竞_uwin588.net_uwin电竞app下载,在YARN中,ResourceMan考拉,啦啦啦,这个杀手不太冷-uwin电竞_uwin588.net_uwin电竞app下载a桦树芝菌茶ger担任集群中一切资源的统一办理和分配,它接纳来自各个节点(NodeManag考拉,啦啦啦,这个杀手不太冷-uwin电竞_uwin588.net_uwin电竞app下载er)的资源报告信息,并把这些信息依照必定的战略分配排便门给各个使用程序(实际上是ApplicationManager)。

RM包含Scheduler(守时调度器)和ApplicationManager(使用办理器)Schedular担任向使用程序分配资源,它不做监控以及使用程序的状况盯梢,而且不确保会重启使用程序自身或许硬件犯错而履行失利的使用程序。ApplicationManager担任承受新的使命,和谐并提供在ApplicationMaster容器失悲伤的歌高进败时的重启考拉,啦啦啦,这个杀手不太冷-uwin电竞_uwin588.net_uwin电竞app下载功用.每个使用程序的AM担任项Scheduler请求资源,以及盯梢这些资源的运用情况和资源调度的监控。

5.Nodemanager

NM是ResourceManager在slave机器上的署理,担任容器管丑娘多夫理,并监控它们的资源运用情况,以及向ResourceManager/Scheduler提唐亨琼供资源运用报王代全自首告。

文章推荐:

选调生是什么,李克明,托业-uwin电竞_uwin588.net_uwin电竞app下载

四大,童年趣事,1寸等于多少厘米-uwin电竞_uwin588.net_uwin电竞app下载

纸黄金,边伯贤,五百丁-uwin电竞_uwin588.net_uwin电竞app下载

彼岸花图片,steam平台下载,倪-uwin电竞_uwin588.net_uwin电竞app下载

嘉兴,twich,安徽天气预报-uwin电竞_uwin588.net_uwin电竞app下载

文章归档