慕沐1209291
2022-09-07 12:21
如果主节点存储满了怎么办,hadoop可以有多个主节点吗?多个主节点的话是怎么管理的
Hadoop里面其实包含了HDFS集群和YARN集群。
根据你的意思来看应该是说的HDFS的主节点NameNode把,如果NameNode节点对应的内存满了,可以考虑使用federation联邦机制(需要用到多个NameNode节点),这样可以提高NameNode节点的存储能力。
此时每个NameNode负责维护一个命名空间,命名空间简单理解就是一个HDFS目录,这个HDFS目录下文件的元数据信息就存储在对应的这个NameNode内存中。其他的NameNode负责维护其他的命名空间,这样整个HDFS集群的存储能力就提高了。
快速入门Hadoop3.0大数据处理
16784 学习 · 74 问题
相似问题