hadoop可以有多個主節(jié)點嗎？
如果主節(jié)點存儲滿了怎么辦，hadoop可以有多個主節(jié)點嗎？多個主節(jié)點的話是怎么管理的
慕沐1209291
2022-09-07
1 回答
舉報
0/150
提交
取消
2022-09-19
Hadoop里面其實包含了HDFS集群和YARN集群。
根據(jù)你的意思來看應(yīng)該是說的HDFS的主節(jié)點NameNode把，如果NameNode節(jié)點對應(yīng)的內(nèi)存滿了，可以考慮使用federation聯(lián)邦機制（需要用到多個NameNode節(jié)點），這樣可以提高NameNode節(jié)點的存儲能力。
此時每個NameNode負(fù)責(zé)維護一個命名空間，命名空間簡單理解就是一個HDFS目錄，這個HDFS目錄下文件的元數(shù)據(jù)信息就存儲在對應(yīng)的這個NameNode內(nèi)存中。其他的NameNode負(fù)責(zé)維護其他的命名空間，這樣整個HDFS集群的存儲能力就提高了。