講師回答 / 徐老師
如果想要構造某種格式的大量數(shù)據(jù),可以自己寫一個代碼循環(huán)進行迭代即可,在循環(huán)內(nèi)部按照一定格式組裝數(shù)據(jù),最后通過輸出日志或者直接寫文件的方式就可以得到對應的大量數(shù)據(jù)了。
2023-02-14
講師回答 / 徐老師
課程中需要用到的軟件安裝包、以及相關代碼都在網(wǎng)盤中了:鏈接:https://pan.baidu.com/s/1LaTqzY5NR9pv5-Xg5sWWOA?提取碼:1234?
2022-12-23
講師回答 / 徐老師
json數(shù)據(jù)的資料、sqoop相關的資料已經(jīng)上傳到這個網(wǎng)盤鏈接中了鏈接:https://pan.baidu.com/s/1AhKOkvsob_ugADZaQc6RlQ?提取碼:dy6j
2022-12-12
講師回答 / 徐老師
Hadoop里面其實包含了HDFS集群和YARN集群。根據(jù)你的意思來看應該是說的HDFS的主節(jié)點NameNode把,如果NameNode節(jié)點對應的內(nèi)存滿了,可以考慮使用federation聯(lián)邦機制(需要用到多個NameNode節(jié)點),這樣可以提高NameNode節(jié)點的存儲能力。此時每個NameNode負責維護一個命名空間,命名空間簡單理解就是一個HDFS目錄,這個HDFS目錄下文件的元數(shù)據(jù)信息就存儲在對應的這個NameNode內(nèi)存中。其他的NameNode負責維護其他的命名空間,這樣整個HDFS集群的存儲...
2022-09-07
講師回答 / 徐老師
客戶端機器的配置和集群機器的配置保持完全一樣即可,唯一的區(qū)別是,客戶端節(jié)點上不需要啟動任何進程。其實最簡單的做法就是把集群中修改好配置的hadoop安裝包直接拷貝到客戶端節(jié)點即可
2021-05-10
最新回答 / 慕哥6429941
9870端口無法打開https://blog.csdn.net/weixin_45094136/article/details/115349017另外要查看防火墻是否真的關閉了我安裝的時候9870,8088這2個端口都打不開就是這2個問題造成的
2021-03-17