課程
/云計算&大數(shù)據(jù)
/大數(shù)據(jù)
/認識Hadoop--基礎(chǔ)篇
HDFS 文件系統(tǒng)是用來存儲數(shù)據(jù)的,mapreduce 是計算框架,這兩者是怎么結(jié)合的呢?
2017-11-26
源自:認識Hadoop--基礎(chǔ)篇 3-1
正在回答
這個好理解,HDFS是分布式文件存儲系統(tǒng),他的作用是實時的并發(fā)的讀取數(shù)據(jù),而mapreduce是一個算法,采用分而治之,然后并行的運算,各自的運算從HDFS中實時快速的讀取出來的結(jié)果在進行一個結(jié)果的合并,在大數(shù)據(jù)的時候一個好的算法和好的存儲的一個很好的結(jié)合。
舉報
Hadoop入門視頻教程,大數(shù)據(jù)人才的入門首選
1 回答沒有HDFS 和mapreduCe 是不是要先搭一個?
3 回答mapreduce里job的拆分是系統(tǒng)自動拆分還是需要開發(fā)者自己制定如何拆?
Copyright ? 2025 imooc.com All Rights Reserved | 京ICP備12003892號-11 京公網(wǎng)安備11010802030151號
購課補貼聯(lián)系客服咨詢優(yōu)惠詳情
慕課網(wǎng)APP您的移動學習伙伴
掃描二維碼關(guān)注慕課網(wǎng)微信公眾號
2017-11-27
這個好理解,HDFS是分布式文件存儲系統(tǒng),他的作用是實時的并發(fā)的讀取數(shù)據(jù),而mapreduce是一個算法,采用分而治之,然后并行的運算,各自的運算從HDFS中實時快速的讀取出來的結(jié)果在進行一個結(jié)果的合并,在大數(shù)據(jù)的時候一個好的算法和好的存儲的一個很好的結(jié)合。