-
階段1查看全部
-
MapReduce的幾個(gè)階段查看全部
-
過程查看全部
-
本章概覽查看全部
-
Hdfs架構(gòu)圖查看全部
-
mapper輸出到reduce輸出流程圖
查看全部 -
多數(shù)情況下,combine邏輯和reduce邏輯一樣
查看全部 -
本地combine優(yōu)化
查看全部 -
mapper到reduce過程總結(jié)
查看全部 -
本地合并:mapper完成之后,reduce進(jìn)行之前
查看全部 -
由于namenode存儲(chǔ)了每個(gè)文件的元數(shù)據(jù)信息(有多少分片,在那些分區(qū)等等),并且受限于內(nèi)存,hdfs適合存貯大文件,如果有大量的小文件,要進(jìn)行文件合并
查看全部 -
文件超過每一個(gè)數(shù)據(jù)塊的大小,就會(huì)進(jìn)行分片
查看全部 -
一個(gè)mapreduce作業(yè)中,分區(qū)數(shù)量、reduce任務(wù)數(shù)量和最終輸出的文件數(shù)量是一致的
查看全部 -
小結(jié)----
查看全部 -
算法步驟--
查看全部
舉報(bào)
0/150
提交
取消