-
combine:combine 是本地的reduce,根據(jù)key進(jìn)行本地?cái)?shù)據(jù)合并 reduce :reduce 是根據(jù)key進(jìn)行數(shù)據(jù)合并查看全部
-
mapper-shuffle-reducer-partioner查看全部
-
hdfs適合存放大文件查看全部
-
reduce任務(wù)數(shù)量調(diào)節(jié)查看全部
-
reduece任務(wù)數(shù)量查看全部
-
一個(gè)節(jié)點(diǎn)的map任務(wù)控制在10到100比較合適查看全部
-
開始看查看全部
-
map-shuffle-reduce查看全部
-
dataNode會(huì)將相同的數(shù)據(jù)快分別存儲(chǔ)在不同的dataNode,并且會(huì)存儲(chǔ)三份,以防數(shù)據(jù)丟失查看全部
-
DataNode是存儲(chǔ)數(shù)據(jù)用的,它最小的存儲(chǔ)單位為塊(block),block的大小為64M查看全部
-
分布式緩存1 加入緩存查看全部
-
二維向量余弦(xian)相似度查看全部
-
map --> reduce查看全部
-
本地文件上傳前進(jìn)行combine(reduce)查看全部
-
WordCount實(shí)例執(zhí)行過(guò)程查看全部
舉報(bào)
0/150
提交
取消