沒(méi)有代碼下載嗎? 那我貼一個(gè) https://github.com/nameistw/BigData/tree/master/hadoop/matrix
2018-04-29
The method addInputPath(JobConf, Path) in the type FileInputFormat is not applicable for the arguments (Job, Path)
報(bào)這個(gè)錯(cuò)誤時(shí)需要將舊版的 API org.apache.hadoop.mapred.FileInputFormat;
換成 org.apache.hadoop.mapreduce.lib.input.FileInputFormat;
報(bào)這個(gè)錯(cuò)誤時(shí)需要將舊版的 API org.apache.hadoop.mapred.FileInputFormat;
換成 org.apache.hadoop.mapreduce.lib.input.FileInputFormat;
2018-04-28
hadoop 1.2.1版本
conf.set("fs.defaultDF,hdfs")改成
conf.set("fs.default.name", hdfs);
conf.set("fs.defaultDF,hdfs")改成
conf.set("fs.default.name", hdfs);
2018-04-21
建議大家可以先看一下這個(gè)博客
主要講解如何配置虛擬機(jī)centos,安裝配置hadoop環(huán)境,將eclipse與hadoop連接
http://www.cnblogs.com/xia520pi/category/346943.html
主要講解如何配置虛擬機(jī)centos,安裝配置hadoop環(huán)境,將eclipse與hadoop連接
http://www.cnblogs.com/xia520pi/category/346943.html
2018-04-20
在Shuffle(洗牌)階段,key如果是字母會(huì)自動(dòng)根據(jù)字典的順序進(jìn)行排序,如果是數(shù)字則升序。
2018-03-28
最新回答 / jackXu2017
根據(jù)相似度矩陣作為修改用戶評(píng)分矩陣的權(quán)重,等式結(jié)果為6*3矩陣是用戶對(duì)于6個(gè)物品的針對(duì)于物品相似度的評(píng)分矩陣。不知道我有沒(méi)有說(shuō)清楚……
2018-03-19
老師講的非常好,不過(guò)需要各位有基礎(chǔ),等大家把矩陣相乘學(xué)完,再對(duì)比這個(gè)圖,能夠清晰的講解出map-shuffle-reduce對(duì)應(yīng)的區(qū)段,以及顏色塊內(nèi)對(duì)應(yīng)的鍵值對(duì)的集合,那就學(xué)到了!我也是回頭反過(guò)來(lái)才一一對(duì)應(yīng)起來(lái)的。
2018-03-15
看到后面的又反過(guò)來(lái)看前面,才開(kāi)始明白,map實(shí)際代碼只用處理一行,而且可以重復(fù)寫相同的key,比如<1,Deer Bear Deer><2,Deer Bear Car>,map實(shí)際代碼寫的時(shí)候只需要處理<1,Deer Bear Deer>,并且可以寫兩次context.write("Deer", 1);也就是這個(gè)map在寫的時(shí)候,實(shí)際上代碼是context.write("Deer", 1);context.write("Bear", 1);context.write("Deer", 1);
2018-03-15
其實(shí)我覺(jué)得完全可以用二位 數(shù)組來(lái)實(shí)現(xiàn),沒(méi)必要搞這么麻煩,但是作為一個(gè)教程倒是不錯(cuò),學(xué)到了很多
2018-03-15