課程
/云計(jì)算&大數(shù)據(jù)
/Hadoop
/Hadoop進(jìn)階
老師,這個(gè)420M的文件是不是不一定是個(gè)完整的文件,而是一個(gè)文件在該DataNode中的部分,也可能在其他DataNode上也有該文件的數(shù)據(jù)?
2019-07-02
源自:Hadoop進(jìn)階 2-2
正在回答
Map階段的輸入如果是從HDFS讀取的話,那么這個(gè)文件就會(huì)從多個(gè)DataNode讀取,但最后讀取的是一個(gè)完整的文件
舉報(bào)
MapReduce原理,并實(shí)現(xiàn)簡(jiǎn)單的推薦
2 回答hadoop框架默認(rèn)是每次讀取文件的一行嘛?這個(gè)切割是否可配?
2 回答hadoop在上傳文件時(shí),為什么會(huì)有一個(gè)_COPYING_的中間對(duì)象
1 回答代碼源文件
4 回答請(qǐng)問Idea上有像eclipse上一樣的Hadoop hdfs的插件嗎?
4 回答FileReader無法找到緩存文件
Copyright ? 2025 imooc.com All Rights Reserved | 京ICP備12003892號(hào)-11 京公網(wǎng)安備11010802030151號(hào)
購課補(bǔ)貼聯(lián)系客服咨詢優(yōu)惠詳情
慕課網(wǎng)APP您的移動(dòng)學(xué)習(xí)伙伴
掃描二維碼關(guān)注慕課網(wǎng)微信公眾號(hào)
2019-07-23
Map階段的輸入如果是從HDFS讀取的話,那么這個(gè)文件就會(huì)從多個(gè)DataNode讀取,但最后讀取的是一個(gè)完整的文件