-
[-p]、[-r]遞歸創(chuàng)建
查看全部 -
本地的schema是file,端口號(hào)默認(rèn)是9000
查看全部 -
HDFS不適合存儲(chǔ)小文件
查看全部 -
要保證服務(wù)端配置文件和客戶端配置文件一樣即可
查看全部 -
不要重復(fù)格式化,如果因?yàn)楦袷交鰡?wèn)題,刪掉hadoop_repo再格式化一次
查看全部 -
數(shù)據(jù)清洗,數(shù)據(jù)計(jì)算,展示
查看全部 -
工作中CDH和HDP多
查看全部 -
大數(shù)據(jù)生態(tài)圈
查看全部 -
1.0:mapreduce還有資源管理的功能,沒(méi)有解耦合
2.0:增加yarn,專門實(shí)現(xiàn)資源管理
3.0:優(yōu)化,hdfs中namenode主節(jié)點(diǎn)可以有兩個(gè)
查看全部 -
yarn架構(gòu)分析
從節(jié)點(diǎn)(NodeManager)資源管理包含CPU和內(nèi)存資源
查看全部 -
mapreduce架構(gòu)分析
查看全部 -
hdfs架構(gòu)分析
主節(jié)點(diǎn)最多可以有兩個(gè)
查看全部 -
三大核心組件
查看全部 -
分布式計(jì)算
查看全部 -
磁盤io從數(shù)據(jù)庫(kù)獲得數(shù)據(jù),再通過(guò)網(wǎng)絡(luò)io將數(shù)據(jù)傳到計(jì)算程序,網(wǎng)絡(luò)io消耗時(shí)間,數(shù)據(jù)移動(dòng)到計(jì)算程序,數(shù)據(jù)量大時(shí)慢。而將計(jì)算程序移動(dòng)到數(shù)據(jù)節(jié)點(diǎn)時(shí)速度快,此時(shí)就是一個(gè)本地計(jì)算
查看全部
舉報(bào)