優(yōu)勢(shì):高擴(kuò)展;低成本;成熟的生態(tài)圈
人才需求:開(kāi)發(fā),運(yùn)維
人才需求:開(kāi)發(fā),運(yùn)維
2018-04-22
Hadoop的兩個(gè)核心組成:
1、HDFS:分布式文件系統(tǒng),存儲(chǔ)海量的數(shù)據(jù)。
2、MapReduce:并行處理框架,實(shí)現(xiàn)任務(wù)分解和調(diào)度。
1、HDFS:分布式文件系統(tǒng),存儲(chǔ)海量的數(shù)據(jù)。
2、MapReduce:并行處理框架,實(shí)現(xiàn)任務(wù)分解和調(diào)度。
2018-04-22
客戶端發(fā)送文件讀請(qǐng)求——>namenode返回元數(shù)據(jù)(從哪些datanode找到)——>客戶端讀取block,下載下來(lái)之后組裝;
客戶端文件拆分成block——>通知namenode返回可用的 有足夠磁盤空間的datanode——>客戶端對(duì)block進(jìn)行寫(xiě)入——>流水線復(fù)制——>更新元數(shù)據(jù)
客戶端文件拆分成block——>通知namenode返回可用的 有足夠磁盤空間的datanode——>客戶端對(duì)block進(jìn)行寫(xiě)入——>流水線復(fù)制——>更新元數(shù)據(jù)
2018-04-17
我一個(gè)沒(méi)學(xué)過(guò)Java的跑來(lái)聽(tīng)干嘛
2018-03-21
準(zhǔn)備學(xué)習(xí)hive前來(lái)打個(gè)卡
穩(wěn)定版
https://archive.apache.org/dist/hadoop/common/stable2/hadoop-2.9.0.tar.gz
https://archive.apache.org/dist/hadoop/common/stable2/hadoop-2.9.0.tar.gz
2018-03-10
大致了解了HDFS和MapReduce的工作原理,是不錯(cuò)的入門課程,當(dāng)然,后面還有很多東西需要我們自己繼續(xù)學(xué)習(xí)
2018-03-10
centos6.3下的文件從windows傳到虛擬機(jī)的親測(cè)有效的方法(使用VMware tools),鏈接:
http://blog.csdn.net/tongyuehong137/article/details/45075943
centos安裝jdk方法:
http://blog.csdn.net/xinxin19881112/article/details/46816385
jdk1.8 rpm版下載
http://blog.csdn.net/doupeihua/article/details/51831947
以上方法親測(cè)有效,本人centos6.3
http://blog.csdn.net/tongyuehong137/article/details/45075943
centos安裝jdk方法:
http://blog.csdn.net/xinxin19881112/article/details/46816385
jdk1.8 rpm版下載
http://blog.csdn.net/doupeihua/article/details/51831947
以上方法親測(cè)有效,本人centos6.3
2018-03-08