優(yōu)勢:高擴(kuò)展;低成本;成熟的生態(tài)圈
人才需求:開發(fā),運(yùn)維
人才需求:開發(fā),運(yùn)維
2018-04-22
Hadoop的兩個(gè)核心組成:
1、HDFS:分布式文件系統(tǒng),存儲海量的數(shù)據(jù)。
2、MapReduce:并行處理框架,實(shí)現(xiàn)任務(wù)分解和調(diào)度。
1、HDFS:分布式文件系統(tǒng),存儲海量的數(shù)據(jù)。
2、MapReduce:并行處理框架,實(shí)現(xiàn)任務(wù)分解和調(diào)度。
2018-04-22
客戶端發(fā)送文件讀請求——>namenode返回元數(shù)據(jù)(從哪些datanode找到)——>客戶端讀取block,下載下來之后組裝;
客戶端文件拆分成block——>通知namenode返回可用的 有足夠磁盤空間的datanode——>客戶端對block進(jìn)行寫入——>流水線復(fù)制——>更新元數(shù)據(jù)
客戶端文件拆分成block——>通知namenode返回可用的 有足夠磁盤空間的datanode——>客戶端對block進(jìn)行寫入——>流水線復(fù)制——>更新元數(shù)據(jù)
2018-04-17
穩(wěn)定版
https://archive.apache.org/dist/hadoop/common/stable2/hadoop-2.9.0.tar.gz
https://archive.apache.org/dist/hadoop/common/stable2/hadoop-2.9.0.tar.gz
2018-03-10
大致了解了HDFS和MapReduce的工作原理,是不錯的入門課程,當(dāng)然,后面還有很多東西需要我們自己繼續(xù)學(xué)習(xí)
2018-03-10
centos6.3下的文件從windows傳到虛擬機(jī)的親測有效的方法(使用VMware tools),鏈接:
http://blog.csdn.net/tongyuehong137/article/details/45075943
centos安裝jdk方法:
http://blog.csdn.net/xinxin19881112/article/details/46816385
jdk1.8 rpm版下載
http://blog.csdn.net/doupeihua/article/details/51831947
以上方法親測有效,本人centos6.3
http://blog.csdn.net/tongyuehong137/article/details/45075943
centos安裝jdk方法:
http://blog.csdn.net/xinxin19881112/article/details/46816385
jdk1.8 rpm版下載
http://blog.csdn.net/doupeihua/article/details/51831947
以上方法親測有效,本人centos6.3
2018-03-08