第七色在线视频,2021少妇久久久久久久久久,亚洲欧洲精品成人久久av18,亚洲国产精品特色大片观看完整版,孙宇晨将参加特朗普的晚宴

為了賬號(hào)安全,請(qǐng)及時(shí)綁定郵箱和手機(jī)立即綁定

偽分布式(hdfs)運(yùn)行Hadoop案例(二)

一 介绍

HDFS中如下组件:

1) NameNode : 存储文件的元数据,如文件名,文件目录结构,文件属性等。

2) DataNode: 在文件系统中存储文件块的数据等。

3)Secondary NameNode: 用来监控HDFS状态的辅助后台程序,每隔一段时间获取HDFS元数据的快照。


二 使用HDFS并运行MapReduce程序

1 首先将 etc/hadoop/hadoop-env.sh  中的

export JAVA_HOME=/opt/module/jdk1.8.0_144

JAVA_HOME改成本地jdk的路径

 


2 配置 core-site.xml

https://img1.sycdn.imooc.com//5bd47c690001109512020323.jpg

3 配置hdfs-site.xml

https://img1.sycdn.imooc.com//5bd47cc10001cc7112350321.jpg

4 启动集群

(a) 格式化 namenode(第一次启动时格式化,以后就不要总格式化)
 https://img1.sycdn.imooc.com//5bd47e0a0001475510510046.jpg

(b) 启动 namenode,jps查看是否启动成功

https://img1.sycdn.imooc.com//5bd4856e00013f1515070134.jpg 
(c) 启动 datanode
 https://img1.sycdn.imooc.com//5bd485980001a06a15020189.jpg

5 web查看

https://img1.sycdn.imooc.com//5bd485d80001352519180795.jpg

出现如图则表示已经成功搭建好文件系统


6 操作集群进行工作

https://img1.sycdn.imooc.com//5bd486640001afa611050070.jpg

在文件系统上创建目录,在web端查看

https://img1.sycdn.imooc.com//5bd486880001203f19200570.jpg

将文件上传到文件系统进行测试

https://img1.sycdn.imooc.com//5bd487140001e01913500073.jpg

https://img1.sycdn.imooc.com//5bd4872d0001d0fc18620222.jpg

运行mapreduce程序

https://img1.sycdn.imooc.com//5bd487d40001e85219190241.jpg

https://img1.sycdn.imooc.com//5bd487fc0001b38d18950453.jpg

可直接点击下载文件,查看结果,也可通过命令获取到本机

https://img1.sycdn.imooc.com//5bd4887900017ec213700353.jpg

https://img1.sycdn.imooc.com//5bd488d30001f83614400085.jpg

https://img1.sycdn.imooc.com//5bd488e000012c8912690366.jpg

删除结果

https://img1.sycdn.imooc.com//5bd489230001f5d316960156.jpg


點(diǎn)擊查看更多內(nèi)容
TA 點(diǎn)贊

若覺得本文不錯(cuò),就分享一下吧!

評(píng)論

作者其他優(yōu)質(zhì)文章

正在加載中
  • 推薦
  • 評(píng)論
  • 收藏
  • 共同學(xué)習(xí),寫下你的評(píng)論
感謝您的支持,我會(huì)繼續(xù)努力的~
掃碼打賞,你說(shuō)多少就多少
贊賞金額會(huì)直接到老師賬戶
支付方式
打開微信掃一掃,即可進(jìn)行掃碼打賞哦
今天注冊(cè)有機(jī)會(huì)得

100積分直接送

付費(fèi)專欄免費(fèi)學(xué)

大額優(yōu)惠券免費(fèi)領(lǐng)

立即參與 放棄機(jī)會(huì)
微信客服

購(gòu)課補(bǔ)貼
聯(lián)系客服咨詢優(yōu)惠詳情

幫助反饋 APP下載

慕課網(wǎng)APP
您的移動(dòng)學(xué)習(xí)伙伴

公眾號(hào)

掃描二維碼
關(guān)注慕課網(wǎng)微信公眾號(hào)

舉報(bào)

0/150
提交
取消