-
分布式存儲(chǔ)介紹
查看全部 -
分布式存儲(chǔ)介紹? ?1.0?
客戶端一多文件系統(tǒng)壓力大
查看全部 -
HDFS,Yarn主節(jié)點(diǎn)最多有兩個(gè)主節(jié)點(diǎn),多個(gè)從節(jié)點(diǎn)
查看全部 -
Yarn的三種調(diào)度器:
1.fifo scheduler 2.CapacityScheduler? 3.FairScheduler
查看全部 -
注意日期參數(shù)
查看全部 -
定義各種變量 inputpath=
刪除輸出目錄
執(zhí)行清洗任務(wù)
判斷是否執(zhí)行成功 hdfs dfs -ls ${output_path}/_SUCCESS
if ["$?" = "0"] //linux中判讀上個(gè)命令是否執(zhí)行成功
then
echo ”執(zhí)行成功“
執(zhí)行下一個(gè)任務(wù)
查看全部 -
shell腳本設(shè)置
查看全部 -
print("hello")
查看全部 -
HDFS 常用shell命令
查看全部 -
拷貝SSH 達(dá)到SSH免密登錄效果
ssh-copy-id -i hadoop102
查看全部 -
SSH免密登錄
查看全部 -
大數(shù)據(jù)生態(tài)圈
查看全部 -
1.0 NameNode 節(jié)點(diǎn)只有一個(gè)
2.0 NameNode 節(jié)點(diǎn)可以有2個(gè)
3.0 NameNode 節(jié)點(diǎn)可以有3個(gè)
查看全部 -
大數(shù)據(jù)系統(tǒng)生態(tài)圈
查看全部 -
yarn也符合主從節(jié)點(diǎn),主節(jié)點(diǎn)最多兩個(gè)
查看全部
舉報(bào)