-
分布式存儲介紹
查看全部 -
分布式存儲介紹? ?1.0?
客戶端一多文件系統(tǒng)壓力大
查看全部 -
HDFS,Yarn主節(jié)點最多有兩個主節(jié)點,多個從節(jié)點
查看全部 -
Yarn的三種調(diào)度器:
1.fifo scheduler 2.CapacityScheduler? 3.FairScheduler
查看全部 -
注意日期參數(shù)
查看全部 -
定義各種變量 inputpath=
刪除輸出目錄
執(zhí)行清洗任務(wù)
判斷是否執(zhí)行成功 hdfs dfs -ls ${output_path}/_SUCCESS
if ["$?" = "0"] //linux中判讀上個命令是否執(zhí)行成功
then
echo ”執(zhí)行成功“
執(zhí)行下一個任務(wù)
查看全部 -
shell腳本設(shè)置
查看全部 -
print("hello")
查看全部 -
HDFS 常用shell命令
查看全部 -
拷貝SSH 達(dá)到SSH免密登錄效果
ssh-copy-id -i hadoop102
查看全部 -
SSH免密登錄
查看全部 -
大數(shù)據(jù)生態(tài)圈
查看全部 -
1.0 NameNode 節(jié)點只有一個
2.0 NameNode 節(jié)點可以有2個
3.0 NameNode 節(jié)點可以有3個
查看全部 -
大數(shù)據(jù)系統(tǒng)生態(tài)圈
查看全部 -
yarn也符合主從節(jié)點,主節(jié)點最多兩個
查看全部
舉報