spark和hadoop的區(qū)別
spark和hadoop的區(qū)別
慕標(biāo)琳琳
2018-12-03 16:04:57
TA貢獻(xiàn)1877條經(jīng)驗(yàn) 獲得超1個(gè)贊
Hadoop和Spark的聯(lián)系和區(qū)別
計(jì)算數(shù)據(jù)存儲(chǔ)位置
Hadoop:硬盤
Spark:內(nèi)存
計(jì)算模型
Hadoop:?jiǎn)我?br/>Spark:豐富
處理方式
Hadoop:非迭代
Spark:迭代
場(chǎng)景要求
Hadoop:離線批處理。(面對(duì)SQL交互式查詢、實(shí)時(shí)處理及機(jī)器學(xué)習(xí)等需要和第三方框架結(jié)合。多種數(shù)據(jù)格式轉(zhuǎn)換,導(dǎo)致消耗大量資源)
Spark:批處理、實(shí)時(shí)處理
舉報(bào)