spark和hadoop的區(qū)別
spark和hadoop的區(qū)別
慕田峪9158850
2018-11-13 09:08:51
TA貢獻1808條經(jīng)驗 獲得超4個贊
Hadoop和Spark的聯(lián)系和區(qū)別
計算數(shù)據(jù)存儲位置
Hadoop:硬盤
Spark:內(nèi)存
計算模型
Hadoop:單一
Spark:豐富
處理方式
Hadoop:非迭代
Spark:迭代
場景要求
Hadoop:離線批處理。(面對SQL交互式查詢、實時處理及機器學習等需要和第三方框架結合。多種數(shù)據(jù)格式轉換,導致消耗大量資源)
Spark:批處理、實時處理
舉報