如何解決spark內(nèi)存溢出問(wèn)題
1 回答
當(dāng)年話下
TA貢獻(xiàn)1890條經(jīng)驗(yàn) 獲得超9個(gè)贊
1 加內(nèi)存， 簡(jiǎn)單粗暴
2 將rdd的數(shù)據(jù)寫(xiě)入磁盤(pán)不要保存在內(nèi)存之中
3 如果是collect操作導(dǎo)致的內(nèi)存溢出， 可以增大 Driver的 memory 參數(shù)
- 1 回答
- 0 關(guān)注
- 1336 瀏覽
添加回答
舉報(bào)
0/150
提交
取消