spark 跑spark sql時(shí)cpu利用率特別高怎么辦
1 回答
慕絲7291255
TA貢獻(xiàn)1859條經(jīng)驗(yàn) 獲得超6個(gè)贊
優(yōu)化過程中常用到方法
查看查詢的整個(gè)運(yùn)行計(jì)劃
scala>query.queryExecution
查看查詢的Unresolved LogicalPlan
scala>query.queryExecution.logical
查看查詢的Analyzed LogicalPlan
scala>query.queryExecution.analyzed
查看優(yōu)化后的LogicalPlan
scala>query.queryExecution.optimizedPlan
查看物理計(jì)劃
scala>query.queryExecution.sparkPlan
查看RDD的轉(zhuǎn)換過程
scala>query.toDebugString
- 1 回答
- 0 關(guān)注
- 938 瀏覽
添加回答
舉報(bào)
0/150
提交
取消