spark 跑spark sql时cpu利用率特别高怎么办
1 回答
慕丝7291255
TA贡献1859条经验 获得超6个赞
优化过程中常用到方法
查看查询的整个运行计划
scala>query.queryExecution
查看查询的Unresolved LogicalPlan
scala>query.queryExecution.logical
查看查询的Analyzed LogicalPlan
scala>query.queryExecution.analyzed
查看优化后的LogicalPlan
scala>query.queryExecution.optimizedPlan
查看物理计划
scala>query.queryExecution.sparkPlan
查看RDD的转换过程
scala>query.toDebugString
- 1 回答
- 0 关注
- 856 浏览
添加回答
举报
0/150
提交
取消