为了账号安全,请及时绑定邮箱和手机立即绑定

Spark 错误记录

标签:
Spark
  1. scheduler.LiveListenerBus: Listener SQLListener threw an exception
    java.lang.NullPointerException

webp

image.png

在这个报错中没有显示自己编写代码的问题,一开始度娘了很久都没结果,一样的代码在其他地方能执行,在这里就执行不了。
由于我的每个任务都有不同的执行参数,所以每个参数都写在一个文件里面直接拷贝。这次出问题就出在

webp

image.png


--num-executors 16
--executor-cores 8
--executor-memory 16G \


webp

image.png


--executor-memory 16G \ 这个参数漏了
贼低级错  但是很难排查出来



作者:利伊奥克儿
链接:https://www.jianshu.com/p/9f6de79c97c9


点击查看更多内容
TA 点赞

若觉得本文不错,就分享一下吧!

评论

作者其他优质文章

正在加载中
  • 推荐
  • 评论
  • 收藏
  • 共同学习,写下你的评论
感谢您的支持,我会继续努力的~
扫码打赏,你说多少就多少
赞赏金额会直接到老师账户
支付方式
打开微信扫一扫,即可进行扫码打赏哦
今天注册有机会得

100积分直接送

付费专栏免费学

大额优惠券免费领

立即参与 放弃机会
微信客服

购课补贴
联系客服咨询优惠详情

帮助反馈 APP下载

慕课网APP
您的移动学习伙伴

公众号

扫描二维码
关注慕课网微信公众号

举报

0/150
提交
取消