手记

Spark 错误记录

  1. scheduler.LiveListenerBus: Listener SQLListener threw an exception
    java.lang.NullPointerException

image.png

在这个报错中没有显示自己编写代码的问题,一开始度娘了很久都没结果,一样的代码在其他地方能执行,在这里就执行不了。
由于我的每个任务都有不同的执行参数,所以每个参数都写在一个文件里面直接拷贝。这次出问题就出在

image.png


--num-executors 16
--executor-cores 8
--executor-memory 16G \


image.png


--executor-memory 16G \ 这个参数漏了
贼低级错  但是很难排查出来



作者:利伊奥克儿
链接:https://www.jianshu.com/p/9f6de79c97c9


0人推荐
随时随地看视频
慕课网APP