spark报错:java.lang.StackOverflowError (已解决)

现象

在Spark SQL中运行的SQL语句过于复杂的话,会出现 java.lang.StackOverflowError 异常

产生原因

这是因为程序运行的时候 Stack 大小大于 JVM 的设置大小

解决方案

通过在启动 Spark-sql 的时候加上 –driver-java-options “-Xss10m” 选项解决这个问题

赞(0) 打赏
特别声明:除特殊标注,本站文章均为原创,遵循CC BY-NC 3.0,转载请注明出处。三伏磨 » spark报错:java.lang.StackOverflowError (已解决)

评论 抢沙发

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

微信扫一扫打赏