美文网首页
SparkSQL执行错误run at ThreadPoolExe

SparkSQL执行错误run at ThreadPoolExe

作者: sparkle123 | 来源:发表于2018-03-04 19:31 被阅读0次

为了窥视SparkSQL执行SQL时的内在机制,新建一个测试表test
create table test(key string,value string)
基于这个测试表,执行下面的sql语句,关键字explain extended可以在console里打印详细日志。
explain extended select a.key*(2+3),b.value from test a join test b on a.key = b.key and a.key >3;

  • console详细日志:


    console详细日志.png

    即:


    Spark SQL架构.png
  • Spark UI http://hadoop000:4040/jobs/页面中看到错误:
    run at ThreadPoolExecutor.java:1149

image.png

https://stackoverflow.com/questions/40852622/what-are-threadpoolexecutors-jobs-in-web-ui

相关文章

网友评论

      本文标题:SparkSQL执行错误run at ThreadPoolExe

      本文链接:https://www.haomeiwen.com/subject/qwsqfftx.html