环境细节

在询问 Apache Spark 相关问题时,请提供以下信息

  • 客户端使用的 Apache Spark 版本和 Spark 部署(如果适用)。对于 API 相关问题,主要(1.6,2.0,2.1 等)通常就足够了,因为有关可能的错误的问题总是使用完整版本信息。
  • Scala 版本用于构建 Spark 二进制文件。
  • JDK 版本(java -version)。
  • 如果你使用客户语言(Python, R),请提供有关语言版本的信息。在 Python 中使用标签: python-2.xpython-3.x 或更具体的标签来区分语言变体。
  • 如果适用,构建定义(build.sbtpom.xml)或适用时的外部依赖性版本(Python, R)。
  • 集群管理器(local[n],Spark standalone,Yarn,Mesos),模式(clientcluster)和其他提交选项(如果适用)。