環境細節

在詢問 Apache Spark 相關問題時,請提供以下資訊

  • 客戶端使用的 Apache Spark 版本和 Spark 部署(如果適用)。對於 API 相關問題,主要(1.6,2.0,2.1 等)通常就足夠了,因為有關可能的錯誤的問題總是使用完整版本資訊。
  • Scala 版本用於構建 Spark 二進位制檔案。
  • JDK 版本(java -version)。
  • 如果你使用客戶語言(Python, R),請提供有關語言版本的資訊。在 Python 中使用標籤: python-2.xpython-3.x 或更具體的標籤來區分語言變體。
  • 如果適用,構建定義(build.sbtpom.xml)或適用時的外部依賴性版本(Python, R)。
  • 叢集管理器(local[n],Spark standalone,Yarn,Mesos),模式(clientcluster)和其他提交選項(如果適用)。