Dataproc 图像上的 Spark 2.1

Question

我正在尝试使用 Spark 2.1 启动 Dataproc 集群。是否有包含 Spark 2.1 的图像版本？我看到 Spark 2.0 和 2.2，但没有看到 2.1。

https://cloud.google.com/dataproc/docs/concepts/versioning/dataproc-versions

Answer 1

不，没有 Spark 2.1 的 dataproc 映像。 Dataproc 映像 1.1 具有 Spark 2.0.2，映像 1.2 具有 Spark 2.2.3。请注意，两者均已弃用。