带有 SPARK 1.6 的 Cloudera Quickstart VM
Cloudera Quickstart VM with SPARK 1.6
不是编程问题,但有人能告诉我为什么 Cloudera 仍然只在他们的 Quickstart VM 上提供 SPARK 1.6 吗?当人们出于教育目的下载它时,它的价值是什么?他们仍然使用 Java 1.7。
几乎没有理由将 1.6 保留为 Cloudera Quickstart VM 发行版。
尝试安装 SPARK 2.2 遇到各种问题。
我现在使用的是 mapR v6 沙箱,它有这个标准但没有 IMPALA。我使用 cloudera quickstart vm 的日子已经过去了。
当我在 VM 中看到旧版本的 spark 时,我什至感到惊讶。当我个人使用包裹安装 Cloudera 5.11 时,默认的 spark 版本是 1.6。虽然它存在,但它可以被抑制,Spark2.2 parcel 可用于在相同的 cloudera 版本上启用 Spark 2.2。自从我安装它以来,我一直在无缝地使用这个组合。我使用 Spark 从 Hive 获取数据并将结果保存回 Hive post 在内存中处理(使用 spark)。
不是编程问题,但有人能告诉我为什么 Cloudera 仍然只在他们的 Quickstart VM 上提供 SPARK 1.6 吗?当人们出于教育目的下载它时,它的价值是什么?他们仍然使用 Java 1.7。
几乎没有理由将 1.6 保留为 Cloudera Quickstart VM 发行版。
尝试安装 SPARK 2.2 遇到各种问题。
我现在使用的是 mapR v6 沙箱,它有这个标准但没有 IMPALA。我使用 cloudera quickstart vm 的日子已经过去了。
当我在 VM 中看到旧版本的 spark 时,我什至感到惊讶。当我个人使用包裹安装 Cloudera 5.11 时,默认的 spark 版本是 1.6。虽然它存在,但它可以被抑制,Spark2.2 parcel 可用于在相同的 cloudera 版本上启用 Spark 2.2。自从我安装它以来,我一直在无缝地使用这个组合。我使用 Spark 从 Hive 获取数据并将结果保存回 Hive post 在内存中处理(使用 spark)。