有没有办法将 sparkR 与 MLlib 库连接起来？
Is there a way to connect sparkR with MLlib library?
我正在使用 spark 1.4 版。 R 用户有额外的 API - sparkR.
我成功启动了 sparkR 并使用以下命令将 R 的 data.frame 转换为 spark 的 DataFrame
irisDF <- createDataFrame(sqlContext, iris)
我想知道现在是否有办法以某种方式与 spark MLlib 库连接以进行逻辑回归 - https://spark.apache.org/docs/latest/mllib-linear-methods.html 或者是否可以将 DataFrame 重新转换为常规 data.frame？
目前还没有连接Spark MLlib的方法，应该会在下个版本发布。但是，您可以通过
将 DataFrame 重新转换为 data.frame
collect(irisDF)
我正在使用 spark 1.4 版。 R 用户有额外的 API - sparkR.
我成功启动了 sparkR 并使用以下命令将 R 的 data.frame 转换为 spark 的 DataFrame
irisDF <- createDataFrame(sqlContext, iris)
我想知道现在是否有办法以某种方式与 spark MLlib 库连接以进行逻辑回归 - https://spark.apache.org/docs/latest/mllib-linear-methods.html 或者是否可以将 DataFrame 重新转换为常规 data.frame？
目前还没有连接Spark MLlib的方法，应该会在下个版本发布。但是，您可以通过
将 DataFrame 重新转换为 data.framecollect(irisDF)