是否可以在 pyspark 中使用 apache-ignite rdd 实现?

Is it possible to use an apache-ignite rdd implementation in pyspark?

我正在使用 apache spark 通过 pyspark 运行 一些 python 数据代码。我 运行 在 Spark 独立模式下使用 7 个节点。

是否可以在此设置中使用 apache-ignite RDD 实现?它有什么优势吗?

非常感谢

是的,您可以在任何 Spark 部署中使用 Ignite。请参阅文档以更好地了解可能的优势:https://apacheignite-fs.readme.io/docs/ignite-for-spark