找不到模块 'graphframes'

can't find module 'graphframes'

当我在命令行输入时:

pyspark --packages graphframes:graphframes:0.2.0-spark2.0-s_2.11

它会很好用。 但是当我想使用 ipython 启动我的 pyspark 并使用 graphframes 包时,它不起作用。

当我在命令行输入时:

PYSPARK_DRIVER_PYTHON=ipython pyspark --packages graphframes:graphframes:0.2.0-spark2.0-s_2.11

错误是: 找不到模块 'graphframes'

Python 3 graphframes 0.2.0 中的 Spark 包 is a known bug 的兼容性已在 0.3.0 中得到解决。

--packages graphframes:graphframes:0.3.0-spark2.0-s_2.11