找不到模块 'graphframes'
can't find module 'graphframes'
当我在命令行输入时:
pyspark --packages graphframes:graphframes:0.2.0-spark2.0-s_2.11
它会很好用。
但是当我想使用 ipython 启动我的 pyspark 并使用 graphframes 包时,它不起作用。
当我在命令行输入时:
PYSPARK_DRIVER_PYTHON=ipython pyspark --packages graphframes:graphframes:0.2.0-spark2.0-s_2.11
错误是:
找不到模块 'graphframes'
Python 3 graphframes
0.2.0 中的 Spark 包 is a known bug 的兼容性已在 0.3.0 中得到解决。
--packages graphframes:graphframes:0.3.0-spark2.0-s_2.11
当我在命令行输入时:
pyspark --packages graphframes:graphframes:0.2.0-spark2.0-s_2.11
它会很好用。 但是当我想使用 ipython 启动我的 pyspark 并使用 graphframes 包时,它不起作用。
当我在命令行输入时:
PYSPARK_DRIVER_PYTHON=ipython pyspark --packages graphframes:graphframes:0.2.0-spark2.0-s_2.11
错误是: 找不到模块 'graphframes'
Python 3 graphframes
0.2.0 中的 Spark 包 is a known bug 的兼容性已在 0.3.0 中得到解决。
--packages graphframes:graphframes:0.3.0-spark2.0-s_2.11