为 pyspark 启动的 jvm 指定选项
Specify options for the jvm launched by pyspark
pyspark 脚本在启动它连接到指定的 jvm 时使用的 jvm 选项如何/在哪里?
我对指定 jvm 调试选项特别感兴趣,例如
-agentlib:jdwp=transport=dt_socket,server=y,suspend=n,address=5005
谢谢。
pyspark
使用 bin/spark-class
脚本启动您在终端/控制台中看到 运行 的客户端。您可以将任何必要的选项附加到 JAVA_OPTS
:
JAVA_OPTS="$JAVA_OPTS -Xmx=2g -Xms=1g -agentlib:jdwp=transport=dt_socket,server=y..."
pyspark 脚本在启动它连接到指定的 jvm 时使用的 jvm 选项如何/在哪里?
我对指定 jvm 调试选项特别感兴趣,例如
-agentlib:jdwp=transport=dt_socket,server=y,suspend=n,address=5005
谢谢。
pyspark
使用 bin/spark-class
脚本启动您在终端/控制台中看到 运行 的客户端。您可以将任何必要的选项附加到 JAVA_OPTS
:
JAVA_OPTS="$JAVA_OPTS -Xmx=2g -Xms=1g -agentlib:jdwp=transport=dt_socket,server=y..."