AWS Glue java.lang.OutOfMemoryError: Java heap space
AWS Glue java.lang.OutOfMemoryError: Java heap space
我们正在尝试将 AWS Glue 用于我们的 ETL 过程。 运行 AWS Glue 作业进程由于内存不足错误而被终止。
LogType:stdout
Log Upload Time:Mon Jan 08 20:35:34 +0000 2018
LogLength:129
Log Contents:
#
# java.lang.OutOfMemoryError: Java heap space
# -XX:OnOutOfMemoryError="kill -9 %p"
# Executing /bin/sh -c "kill -9 6635"...
End of LogType:stdout
而且我不确定是否可以在 AWS Glue 中设置 Java 堆大小。
谢谢，
哈里什
这是由于循环引用 JSON 源文件造成的。
我们正在尝试将 AWS Glue 用于我们的 ETL 过程。 运行 AWS Glue 作业进程由于内存不足错误而被终止。
LogType:stdout
Log Upload Time:Mon Jan 08 20:35:34 +0000 2018
LogLength:129
Log Contents:
#
# java.lang.OutOfMemoryError: Java heap space
# -XX:OnOutOfMemoryError="kill -9 %p"
# Executing /bin/sh -c "kill -9 6635"...
End of LogType:stdout
而且我不确定是否可以在 AWS Glue 中设置 Java 堆大小。
谢谢， 哈里什
这是由于循环引用 JSON 源文件造成的。