失败的 Azkaban Spark 作业具有成功的最终状态而不是失败

Question

用例：

1. Azkaban 启动 Spark 作业
2. Sparks 作业以某种方式失败

预期结果：

Hadoop ResourceManager 表示作业最终状态为 FAILED

实际结果：

Hadoop RM 表示作业最终状态为成功

有人知道怎么解决吗？

Answer 1

Spark 在默认（客户端）模式下 运行。

作为解决方案模式更改为集群。