Azure Spark 如何配置应用程序重试限制
Azure Spark how to configure application retry limit
我目前 运行 Azure HD insight Spark 集群，默认情况下，如果应用程序失败，它会重试 5 次。我想把它改成2，你知道怎么做吗？
您可以将其作为配置点传递给 spark-submit。
spark-submit ... --conf spark.yarn.maxAppAttempts=2
您还可以在 Ambari 中的集群级别设置覆盖。您可以通过 spark->configs 访问 Custom spark-defaults 并通过 ambari UI.
设置覆盖
我目前 运行 Azure HD insight Spark 集群，默认情况下，如果应用程序失败，它会重试 5 次。我想把它改成2，你知道怎么做吗？
您可以将其作为配置点传递给 spark-submit。
spark-submit ... --conf spark.yarn.maxAppAttempts=2
您还可以在 Ambari 中的集群级别设置覆盖。您可以通过 spark->configs 访问 Custom spark-defaults 并通过 ambari UI.