在每个应用程序上重新读取哪些 YARN 配置参数?
Which YARN configuration parameters are re-read on each application?
在我的日常工作流程中,我有一份工作比其他 50 份左右 运行 大得多。我希望 属性 yarn.app.mapreduce.am.resource.mb
更大一些,以适应这项重要的工作。我运气好吗?我如何知道哪些属性需要完全重启我的集群中的哪些 YARN 片段才能更改?
无需重启 YARN 服务即可在作业级别更改此设置。一般很难说什么时候可以更改每个 MR 属性。通常可以在作业级别更新 mapper/reducer/appmaster 内存设置等作业级别属性。
您可以查看 this helpful post 以深入了解此主题。
在我的日常工作流程中,我有一份工作比其他 50 份左右 运行 大得多。我希望 属性 yarn.app.mapreduce.am.resource.mb
更大一些,以适应这项重要的工作。我运气好吗?我如何知道哪些属性需要完全重启我的集群中的哪些 YARN 片段才能更改?
无需重启 YARN 服务即可在作业级别更改此设置。一般很难说什么时候可以更改每个 MR 属性。通常可以在作业级别更新 mapper/reducer/appmaster 内存设置等作业级别属性。
您可以查看 this helpful post 以深入了解此主题。