Spring 引导 YARN 覆盖配置,连接到 Azure
Spring Boot YARN override configuration, connect to Azure
我正在使用这个简单的 example 到 运行 Spring 针对 Azure 上的 Hadoop 的 Yarn 应用程序。
问题是如何设置fs.azure.account.key.aaa.blob.core.windows.net
属性?没有它 Spring YARN 无法将我的 jar 文件部署到集群。
YarnConfiguration 没有获取我的 yarn-site.xml
和 core-site.xml
文件。
求解
在 application.yml
fsUri
中应该没有任何端口和其他东西:
fsUri: wasb://zzz@zzz.blob.core.windows.net
Yarn 配置选择 resources
中的每个配置文件。
我正在使用这个简单的 example 到 运行 Spring 针对 Azure 上的 Hadoop 的 Yarn 应用程序。
问题是如何设置fs.azure.account.key.aaa.blob.core.windows.net
属性?没有它 Spring YARN 无法将我的 jar 文件部署到集群。
YarnConfiguration 没有获取我的 yarn-site.xml
和 core-site.xml
文件。
求解
在 application.yml
fsUri
中应该没有任何端口和其他东西:
fsUri: wasb://zzz@zzz.blob.core.windows.net
Yarn 配置选择 resources
中的每个配置文件。