HADOOP / YARN - ResourceManager 和 hdfs NameNode 是否总是安装在同一台主机上?

HADOOP / YARN - Are the ResourceManager and the hdfs NameNode always installed on the same host?

“资源管理器”和“hdfs namenode”是否总是安装在同一台主机上?

1) 当我想向 get new application id 发送一个 http 请求 (YARN REST API) 时,我正在使用这个 web uri:

http://<rm http address:port>/ws/v1/cluster/apps/new-application

此端口为Resource-Manager Web UIhttp端口,默认值为8088,如img1所示:source for img1

2) 当我想为 hdfs 命令发送一个 http 请求 (WebHDFS REST API),例如 get file status 我正在使用这个 web uri:

http://<HOST>:<PORT>/webhdfs/v1/<PATH>?op=GETFILESTATUS

这个<PORT>是NameNode WebUI http端口,默认值为50070,如图img2: source for img2

那些组件(ResourceManager 和 NaneNode)的主机是否总是安装在同一台主机上?

任何帮助将不胜感激,谢谢!

没有必要运行 resourceManager 和 nameNode 在一台机器上,我们在单个 node/small 集群中工作时有这样的配置---有几个节点---配置。当有大集群时,master节点通常运行 resourceManager、nameNode和secondaryNamenode在不同的机器上。

查看这些链接:

Master Nodes in Hadoop Clusters

HortonWorks: Typical Hadoop Cluster