运行 在远程 Hadoop 集群上进行 Hadoop 测试

Running Hadoop tests on remote Hadoop cluster

我已经从 http://s3.amazonaws.com/public-repo-1.hortonworks.com/index.html#/HDP/centos6/2.x/updates/2.1.2.0

中提取了 hadoop 源代码

目前,hadoop 测试在同一 jvm 上启动一个小型单节点集群并执行测试。 但是,我的目标是 运行 在已安装的远程 hadoop 集群上进行 Junit 测试。我想将单元测试保留为 运行 集群外部的客户端。 无法确定 hadoop 测试是否支持相同的内容。

测试旨在 运行 它针对本地主机而不是真正的集群。 Bigtop Apache 是正在进行的一个。参考 https://wiki.apache.org/hadoop/HowToDevelopUnitTests