Hadoop

Question

我已经在本地ubuntu系统上安装了hue，并在两个系统上安装了hadoop多集群系统。

Hadoop Version : 2.7.3
Hue Version :  3.12.0
Ozzie Version : 4.3.0

当我从 mysql 运行 sqoop 作业处理从 HDFS 导入数据时，我遇到了问题。我收到以下错误。

Caused by: java.net.NoRouteToHostException: No Route to Host from  Developer4/127.0.0.1 to cm:10020 failed on socket timeout exception: java.net.NoRouteToHostException: No route to host; For more details see:  http://wiki.apache.org/hadoop/NoRouteToHost

HDFS url hdfs://master:9000

我的/etc/hosts文件喜欢

192.168.1.149  master
127.0.0.1 developer4
192.168.1.161  slave

请指出我哪里做错了。甚至 ozzie 用于启动和停止命令的命令在命令行上也能正常工作。

Answer 1

您已经在本地主机系统中设置了 Hadoop 然后您需要删除或修改 core-site.xml 文件中的以下内容。

mapreduce.jobhistory.address 0.0.0.0:10020 Host and port for Job History Server (default 0.0.0.0:10020)

之后你需要使用下面的命令运行 jobhistoryservice。

sbin/mr-jobhistory-daemon.sh --config /home/developer4/hadoop-2.7.3/etc start historyserver

在您的本地主机上启用此命令端口后，希望这对您有所帮助。

Hadoop - 配置 HUE 时没有到主机的路由

Hadoop - No route to host while configuring HUE

mysql

sqoop

hue