HDP 2.1 到 2.2 升级 RHEL6

Question

我在 Red Hat Linux Enterprise 6 上有一个包含 1 个 NameNode 和 4 个 DataNode 的集群。我的 HDP 版本是 2.1。 Ambari 版本是 1.7，但我将其升级到 2.1。我想将 HDP 升级到 2.2 版。我读到如果我想将 HDP 从 2.1 升级到 2.2，我必须在将 Ambari 升级到 2.1 之前完成。当我将 hdp 升级到 2.2 时，ambari 没有看到任何变化，一切都无法正常工作。我正在使用本教程： http://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.2.0/HDP_Man_Upgrade_v22/index.html#Item1

我该怎么做？我试图将 ambari 降级到 1.7，但我遇到了很多错误。如果我现在尝试将 hdp 升级到 2.2，然后将我的 ambari 从 2.1 升级到 2.1.1，会怎样？它会工作吗？问题是我的时间很少。 提前谢谢你

Answer 1

我正在 development/testing 集群上从 HDP-2.0/Hadoop-2.2 升级到 HDP-2.2/Hadoop-2.6（可能是暂时的，在升级到 HDP-2.3 的途中）。到目前为止，我已经安装了更新的 HDFS 并 运行ning。还没有 starting/stopping 通过 Ambari 的 HDFS，我也没有 YARN 运行ning。 更新：在找到 HDP-2.2 文档（当前链接添加在下方）后，我将 YARN、MapReduce 和 Hive 运行。

以下是我如何走到这一步的粗略笔记：

1. 将 ambari-1.4 升级到 1.7
2. 更新每个节点上的 HDP yum repo 文件并使用 yum (cssh) 更新 http://public-repo-1.hortonworks.com/HDP/centos6/2.x/updates/2.2.6.0/hdp.repo
3. hdp-select
4. sudo su -l hdfs -c "/usr/hdp/current/hadoop-client/sbin/hadoop-daemon.sh start namenode -upgrade"
   /etc/hadoop/conf.empty/core-site.xml.rpmsave, hdfs-site.xml
   sudo su -l hdfs -c "/usr/hdp/current/hadoop-hdfs-datanode/../hadoop/sbin/hadoop-daemon.sh 启动数据节点"
   hadoop dfsadmin -finalizeUpgrade

[更新]

4. 将 ambari-1.7 升级到 2.1
   
5. 配置 yarn & mapreduce - yarn-site.xml, yarn-env.sh[?], container-executor.cfg, mapred-site.xml
   sudo ln -s /usr/hdp/2.2.6.0-2800/hadoop/libexec/ /usr/lib/hadoop/ # ambari 坚持 /usr/lib/hadoop
   停止启动资源管理器，启动节点管理器
   
6. hive-site.xml 在 conf.dist 和 conf.server 中；手动启动

以下资源很有用： https://cwiki.apache.org/confluence/display/AMBARI/Install+Ambari+1.7.0+from+Public+Repositories
https://developer.ibm.com/hadoop/blog/2015/10/08/back-up-and-restore-ambari-server-postgresql-database/
http://docs.hortonworks.com/HDPDocuments/Ambari-2.1.0.0/bk_Installing_HDP_AMB/content/_hdp_stack_repositories.html
http://docs.hortonworks.com/HDPDocuments/Ambari-2.1.0.0/bk_upgrading_Ambari/content/_Upgrade_HDFS_mamiu.html
https://wiki.apache.org/hadoop/Hadoop_Upgrade
http://docs.hortonworks.com/HDPDocuments/Ambari-2.1.0.0/bk_upgrading_Ambari/content/_complt_upgrd_21-23_upgrade_hdfs.html
http://solaimurugan.blogspot.com/2014/11/upgrade-hadoop-with-latest-version.html
https://cwiki.apache.org/confluence/display/AMBARI/Install+Ambari+2.0.2+from+Public+Repositories
[更新]
http://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.2.0/bk_upgrading_hdp_manually/content/index.html
http://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.2.0/bk_upgrading_hdp_manually/content/configure-yarn-mr-21.html
http://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.2.0/bk_upgrading_hdp_manually/content/start-hive-hcat-21.html
https://brucebcampbell.wordpress.com/2014/12/11/hortonworks-fix-missing-jar-error-in-hive-after-upgrade-to-hdp-2-2/