没有沙盒的 Apache Kylin 安装

Apache Kylin installation without Sandbox

我想知道是否有关于 Apache Kylin 安装没有任何沙箱(如 cloudera、hortonworks)支持的资源。我设法做到了以下几点:

  1. 安装 Hadoop 2.6
  2. 安装蜂巢
  3. 安装 HBase

然后我使用了来自 kylin 站点的二进制文件,到目前为止能够 运行 它。当我尝试构建一个多维数据集时,问题就开始了,map reduce 作业卡在了第 2 步。我在想它是否仍然假设处于沙盒模式并且根本不向 hadoop 提交作业(hadoop jobtracker 中没有条目).

所以我需要关于这两个问题的解决方案: 1. kylin 在纯 hadoop 设置中的可能配置(无沙箱) 2. 以某种方式启用 kylin 设置以将作业提交到 hadoop。

你可以安装 hadoop-2.6 , hive-0.14 ,hbase-0.98.8-hadoop2 with Zookeeper inbuilt or external zookeeper-3.5 现在你可以 运行 kylin-v1.1-release 就可以了 如果您仍然遇到问题,请在此处粘贴日志

Kylin 中没有这样的沙箱或非沙箱配置。只要确保 Kylin 运行的机器正确设置了 hadoop 就可以了。

在场景下,kylin.sh 使用 hbase classpathhive -e set | grep 'env:CLASSPATH' 检测 hadoop 设置。如果您不确定 Kylin 连接到哪个集群,请仔细检查这些命令是否按预期工作。

如果 Kylin 在提交 MR 作业时遇到问题,请检查两个地方。首先是hadoop resource manager,看job是否真的提交了。有时只是 运行 慢。第二次检查 kylin.log,看是否有任何异常。 Post 登录 kylin dev 邮件列表,有人可以提供帮助。