从 hbase 创建配置单元 table 时，列有 2 个元素而 hbase.columns.mapping 有 3 个元素错误

Question

当我运行使用以下命令创建配置单元 table 时出现以下错误 table。

示例是我的蜂巢 table 我正在尝试创建。 hloan 是我现有的 hbase table。请帮忙。

create external table sample(id int, name string)
STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' 
WITH SERDEPROPERTIES("hbase.columns.mapping"=":key,hl:id,hl:name") 
TBLPROPERTIES ("hbase.table.name"="hloan","hbase.mapred.output.outputtable"="sample");

错误：

FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. java.lang.RuntimeException: MetaException(message:org.apache.hadoop.hive.serde2.SerDeException org.apache.hadoop.hive.hbase.HBaseSerDe: columns has 2 elements while hbase.columns.mapping has 3 elements (counting the key if implicit))

Answer 1

根据错误描述，您的 create external table statement 有 2 列 id,name.

在 Hbase 映射中，您有 3 列 :key,hl:id,hl:name

创建具有 3 列的 table：

hive> create external table sample(key int, id int, name string)
STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' 
WITH SERDEPROPERTIES("hbase.columns.mapping"=":key,hl:id,hl:name") 
TBLPROPERTIES ("hbase.table.name"="hloan","hbase.mapred.output.outputtable"="hloan");

(或)

如果 key and id 列具有相同的数据，那么您可以在映射中跳过 hl:id。

创建具有 2 列的 table：

hive> create external table sample(id int, name string)
STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' 
WITH SERDEPROPERTIES("hbase.columns.mapping"=":key,hl:name") 
TBLPROPERTIES ("hbase.table.name"="hloan","hbase.mapred.output.outputtable"="hloan");

从 hbase 创建配置单元 table 时，列有 2 个元素而 hbase.columns.mapping 有 3 个元素错误

columns has 2 elements while hbase.columns.mapping has 3 elements error while creating hive table from hbase

hbase

hive

centos

hdfs

cloudera