创建 Athena table 时如何处理 json 文件中文件名中的空格

Question

我的 Json 文件的字段名称中包含空格，例如“客户 ID”。json 文件位于 S3 存储桶中。因此，当我尝试创建 Athena table 在这个 json 文件上，它抛出错误，因为当删除带空格的字段时，字段名称 spaces.it 加载正常，而 loading.How 我是否处理这种情况以便整个数据正确获取已加载。

Answer 1

如果您有机会将您的json文件转换为 csv

您可以尝试类似的方法：

CREATE EXTERNAL TABLE IF NOT EXISTS db.table_name (
    .......
    `Customer_ID` int , 
    .......
ROW FORMAT SERDE 'org.apache.hadoop.hive.serde2.OpenCSVSerde'
WITH SERDEPROPERTIES (
    'separatorChar' = ',',
    'quoteChar' = '\"',    
    'escapeChar' = '\' ) 
STORED AS TEXTFILE LOCATION 's3://location'
TBLPROPERTIES ('skip.header.line.count'='1')

主要思想是 - TBLPROPERTIES ('skip.header.line.count'='1') 此处跳过 .csv 文件中的 header 并设置 自定义列名

创建 Athena table 时如何处理 json 文件中文件名中的空格

How to handle spaces in filed names in a json file while creating Athena table

json

amazon-athena

spaces

field-names