无法将数据加载到配置单元 table
Unable to load data into hive table
在 CDH 5.13 中,我使用 Hive shell 创建一个内部 table。但是当我尝试将数据加载到其中时,出现以下错误:
hive> LOAD DATA INPATH '/user/tom/data.txt' INTO TABLE managed_table;
Loading data to table demo.managed_table
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask. org.apache.hadoop.hive.ql.metadata.HiveException: Access denied: Unable to move source hdfs://quickstart.cloudera:8020/user/tom/data.txt to destination hdfs://quickstart.cloudera:8020/user/hive/warehouse/demo.db/managed_table: Permission denied: user=cloudera, access=WRITE, inode="/user/tom":hdfs:supergroup:drwxr-xr-x
我尝试了以下操作,但仍然无法加载文件。
[cloudera@quickstart /]$ sudo -u hdfs hadoop fs -chmod 777 /user/tom/data.txt
[cloudera@quickstart /]$ hdfs dfs -ls /user/tom/
Found 1 items
-rwxrwxrwx 1 hdfs supergroup 64 2020-01-24 00:57 /user/tom/data.txt
和
[cloudera@quickstart /]$ sudo -u hdfs hadoop fs -chmod 777 /user/hive/warehouse/demo.db/managed_table
[cloudera@quickstart /]$ hdfs dfs -ls /user/hive/warehouse/demo.db/
Found 1 items
drwxrwxrwx - cloudera supergroup 0 2020-01-24 05:28 /user/hive/warehouse/demo.db/managed_table
从错误来看,似乎需要目录级别的访问权限 /user/tom
Permission denied: user=cloudera, access=WRITE, inode="/user/tom":hdfs:supergroup:drwxr-xr-x
根据描述,chmod 777
似乎是针对目录 /user/tom
下的 .txt
文件而不是目录本身执行的。
尝试运行下面的方法,看看它是否能解决问题。
sudo -u hdfs hadoop fs -chmod -R 777 /user/tom/
在 CDH 5.13 中,我使用 Hive shell 创建一个内部 table。但是当我尝试将数据加载到其中时,出现以下错误:
hive> LOAD DATA INPATH '/user/tom/data.txt' INTO TABLE managed_table;
Loading data to table demo.managed_table
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask. org.apache.hadoop.hive.ql.metadata.HiveException: Access denied: Unable to move source hdfs://quickstart.cloudera:8020/user/tom/data.txt to destination hdfs://quickstart.cloudera:8020/user/hive/warehouse/demo.db/managed_table: Permission denied: user=cloudera, access=WRITE, inode="/user/tom":hdfs:supergroup:drwxr-xr-x
我尝试了以下操作,但仍然无法加载文件。
[cloudera@quickstart /]$ sudo -u hdfs hadoop fs -chmod 777 /user/tom/data.txt
[cloudera@quickstart /]$ hdfs dfs -ls /user/tom/
Found 1 items
-rwxrwxrwx 1 hdfs supergroup 64 2020-01-24 00:57 /user/tom/data.txt
和
[cloudera@quickstart /]$ sudo -u hdfs hadoop fs -chmod 777 /user/hive/warehouse/demo.db/managed_table
[cloudera@quickstart /]$ hdfs dfs -ls /user/hive/warehouse/demo.db/
Found 1 items
drwxrwxrwx - cloudera supergroup 0 2020-01-24 05:28 /user/hive/warehouse/demo.db/managed_table
从错误来看,似乎需要目录级别的访问权限 /user/tom
Permission denied: user=cloudera, access=WRITE, inode="/user/tom":hdfs:supergroup:drwxr-xr-x
根据描述,chmod 777
似乎是针对目录 /user/tom
下的 .txt
文件而不是目录本身执行的。
尝试运行下面的方法,看看它是否能解决问题。
sudo -u hdfs hadoop fs -chmod -R 777 /user/tom/