AZURE Blob 存储上的 Hive ORC ACID table 可能用于 MERGE

Hive ORC ACID table on AZURE Blob Storage possible for MERGE

在 Hive MERGE 的 HDFS Hive ORC ACID 上没有问题。

在 S3 上不可能。

对于 Azure HD Insight 我不清楚文档中这样的 table 在 Azure Blob 存储上是否可行?寻求确认或其他方式。

我很确定不行。但是,请参阅我给出的更新答案。

根据Azure HDInsight官方文档Azure HDInsight 4.0 overview如下图,

据我所知,Hive MERGE 需要 MapReduce,但 HDInsight 不支持 Hive,因此也不可能。

问题张贴者更新

HDInsight 4.0 不支持 Apache Hive 的 MapReduce。请改用 Apache Tez。因此,对于 Tez,它仍然可以工作,并且从 https://docs.microsoft.com/en-us/azure/hdinsight/hdinsight-version-release Spark with Hive 3 和 Warehouse Connector 也是选项。