如何通过扩展 MetaStoreEventListener 编写 Hive 钩子来访问元数据级别的事件变化
How to write Hive hook to access meta data level event changes by extending MetaStoreEventListener
我有兴趣获取通常存储在配置单元服务器 2 中的配置单元元数据级事件——例如分区添加、删除、table 添加和删除等基于事件的触发器。
已经有一个抽象 class MetaStoreEventListener 但我无法找到相同的可靠实现来访问所有元数据相关信息。你们能给我一些正确方向的见解吗？
最好的方法是创建您自己的处理程序实用程序或框架，以环绕 hcatalog 包中的传统 NotificationListener class（它扩展了 MetaStoreEventListener class）。
如果您决定单独使用 NotificationListener class，则可以随时使用以下内置侦听器：
- 分区（Add-onAddPartition、Alter-onAlterPartition、Drop-onDropPartition）
- 数据库（Create-onCreateDatabase、Drop-onDropDatabase）
- 表（Create-onCreateTable、Alter-onAlterTable、Drop-onDropTable）
此外，您可以独立探索 HDFS 包处理程序。或者，在更高级的方面，编写您自己的独立框架，封装 HCatalog 和 HDFS 提供的默认事件处理程序。
我有兴趣获取通常存储在配置单元服务器 2 中的配置单元元数据级事件——例如分区添加、删除、table 添加和删除等基于事件的触发器。 已经有一个抽象 class MetaStoreEventListener 但我无法找到相同的可靠实现来访问所有元数据相关信息。你们能给我一些正确方向的见解吗？
最好的方法是创建您自己的处理程序实用程序或框架，以环绕 hcatalog 包中的传统 NotificationListener class（它扩展了 MetaStoreEventListener class）。
如果您决定单独使用 NotificationListener class，则可以随时使用以下内置侦听器：
- 分区（Add-onAddPartition、Alter-onAlterPartition、Drop-onDropPartition）
- 数据库（Create-onCreateDatabase、Drop-onDropDatabase）
- 表（Create-onCreateTable、Alter-onAlterTable、Drop-onDropTable）
此外，您可以独立探索 HDFS 包处理程序。或者，在更高级的方面，编写您自己的独立框架，封装 HCatalog 和 HDFS 提供的默认事件处理程序。