Databricks SQL 等同于 "Create Trigger" 逻辑?
Databricks SQL equivalent to "Create Trigger" logic?
是否有 Databricks SQL 等同于“创建触发器”逻辑?基本上每次 table X 获取新数据时,一些合并语句需要 运行 到另一个 table.
或者,是否可以在 table X 更新时触发笔记本?
更进一步,如何使用其他一些 Azure service/ADF 监控 table X 并触发所需的 SQL 语句?
期望的结果是能够在 table X 更新时更新 table Y 而不会阻塞其他 activity,因此如果解决方案是基于代码的,它应该例如,不要阻止笔记本中其余代码的执行。
如果您将数据存储在 Delta Format, you have access to a Change Data Feed。
如果数据更改是数据湖中出现的新文件,您还可以使用为每个新文件触发的 Autoloader to create a Streaming job。
是否有 Databricks SQL 等同于“创建触发器”逻辑?基本上每次 table X 获取新数据时,一些合并语句需要 运行 到另一个 table.
或者,是否可以在 table X 更新时触发笔记本?
更进一步,如何使用其他一些 Azure service/ADF 监控 table X 并触发所需的 SQL 语句?
期望的结果是能够在 table X 更新时更新 table Y 而不会阻塞其他 activity,因此如果解决方案是基于代码的,它应该例如,不要阻止笔记本中其余代码的执行。
如果您将数据存储在 Delta Format, you have access to a Change Data Feed。
如果数据更改是数据湖中出现的新文件,您还可以使用为每个新文件触发的 Autoloader to create a Streaming job。