尝试将数据从本地 SQL 数据库移动到 Azure Delta 湖时出错

Question

我正在尝试将大量参考数据从本地 SQL 服务器移动到 Delta lake 以用于数据块处理。为了移动这些数据，我正在尝试通过简单的复制数据 activity 使用 Azure 数据工厂。但是一旦我启动管道，我就会收到以下错误。我用谷歌搜索了这个错误，但找不到任何匹配项。

请注意三角洲湖中不存在汇三角洲 table？这个错误是否意味着我在将数据移动到 delta lake 之前手动创建了 tables？

对目标复制数据 1 的操作失败：ErrorCode=AzureDatabricksTableIsNotDeltaFormat，tablebenefit 不是增量格式。

Answer 1

使用数据流而不是复制任务解决了这个问题。