Azure 数据流(将一个数据流的输出传递给管道中的另一个)
Azure Data Flow (Pass output of one data flow to another in the pipeline)
我有一个要求,我必须将 select 转换输出从一个数据流(数据流)直接传递到另一个数据流。
示例:
我有一个数据流,最后一步是 SELECT 转换。
我还有一个数据流需要把上面的SELECT转换输出作为输入
目前,我将第一个数据流的输出存储到 table 中,并在第二个数据流中从 table 获取数据,这需要很长时间才能执行。我想避免存储到 table.
谢谢,
卡尔提克
数据流要求您的逻辑在您从管道执行时以 Sink 终止,因此您必须将输出持久保存在 Azure 中的某个位置。下一个管道 activity 可以从该输出数据集中读取。
我有一个要求,我必须将 select 转换输出从一个数据流(数据流)直接传递到另一个数据流。
示例:
我有一个数据流,最后一步是 SELECT 转换。
我还有一个数据流需要把上面的SELECT转换输出作为输入
目前,我将第一个数据流的输出存储到 table 中,并在第二个数据流中从 table 获取数据,这需要很长时间才能执行。我想避免存储到 table.
谢谢, 卡尔提克
数据流要求您的逻辑在您从管道执行时以 Sink 终止,因此您必须将输出持久保存在 Azure 中的某个位置。下一个管道 activity 可以从该输出数据集中读取。