informatica - 谁能解释一下如何对输入数据执行映射和转换

Question

我一直在搜索，但没有很好地解释映射和转换如何处理输入数据。post。

• 是否为每条记录执行整个映射（我知道这不可能是排序器和聚合等的情况。需要查看整个数据（或定义的批量大小）才能执行其目的).

• 可能取决于每种转换类型 - 某些转换类型可能会在发布输出之前保留整个输入数据（或定义的批处理大小）。

这个问题可能适用于所有数据集成工具。

Answer 1

简而言之：这取决于转换类型 - 例如Expression 正在处理行而不缓存它们，Aggregator、Sorter 需要缓存所有输入数据，Joiner 只缓存 Master 管道。